トピックス

2023年9月1-2日に京都市にて，ASDoQサマーワークショップ2023を開催しました．

 

 

★★1班★★

ChatGPTを利用することで，要求仕様書から基本設計書を作成する手助けができないかについて実験しました．

まず，ChatGPTに話題沸騰ポット要求仕様書を読み込ませてテキスト（マークダウン）を作成するよう指示します，その後，UML描画ツールmermaidを利用して，マークダウンからUML/SysMLの各図（ブロック図，ステートマシン図，シーケンス図）を描画しました．

 

■やったこと

・要求仕様書からマークダウンを作成できた．結果としてUML/SysML図を作成できた．

 

■わかったこと

・現時点では，数十ページの仕様書を与えても最初の一部しか理解してくれない

　→2日目は小さな仕様を作成し進めた

・ブロック図：継承関係がまずい

・シーケンス図：1回タイマーがアイドル状態に戻ってくれない

・UML状態遷移図：状態を理解できていない

 

■次にやること

・ページ数の多い仕様書はあらかじめ分割し，それぞれを要約させてからChatGPTに与える

・近々利用できるChatGPTのファインチューニング機能を利用してページ数の多い仕様書を全部理解してくれるか実験する

　現時点ではLlamaIndexを使って仕様書をインデックス化しクエリーと組合わせることでファインチューニングしているかのようなプロンプトを得られる．（4班のワークより）

 

 

★★2班★★

ChatGPTを利用することで，じゃんけんゲームの自動プログラミングが可能かについて実験しました．

 

■やったこと

・初日は，ChatGPTに概要仕様文を与えAndroid Studioのソースコードを作成するよう指示し，ソースコードを得ることができました．コードはほぼ修正不要で動作確認できました．

・二日目は，概要仕様文から要求仕様書と基本設計書を作成し，これらからソースコードを作成する実験を行いました．

 

■わかったこと（得られた好ましい結果）

・ChatGPTは直接的なソースコードの作成の要求に応えることができる．

　簡単なプロトタイプの作成に活用できるのではないかと思われる．

・ChatGPTと対話的なやり取りで，プログラムの修正や改善ができる．

　問題点や改善したい点などを具体的に伝えて，改善する方法がとれるのではないか．

・UMLの図もテキスト形式で表現可能であれば，得ることができる．

　要求から設計させた結果として，シーケンス図やクラス図が得られた．

 

■わかったこと（問題点）

・所望の開発文書を書いてほしいとしたとき，入力を正確に伝える必要がある．

　項目立てや各項目で定義してほしい内容を伝えると，ほぼそのまま文書化されることがある．

　その場合はChatGPTの役割は清書してくれるところになるだろうか．

・仕様書を入力として，次の工程の作業をしてもらうとき，漏れがあることがある．

　入力の仕様書に定義したことが次の工程の設計に反映されていないことがある．

　指定した事柄が正しく反映されているか，内容が正しいか，確認する必要がある．

 

■次にやること（さらなる利用における課題）

・具体的な事柄について対話的な方法をとることで積み上げたり，改善したりする点がChatGPTは得意と思われる．

　設計書を作成する際も，まとまった入力で一度でよい結果を得るよりも，対話的に進める方が良い可能性がある．

・設計書を作成させるとき，こちらが想定している仕様を正確に伝える必要がある．

　ChatGPTをその相手としたときに，どのような伝え方をするのが適切かを考える必要ある．

・まとまった入力に対する出力については特に，内容を確認する必要がある．

　トレーサビリティが取れていれば良いのだが，それを担保させる方法はあるだろうか．

 

 

★★3班★★

ChatGPTを利用することで，テスターの支援ができるかについて実験しました．

具体的には，開発対象をWebサービスのログイン機能として，開発から追加機能のメモだけが入手できたというシチュエーションで変更要求仕様書と追加機能の差分テスト仕様書を作成できるかを試しました．

まず，IDとパスワードだけのシンプルなログイン機能の要求仕様書を自動作成し，次に二要素認証機能（二段階で認証してログインさせる機能）の簡単な要求メモを与えて変更要求仕様書を自動作成しました．さらに変更要求仕様書の変更箇所を明示することで，差分テスト仕様書の作成を試みました．

 

■やったこと

・要求仕様書フォーマットしてIEEE Std 830に倣うよう指示を与えるだけで，機能のメモから要求仕様書が作成できた．

・要求仕様書と追加機能のメモから変更要求仕様書を作成できた．

　空白の項目を一般的な例で埋めるよう指示するとそれらしい文章を追記してくれた．

・テスト観点と仕様書例を与えることで，欲しいテストケースが得られた．

 

■わかったこと

・要求仕様書作成指示の際にIEEE Std 830やESPRなどできるだけ詳細な条件を与えた方が良い．

・変更要求仕様書に以前からの機能か追加機能かを明確にするよう指示したが，正しく明確化できなかった．

・最終チェックは人間が行う必要がある．人間にはチェックできる能力が必要

 

■次にやること

・ASDoQのシステム開発文書品質特性を与えることで，要件が品質特性のどれに該当するかを自動的に付与できるかを試してみたい．

 

 

★★4班★★

ChatGPTを利用することで，要求仕様書やテスト仕様書の漏れを指摘できるかについて実験しました．
○×ゲームやムーブレボ要求仕様書を題材にして実験を進めました．

 

■やったこと

・質の高い結果を得るため，スパイラルアップ（何度かやりとり）をすることで，これによりテスト仕様の漏れに気がついた．

・それでも完璧な結果は得られない，最終的には人間が修正してやる必要がある

・LlamaIndexにより現時点でのChatGPTの容量制限を超えるローカル文書をインデックス化しプロンプトから扱えた．

　（依頼文をクエリに置換え順次プロンプト呼び出す処理を自動で行ってくれる）

 

■わかったこと

・ロールを与えることが重要である．

・ロールのバリエーションを複数用意しておくと素早く色々な観点を得られて効率が良い．

・要求漏れを指摘させることは難しかった．

・追加のアイデアをもらえるような依頼方法が有効であった．

・自分のロールじゃないロール（開発者ならテスター）からの指摘が有効であった．

　一人プロジェクトなどでは良い

・ステップ・バイ・ステップのプロンプトが有効であることが分っている．

　要求定義や設計やテストなどのアクティビティをさらに細分化したステップに分解すれば，

　利用価値が高まるはず．目次を検討する価値はありそう．

 

■次にやること

・ChatGPTに分かりやすい記述方法を試す．

 

 

【1班・2班のワークの様子】

 

 

 

【3班・4班のワークの様子】

 

 

2日間じっくり取り組むことで開発プロセスやシステム開発文書にChatGPTを取り入れるコツや手法など多くのものを得ることができました．今回のサマーワークショップの結果は、ASDoQ大会2023のポスター発表でも報告する予定です．文字だけでは十分に伝わらない部分もありますので，ASDoQ大会のポスター発表で，ぜひ活動した班メンバーと直接意見交換してみてください．

 2023年度定期総会および第32回研究会を2023年6月6日(火) 16:00からオンライン(Zoom)で開催しました。

１．2023年度定期総会

はじめに、本総会の出席者として、出席者34名、委任状提出54名により本総会の成立条件（会員数の1/2）を満たしていることを確認しました。

続いて、事務局から2022年度の事業報告と決算報告、2023年度の事業計画と収支計画、役員改選について報告しました。各議案は委任状を含む参加者の皆さんにより承認されました。

会員は、総会資料を閲覧できます。[会員メニュー - 活動の記録 - 第32回研究会(定期総会)] をご覧ください。

２．第32回研究会

研究会では、粕渕清孝さん（SCREENアドバンストシステムソリューションズ/ASDoQ運営委員）と山本雅基さん（名古屋大学/ASDoQ幹事）から「ChatGPTを用いた文書品質の向上は可能か」というテーマで講演が行われました。

講演の前半は粕渕さんから、ChatGPTの技術を解説していただきました。発表資料はこちらから。

従来の自然言語処理とは異なるMulti-head Attentionによって構文解析がされていること、OpenAIの独自技術であるPP（Proximal Policy Optimization）を使用して強化学習を行っていることなどをわかりやすく解説していただきました。

今後の見通しとしては、さらなるマルチモーダル化や推論が可能になること、人間を超える意味理解の実現の可能性など、さらなる進化についてお話しいただきました。

後半は山本さんから、システム開発へのChatGPTの活用に関してお話していただきました。発表資料はこちらから。

ChatGPTを「コパイロット」として使い、要求定義工程でブレスト相手やレビュー相手としてChatGPTを活用し要求仕様書を共同で作成していく方法を、Windowsで動作するストップウォッチアプリ開発を例に、ChatGPTとやりとりを踏まえて紹介されました。

その経験を通じて、ChatGPTの活用を前提とした開発プロセスの構築の必要性を提案されました。その上で、ASDoQ開発文書品質の測定、品質準拠のライティングや校正への活用検討、さらに技術者に要求されるスキルの再定義の必要性なども提案されました。

文書品質に取り組むASDoQは、文章を生成する生成系AIと無関係ではいられません。皆さんとアイディアや事例を共有し、生成系AIとの付き合い方に取り組んでいきましょう。

３．オンライン交流会

研究会での議論を踏まえて、生成系AIについて参加者の皆様と議論を交わしました。さまざまな意見や考えが語られ最後まで大変盛り上がりました。ご参加いただきありがとうございました。

４．今後のASDoQイベント

以下を予定しております。詳細が決まり次第ご案内しますので、皆さん、ぜひご参加ください。

　　・9月1日（金）、2日（土）　サマーワークショップ　＠KKR京都くに荘
　　・10月27日（金） ASDoQ大会2023 ＠名古屋大学 野依記念学術交流館

 　2023年2月14日（火）15:00-17:00に，（Zoom）にて第31回研究会を開催しました．34名が参加しました．

　今回の研究会は，「技術者のための日本語文法入門　─ 文章術本を深読みし、開発文書作成に役立てる」　と題して，編集プロダクション風工舎の川月現大さんに，ご講演いただきました．川月さんは，大手ソフトウェア会社でシステム開発のご経験があり，その後に編集会社を立ち上げられました．元開発者そして現編集者の立場で，ASDoQに参加されています．

　ご講演は，文章術本を使いこなすための基礎知識および技術文書作成で役立ちそうな指針についての解説でした．私たちの多くが読んだことがある『理科系の作文技術』など，複数の文書術の書籍を取り上げて，その内容に一歩踏み込みながらお話しくださいました．

　私は，日本語の奥行きの深さが改めて分かりました．川月さんがおっしゃるように，日本語母語話者のための「日本語文法書」や，私たち開発者などの実務に役立つ「日本語辞典」は，まだ完成されていません．注意深く考えながら日本語の勉強を続けていきたいと，決意を新たにしました．何時までも勉強は続きます． 

川月さんのご厚意により，当日の資料の一部（「は」と「が」の使い方）を，こちらからダウンロードできます．