トピックス

  
投稿日時 2024-09-21 15:50:02 (911 ヒット)

2024年9月6-7日に京都市にて、ASDoQサマーワークショップ2024を開催しました。昨年に引き続き生成AIがテーマでしたので、総勢17名と過去最大の参加者数となり、非常に高い関心が伺えました。

全体テーマは、2024年4月にリリースしたばかりの「システム開発文書品質モデルVer.2.0a」(以下、ASDoQ文書品質モデル)を生成AIを導入した開発プロセスにて活用することです。ワークショップでは、皆で手分けしながらさまざまなチャレンジをすることができ、参加者の皆さまは広く多くの気付きを得ることができたようです。 



参加者の皆さんは、9月6日(金) 12時半頃会場に集合し、お弁当を食べながら参加者間の交流を深めました。

13時より自己紹介。そして、運営委員の山本雅さんより、今回のサマーワークショップの実施概要を説明していただきました。

今回の参加者は多数のため、1人1人の関心は異なります。そこで、参加者から今回取り組みたいことを募り、最終的に以下の4テーマを選定し、グループに分かれて取り組むことになりました。


  • テーマ1:ASDoQ文書品質モデルの測定項目や例を追加する

  • テーマ2:ASDoQ文書品質モデルを用いた文書の添削

  • テーマ3:ASDoQ文書品質モデルを用いた開発文書の点数付け

  • テーマ5:生成AIを使った開発文書の作成




テーマ1:ASDoQ文書品質モデルの測定項目や例を追加する

現在公開中のASDoQ文書品質モデルは、測定項目の例や違反例の記載が少なくわかりづらいという問題があります。そこで、ChatGPTを活用して測定項目の例や違反例を追加する取り組みを行いました。テーマ1は山本雅さん1人での取り組みでした。

ASDoQ文書品質モデルをChatGPTに理解させることが重要なため、モデルを読み込ませた上で、どんなことが書かれているかの解説をプロンプトで記述しました。また、空白のセルを埋めるように指示しました。

取り組みの結果、多くの測定項目の例や違反例を新規作成したり、説明文をより明確に作り直すことができ、ASDoQ文書品質モデルを改善することができました。この改善したモデルをChatGPTに知識として与えることで、活用時の水準が上がる期待が持てます。一方、モデルのファイルデータを自動で改善することは、プロンプトの試行錯誤叶わず、期待通りの動作になりませんでした。 



テーマ2:ASDoQ文書品質モデルを用いた文書の添削

テーマ2のグループでは、任意の開発文書(要件定義書)を与え、ASDoQ文書品質モデルを用いた文書の添削を試みました。

指摘箇所と改善案といった形式で添削はしてくれますが、指摘根拠となる品質特性/品質副特性が誤って出力されます。どうやら、ChatGPTが品質モデルを正しく理解できていない様子です。この要因は、品質モデルをEXCELファイルの表形式で与えているためと分析しました。 

対策として、文章形式の「システム開発文書品質モデルの解説文書」を作成し、品質モデルの表はPDF形式にして、プロンプトを改善しました。これによって、指摘箇所と品質特性や測定項目との対応づけは、ある程度改善されました。 しかし、対象の開発文書から一部の結果しか出力されないといった課題が残りました。




テーマ3:ASDoQ文書品質モデルを用いた開発文書の点数付け

テーマ3のグループでは、要求仕様書の点数付けに挑戦しました。

最初にブレーンストーミングを行い、要求品質として議論に挙がりやすい特性として、ASDoQ文書品質モデルの「理解容易性」「無矛盾性」「構造性」に焦点を当てることにしました。

「理解容易性」については、形式的には、点数付けによる評価結果だけでなく、評価根拠や改善案の提示まで成功しました。そこで、この結果が本当にASDoQ文書品質モデルを用いて適切に実施されているかの検証に挑戦しました。しかし、品質モデルがどのようにGPT内に取り込まれ判断されているかを明らかにすることはできず、正確性と信頼性に疑問を感じる結果となりました。

「無矛盾性」については、単一文書内の複数の要求間の矛盾を評価スコープとして取り組みました。最初は、曖昧性や実現性など、“矛盾点”以外の指摘がありました。そこで、ChatGPTに要求工学の基礎知識を付与してみたところ、“矛盾点”以外の指摘を減らすことができました。しかしながら、指摘の網羅性には課題がありそうです。

「構造性」については、IEEE 830の要求仕様書テンプレートと対象要求仕様書を比較し、構造的違いと各項目の説明内容不足について、ChatGPTに採点させることができました。 

その他、「揺らぎ」検出の指摘漏れの改善や、仕様書から専門用語を抽出して用語集を作成する、といった取り組みも行いました。




テーマ5:生成AIを使った開発文書の作成

テーマ5のグループでは、Googleの生成AIであるGeminiを活用して、企画書の作成支援に挑戦しました。 

企画書作成に関する現場課題として、品質のばらつき、初心者の業務非効率さ、統一的なフォーマットが無い、などが挙げられます。そこで、まず企画書テンプレートフォーマットを検討しました。そして、企画したいテーマ(製品概要やペルソナなど)を与えることで、生成AIに製品企画書を自動生成してもらうことができました。 

今後は、生成AIと壁打ちしながら企画書をブラッシュアップするプロセスも必要とのことです。




【ワークショップ全体の様子】

 

【集合写真】


今回のサマーワークショップでは、「ASDoQ文書品質モデルの適用」や「開発プロセスへの活用」といった点で、昨年開催よりも制約の多さと実用を目指す点で難易度の高いものになりました。しかし、この1年間で多くの方が生成AIを使いこなし、豊富なノウハウを獲得されていたこともあり、参加者間でアドバイスし合いながら取り組むことができました。

2日間じっくり取り組んだ結果、文書品質を高めるためにASDoQ文書品質モデルを上手く活用する方法の立案、生成AIの新たな業務活用方法の発見、生成AIの活用スキルの向上、などが実現できたのではないかと思います。

今回のサマーワークショップの結果は、ASDoQ大会2024のチュートリアルやポスター発表でも報告する予定です(ASDoQ大会2024はこちら)。本報告だけでは伝わらないことが多いと思いますので、ASDoQ大会2024に是非参加していただき、サマーワークショップで活動したメンバーと直接意見交換してみてください。


投稿日時 2024-06-10 20:47:50 (1193 ヒット)

 2024年度定期総会および第34回研究会を202465() 16:00からオンライン(Zoom)で開催しました。

1.2024年度定期総会

はじめに、本日の総会出席者の確認を行い、出席者および委任状提出の合計70名により本総会の成立条件(会員数の1/2)を満たしていることを確認しました。

続いて、事務局から2023年度の事業報告と決算報告、2024年度の事業計画と収支計画についての報告が行われました。各議案は、出席者および委任状提出者を含む参加者の過半数の賛成により承認されました。

会員は、総会資料を閲覧できます。[会員メニュー - 活動の記録 - 第34回研究会(定期総会)]をご覧ください。

 

2.第34回研究会

34回研究会では、「これからのシステム開発文書品質を考える~システム開発文書品質モデルVer.2.0aをふまえて~」のテーマで、システム開発文書の品質向上について、参加者の皆様と意見交換を行いました。

今回の討議は、オンラインホワイトボードアプリMiroを使用して参加者の皆様から意見を出していただく形で進めました。

「システム開発文書やその品質で解決したい問題は何か?」、「システム開発文書の役割は今後どう変わるか?」、「システム開発文書品質モデルにAIを応用するアイデアは?」の3点について討議を行い、参加者の皆様から多くの意見をいただきました。

今回の討議で皆様からいただいた内容を今後のASDoQの活動につなげていきたいと考えております。

研究会の資料はこちらから(資料内のmiro討議の場所のリンクから討議内容が確認できます)

 

 

3.オンライン交流会

 研究会での議論を基に、生成AIの文書品質モデルへの応用について参加者の皆様と活発な議論を交わしました。様々な視点からの意見や考えが語られ最後まで大変盛り上がりました。

 

4.今後のASDoQのイベント

以下を予定しております。皆さん、ぜひご参加ください。

  ・サマーワークショップ 96日(金)、7日(土)KKR京都くに荘 

   サマーワークショップのお誘い

 ・ASDoQ大会2024 111日(金)名古屋大学 東山キャンパス内にある野依記念学術交流館


投稿日時 2024-04-06 15:21:54 (1296 ヒット)

 2024年3月22日(金)に第33回研究会をオンラインとリアル会場(ソニーシティー大崎)のハイブリッドで開催しました。

 1. 講演~ASDoQ大会2023ポスター発表から~
 「生成AIがもたらすシステム構築の新たな可能性」 井上 祐寛 氏(株式会社クレスコ)
 ASDoQ大会2023で最優秀賞を受賞したポスター発表(「生成AIを活用した、要件定義漏れの予防と品質の向上」)の活動について紹介していただきました。
ChatGPTに要件定義ガイドの情報を与え、要求仕様書の漏れを抽出できるかという実験を行った結果、AIが要件漏れを指摘できることが示されましたが、指摘の精度や量についてはさらなる検証が必要とのことです。
本講演ではこの活動を進める際、生成AIが人に変わって成果物を作成できるのでは?という新たな考えに至り、電動キックボードのライドシェアサービスを題材に生成AIにシステム構築をさせた実験についてお話しいただきました。サービスの概要、役割を設定し、作成を指示するプロンプトを与えることで、機能一覧、画面一覧、テーブル設計、ER図など、一連の成果物を作成することが可能であることを紹介していただきました。生成AIが作成した成果物への評価やより精度の高い成果物を作成する方法の検討が必要とのことでしたが、生成AIが生産性向上に寄与する可能性を示されました。
発表資料はこちらから。
 
2.パネルディスカッション
パネルディスカッションでは、講演者の井上さんとASDoQの粕渕さんとで、開発プロセスの変化、人が果たすべき役割、良い成果物を得るための指示文書などをテーマとして意見交換が行われました。もう一人のパネリストとして、ChatGPTに意見を聞く場面もありました。
また、事前に参加者にお願いしたアンケートの質問に対して、井上さんにお答えいただく場や、その場での参加者からもご意見やご質問も出て、みなさんの興味の高さが伺えました。今後の生成AI活用のヒントになったのではないでしょうか。
 
 
 3.システム開発文書品質モデル改訂活動の報告
次にASDoQの塩谷さんから、システム開発文書品質モデル Ver.2.0のリリース計画、Ver.1.1からの変更点について報告していただきました。
まもなくリリースとなりますので、モデルの活用方法やさらなる改訂に向けて皆様からのご意見をお待ちしております。
 
4.今後のASDoQイベント
以下を予定しております。詳細が決まり次第ご案内しますので、皆さん、ぜひご参加ください。
・6月5日(水)定期総会&第34回研究会 @名古屋大学&オンライン(ハイブリッド開催)
9月6日(金)ー 7日(土)サマーワークショップ @KKR京都くに荘
111(金) ASDoQ大会2024 @名古屋大学 野依記念学術交流館
 

 


« 1 (2) 3 4 5 ... 27 »

サイト内検索

ログイン

ユーザ名:

パスワード:

次回からIDの入力を省略



パスワード紛失