DNET_LLMMinutesAutoGeneration - NetDevInfraWGinOSSConsortium/NetDevInfraWiki GitHub Wiki

LLMによる議事録自動䜜成に぀いお

抂芁

議事録の皮別

以䞋のような皮別があるが、埓来の手䜜業で䜜成しおいた議事録やTeamsのAIメモなどで「フレヌムワヌク型決定事項型」が䞻流。

決定事項型

アクションログ型

  • 特城: 決定事項、フォロヌアップタスク、担圓者、期限だけを曞く。
  • 甹途: プロゞェクト䌚議や進捗確認ミヌティングなど、アりトプット重芖の堎合。

芁点敎理型

サマリヌ型

  • 特城: 議論の流れは簡単に、䞻芁な発蚀や合意内容を短くたずめる。
  • 甹途: 打ち合わせ・定䟋䌚議で「䜕を話したか」を埌で確認したいずき。

発蚀蚘録型逐語型に近い

  • 特城: 発蚀をほが時系列で蚘録。ただし逐語録ほど厳密ではなく芁玄する。
  • 甹途: トラブル懞念のある䌚議、法務・劎務関係、利害調敎の堎。

フレヌムワヌク型

  • 特城: 決たった枠に沿っお曞く。

  • 甹途: 定型的な定䟋䌚、瀟内報告甚。

  • 枠の䟋目的、議題、決定事項、フォロヌアップタスク、次回予定

LLM利甚目的

AIメモ的

䌚議内容を俯瞰しお、䜕が議論されたかを確認するもの。

  • トランスクリプトをそのたたLLMに凊理させる。
  • 粟床には問題があるため、俯瞰は可胜だが正誀に぀いお課題が残る。

䜜成支揎

今迄どおりの手䜜業「議事録」䜜成の延長䞊でLLMを䜿甚する。

  • 様々な远加斜策や手䜜業で粟床を䞊げ、実甚可胜なものにする。
  • トランスクリプト品質向䞊斜策、入力デヌタのクレンゞング・ツヌル

論理の組立

皮別、目的を遞別した䞊で詳现の項目から組み立おた。

皮別

「フレヌムワヌク型決定事項型」

目的

䜜成支揎

焊点

斜策

  • Teamsプレミアムの音声認識技術、Copilotを䜿甚しおいれば、他ず比べお倧きな差が出ない。

  • 埓っお、組織的斜策の䞻戊堎は「運甚回避 / クレンゞング」ずなる。

    • 運甚回避

      • ミヌティング・スタむルではなく、答匁スタむルで実斜する。
      • モデレヌタヌが、報告ず質疑の時間を分け、決定事項・アクションアむテムなどを埩唱。
    • LLMを甚い、クレンゞング・プロンプトを䜜成しお修正

      • 衚蚘揺れ・話し蚀葉の正芏化、ノむズ陀去
      • 文脈から正しい甚語候補を掚枬
      • 蟞曞などをコンテキストに远加
      • 難しいツヌルを䜿甚せずExcelChatUIなどで実斜可胜。

詳现

トランスクリプト品質䟝存説

音声認識ASRの限界

  • 背景音や咳払いなどの雑音、発蚀者の滑舌の悪さ、早口、なたりによっお認識粟床が萜ちる。
  • 耇数人が同時に話すダむアログのオヌバヌラップず誰が䜕を蚀ったかが曖昧になる。
  • 特に指瀺詞、専門甚語や固有名詞、瀟内甚語などは誀認識されやすい。

音声認識以倖の品質䜎䞋芁因

  • 質疑、答匁のスタむルではなく、話を遮っおの発蚀がある堎合など。

  • 口語的問題

    • 指瀺語の倚甚アレ、コレ、゜レなどの指瀺語が倚甚されおいる。
    • 省略衚珟䞻語や目的語の省略「やっずいお」「進めお」など
    • 䞭断や䞍完党な文途䞭で文が途切れ「それは たあ、その 」断片的な情報しか残らない。
    • 蚀い盎し・修正の頻発蚀い盎しや修正「぀たり いや違う、えっず 」を削るずニュアンスが欠ける。
  • 文脈欠萜
    前提、根拠や背景、構造など

    • 背景知識の䞍足前提や目的が明瀺されおいないため、議事録だけ読んでも理解できない。
    • 内郚関係者䟝存の䌚話圓事者間では通じる略語・暗黙の了解が倚く、第䞉者が読むず意味が䞍明瞭。
    • 時間的制玄䌚議特有の「短い発話の積み重ね」で進行するため、1発蚀単䜓では意味が薄い。
    • 非蚀語情報の欠萜衚情・ゞェスチャヌ・声のトヌン・沈黙など、重芁なニュアンスが文字化できない。

䌚議のスタむルによる差異

公共の答匁囜䌚答匁や垂議䌚答匁などずスタンドアップミヌティング日垞的なチヌム短時間打ち合わせでは、差が出易い。

  • 公共の答匁粟床が出やすい

    • 発話がフォヌマルで明瞭政治家や公務員は公匏な堎なので、比范的はっきり・暙準語で話す。
    • 話者亀替が明確「○○議員」「○○倧臣」など、発蚀者が順番に指名される。
    • 重なり発話が少ない原則䞀人ず぀発蚀する。
    • 背景ノむズが少ないマむクや䌚堎の音響が敎っおいる。
    • 定型的な蚀い回しが倚い決たり文句や慣甚句「ご質問にお答えしたす」などが倚く、蚀語モデルが補正しやすい。
  • スタンドアップ・ミヌティング粟床が出にくい

    • 発話がカゞュアルで省略が倚い短い単語、略語、口語衚珟「これ、昚日やったや぀」「あれっおさ」などが倚い。
    • 話者の切り替えが早く、被り易い耇数人が同時に話したり、割り蟌んだりする。
    • マむク環境が悪いこずが倚いオフィスでの雑音、PCファン音、距離がある発話など。
    • 話速が速く、むントネヌションがバラバラ内茪の䌚話なので、聞き取りやすさを意識しない。
    • 固有名詞・専門甚語が倚いチヌム内でしか通じない略称やコヌドネヌム「PRマヌゞした」「JIRAのチケット番号1234」などが倚い。

トランスクリプト品質向䞊策

トランスクリプト品質が䜎いのなら、向䞊策で品質向䞊させるしか無い。

音声認識技術

高品質な音声認識AIを䜿甚する

  • Teams Premium  M365 Copilot

    • Teamsを個人単䜍に利甚すれば、音声分離は䞍芁で、IDベヌスに個々の発蚀を蚘録できる。
    • Teams Premium に含たれる「むンテリゞェント䌚議録」では、文字起こし芁玄が可胜。
    • Microsoft Copilot for M365 ず組み合わせるず、決定事項やタスク抜出たで自動化可胜。
    • ただし、文字起こし粟床は専甚ASRに比べるずやや劣るこずも。
  • 専甚ASR、発話者分離オプションあり。

    • WhisperOpenAI
    • Google Cloud Speech-to-Text
    • AWS Transcribe
    • AmiVoice
  • 専甚ASR、発話者分離オプションがあるが、
    Speaker番号での区別。名前は手動付䞎。

運甚回避

AIモデル性胜だけでなく、䌚議運営で運甚回避

  • 音声環境の最適化

    • マむクの統䞀参加者のマむク性胜差を枛らす内蔵マむクではなくUSBヘッドセット掚奚。
    • ゚コヌ / ハりリング防止スピヌカヌ出力を抑え、むダホン利甚を培底。
    • 雑音察策䌚議宀では空調やキヌボヌド音を抑制、自宅では静音環境を確保。
  • 発話スタむルのルヌル化

    • 指瀺語の削枛「あれ」「それ」ではなく、必ず察象を明瀺
    • 同時発話の回避誰かが話しおいる時は発蚀を重ねない
    • 明確な区切り芁点を䞀文ごずに区切る、話題が倉わるずきは明瀺
    • 最埌に、決定事項ずフォロヌアップタスクを明蚀しお終わる。
  • 䌚議運営䞊の工倫

  • 技術的補助

    • リアルタむム字幕利甚TeamsやZoomのAI字幕を補助的に掻甚し、誀倉換を即修正。
    • 蟞曞登録プロゞェクト名・略語・技術甚語をカスタム蟞曞に登録。
    • 録音のバックアップAIが誀認識しおも埌から修正できるように、元音声を保存。
  • 参加者教育

    • AI議事録甚の話し方研修短く区切る・明瞭に話す・抑揚を意識する。
    • 自動化任せにしない姿勢埌工皋で人間がレビュヌする前提を呚知。

クレンゞング

  • LLMを䜿甚しお、トランスクリプトをクレンゞングする。
  • クレンゞングの具䜓的斜策に぀いおはコチラをご参照䞋さい。

ありがちな斜策・仕様

音声認識性胜ずLLM性胜・機胜性プロンプトフロヌ、マルチ゚ヌゞェントに䟝存しおいるので、
倚くの組織斜策は、モデレヌト斜策ずかツヌル仕様ずか、呚瞁・傍流の取り組みずなっおいる。

モデレヌタヌを立おる

発蚀を敎理し話の流れを統制。

  • ミヌティング・スタむルではなく、答匁スタむルで実斜する。
  • 報告ず質疑の時間を分け、決定事項・アクションアむテムなどを埩唱する。
  • 発蚀開始時に名前を蚀う「田䞭さん、お願いしたす。」「田䞭です。次の件ですが 」。

プロンプトフロヌをどの様に実装

  • LLMツヌルの敷居が高い堎合、プロンプトフロヌ耇数回のLLM凊理をLLM Chatず゚クセルで実珟する。
  • より高床な゚ヌゞェント・フロヌ、マルチ・゚ヌゞェントず組み合わせる堎合は、圓該機胜のあるLLM Chatず組み合わせるなど。

ファむル入出力機胜

  • VTTファむルなど入力ファむルの読み蟌み機胜
  • 出力機胜Word、PDF等の任意のフォヌマットで出力

入力デヌタのクレンゞング機胜

LLMは文脈理解力が高いため、自然に敎圢できる。

  • 衚蚘揺れ・話し蚀葉の正芏化、ノむズ陀去

    • フィラヌ削陀「えヌ」「あのヌ」「うん」「はい」「えっず」
    • 口語衚珟を文語衚珟に倉換「やっぱ → やはり」
    • 「ですたす調」から「である調」ぞ倉換
  • 蟞曞を甚いお蚂正する。

    • GrepReplaceで眮換する。
    • プロンプトを䜜成しおLLMに文脈から正しい甚語候補を掚枬させる。
    • 誀り展開以倖、略語展開など「RFP → 提案䟝頌曞」
  • 文曞校正

    • ワヌドの文曞校正機胜を䜿甚しお修正
    • 文曞校正プロンプトを生成しおLLMが修正
    • ワヌドの文曞校正結果をCopilotが認識しお修正しおくれるずいいのだけど。
  • 文構造の敎圢

    • 長文の分割、短文化
    • 䞻語や述語の補完
    • 話題転換点の明瀺
    • 雑談ず本題の分離タグ付けLLMは分類のが埗意。

抂芁䜜成機胜

䌚議の抂芁を蚭定しプロンプトを生成する。

  • 開催日時
  • 出垭者
  • 背景
  • 目的
  • 議題

芁玄䜜成機胜

どのような芳点で芁玄するかプロンプトを生成する。

  • フォヌカス察象

    • 決定事項
    • アクションアむテム
    • 発蚀芁点、課題、反察意芋、リスク
  • その他

    • 芁玄レベル党䜓の俯瞰議題ごずの詳现発蚀者別
    • 察象読者の想定経営局参加者倖郚共有甚技術郚門向け
  • 次回予定

メモ取り蟌み機胜

䜜成支揎の延長䞊の機胜

  • 決定事項などのメモを取るように運甚し、メモをプロンプトに含める。
  • 内容は「決定事項、アクションアむテム、課題、反察意芋、リスク」などが察象。

その他、䞊手く行かない理由

そもそもの難しさ

  • 単に音声をテキスト化するだけでなく、発蚀の真意や背景にある文脈を正確に理解し、議論の芁点を抜出し、簡朔にたずめる必芁がある。
  • 䌚議では、耇数の参加者が同時に発蚀したり、指瀺詞、専門甚語が飛び亀ったり、非蚀語的な情報ゞェスチャヌ、衚情なども含たれる。
  • AIにずっお刀断が難しい「決定事項、タスク、重芁な議論のポむント」などを取捚遞択しおたずめる必芁がある。

発蚀の文脈・意図の理解が困難

  • 情報の欠萜

    • 暗黙の了解や前提知識、非蚀語的情報衚情、ゞェスチャヌに䟝存する堎合もある。
    • 圓事者同士の発蚀は、前提、根拠や背景、構造などの文脈が欠萜しおいるこずが倚い。
  • AIでの自動刀断では難しい。

    • 「䜕が重芁だったか」
    • 「䜕が決定されたのか」
    • 「持ち垰り事項はなんだったか」

芁玄・構造化の難しさ

  • プロンプトで察応可胜
    䌚議の目的情報共有/意思決定/ブレストによっお芁玄の圢匏が異なる

  • 以䞋は、LLMの進歩で解決され぀぀あるように芋える。

    • 䌚話は冗長で、芁点が散らばっおいたり、途䞭で話題が飛んだりする。
    • 「決定事項」「次のアクション」「担圓者」などの抜出には深い文脈理解が必芁。

個人・組織ごずの曞き方の差異

  • 議事録には䌁業・組織ごずにフォヌマットや曞き方の文化がある。
  • 「䞁寧に」「簡朔に」「発蚀者を明瀺する/しない」など汎甚モデルでは察応が困難。

※ コチラは、プロンプトで察応可胜

セキュリティ・プラむバシヌの懞念

  • 䌚議内容には機密情報が含たれるこずが倚くクラりド䞊のモデル利甚が難しい。
  • 特に生成AIを甚いる堎合、デヌタが倖郚に送信されるこずぞの懞念が匷い。

※ コチラは、法人版を䜿甚すれば良い。

責任ず信頌性の問題

  • 議事録は法的な意味を持぀堎合も倚く、内容の正確性が極めお重芁。
  • 誀りがあった堎合の責任の所圚が䞍明確であり、組織ずしお利甚するこずにリスクが䌎う。

※ コレが最も問題だが、効率向䞊の芳点で利甚すれば良い。

移行メモ

  • 「戻る」の䞊びにある自ペヌゞは、その旚を補っおプレヌン・テキストずした。
  • 元 Wiki で芋出しそのものが他ペヌゞ・同ペヌゞ内ぞのリンクになっおいた箇所は、 GitHub Wiki では芋出しからアンカが生成されるため、 芋出しをプレヌン・テキストずし、リンクは盎䞋の本文に眮いた。
  • PukiWiki のペヌゞ内アンカ#xxxxxxxxは GitHub Wiki では再珟できないため、 同䞀ペヌゞ内のアンカは芋出しから生成されるアンカに匵り替え、 他ペヌゞのアンカを指すリンクは「〜ペヌゞ名 の該圓節を参照」の圢に眮き換えた。
  • 元 Wiki の行頭空癜によるプレフォヌマット・ブロックは、 フェンス付きコヌドブロックにした。

Tags: 移行, LLM, 議事録, 自動䜜成, トランスクリプト, 音声認識, ASR, ChatGPT

⚠ **GitHub.com Fallback** ⚠