Argus Cortex LLM リアルタイムの多言語組織コミュニケーションのための、脳に着想を得た言語モデル

Cortex LLM は Argus の中核となる言語モデルです。人間の脳の知覚の仕組みに着想を得たアーキテクチャで、多くの信号を同時に受け取り、注目すべきものを選び、ワーキングメモリに文脈を保持し、既存の知識から予測し、自らの確信度を確かめます。一文ずつ切り離して翻訳するのではありません。

ไทย English 中文 日本語 한국어
アーキテクチャを見る ロードマップを見る

CORTEX を通る一文

イメージ例
SP

“เราต้อง finalize spec ภายในวันศุกร์นี้”

入力 · 会議音声

1 · 知覚

音声を符号化し、声とトーンを読み取る

話者 · Somchai P. タイ語 + 英語を検出 トーン · 落ち着いている

2 · 注意と結び付け

主話者を固定し、言語を結び付け

周囲の声を除去 Somchai → TH 英語の混在を保持

3 · 理解

意味を理解し、聞き手ごとに表示

“We need to finalize the spec by this Friday.”

EN中文日本語한국어

4 · 実行

アクションを提案し、ユーザーが確認

TASK → ORIGAMI

仕様を確定

金曜期限 · 確信度:高

⇅ Global Workspace ワーキングメモリ: 話題は Q4 の仕様 予測事前情報: 「spec」「deadline」を予測 メタ認知: 確信度をユーザーに表示

課題

二人用に作られた翻訳は、実際の会議では破綻する

現在の翻訳システムは個人ユーザー向けに設計され、文脈を持たずに一文ずつ処理します。二人の会話なら機能しますが、多くの話者と言語があり、会議全体で文脈が積み重なる組織の会議ではうまくいきません。

誰が、どの言語で話しているか?

システムは設定なしで各人の言語を把握し、行ったり来たりせず安定して識別し続ける必要があります。

コードスイッチング

アジアの組織では、タイ語・中国語・日本語の文に英語を混ぜて話すことがよくあります。

文脈の欠落

一文ずつの翻訳では、代名詞、前の話への言及、組織固有の用語が失われます。

速度と精度

速い翻訳は不正確になりがちで、正確な翻訳はライブの会話には遅すぎがちです。

信頼

AI がどう判断しているか見えないため、重要な会議では頼りにくいのです。

言語資源の不足

ビジネス会議のタイ語音声データは、英語や中国語に比べてまだ少ないのが現状です。

人間の脳は、これらの問題を毎日解決しています。

プロの通訳者は大勢の話を聞き、文脈を覚え、聞き取れなかった言葉を推測し、自信がないときはそれを自覚しています。Cortex は、こうした脳の原理を AI アーキテクチャにできるかを問います。

理論的枠組み

10 の脳の原理を、システム設計へ

Cortex はニューロンをシミュレートするものではありません。認知神経科学で認められた働きの原理を、各モジュールの役割を定める工学的な比喩として用いるもので、生物学的に脳と同じように動くと主張するものではありません。

脳の原理と Cortex での活用
脳の原理 脳では CORTEX では
多感覚統合複数の感覚の信号を一つの知覚に統合する言葉、トーン、リズム、感情を一つの発話表現にまとめる
声の認識専用の領域が個人の声を認識する話者埋め込み(ECAPA-TDNN)を各話者の身元と言語に結び付ける
選択的注意
カクテルパーティー効果
雑音の中から目的の声を聞き取る主話者に重みを置き、周囲の声を除去する注意機構
ワーキングメモリ
Baddeley
処理を続けるために情報を一時的に保持するMeeting Context Buffer が会議全体の話者・話題・参照を保持する
予測処理
Friston
入ってくる情報を予測し、誤差から修正するTopic-aware Prior が話題から用語と意味を予測し、不明瞭な言葉を補正する
言語中枢
Wernicke / Broca
理解と産出は、連携する別々のプロセス理解の層と目標言語の生成を分離する
グローバルワークスペース
Baars
重要な情報が多くのシステムへ同時に伝えられるすべてのモジュールが読み書きする共有ワークスペース
長期記憶の固定重要なものを短期記憶から長期記憶へ移す会議後、同意のもとで知識を組織のナレッジベースに要約する
前頭前野の実行機能計画し、選択肢を比較し、行動を制御するConsult と Act のモジュール
メタ認知自分が知っているかどうかを知る確信度の推定で、不確かな箇所をユーザーが確認できるよう示す

アーキテクチャ

4 つの層と、一つの Global Workspace

処理は知覚から行動まで 4 つの層で行われます。信号は下へ流れ、Global Workspace は各層へ文脈を戻します。会議の記憶が翻訳を助け、Predictive Prior が知覚層の聞き取れなかった言葉の補正を助けます。

入力 · 会議音声、複数の話者、複数の言語

1 · 知覚

音声からテキスト、声紋、トーンと感情

Speech EncoderVoice IdentityTone & Emotion

2 · 注意と結び付け

主話者、雑音除去、安定した言語の結び付け

Selective AttentionSpeaker-Language Binding

3 · 理解

意味と意図を、複数言語で同時に表示

ComprehensionMultilingual Generation

4 · 実行

助言、タスク作成、Origami への要約

ConsultActSummarize
出力 · 文字起こし · 5 言語の翻訳 · 提案 · Origami のタスク

Global Workspace

各層がここで共有の文脈を双方向に読み書きします。

Working Memory

会議の文脈バッファ:話者、話題、参照

Long-term Memory

組織の知識と用語(同意のもと)

Predictive Prior

現在の話題から用語と意味を予測

メタ認知

確信度を推定し、不確かな箇所をユーザーに表示

⇄ 4 つの層すべてと接続

研究課題と仮説

私たちが証明しようとしていること

中核となる仮説:組織の場では、文を切り離して翻訳するよりも、システムが脳のように処理する方が、文字起こしと翻訳は有意に正確で自然になる。

研究課題

RQ1

音声のみの検出と比べ、声紋と会話の文脈を組み合わせると、話者の言語識別はどれだけ安定するか?

RQ2

会議単位のワーキングメモリは、一文ずつの翻訳と比べて翻訳品質をどれだけ高めるか?

RQ3

話題に基づく予測処理は、専門用語の文字起こし誤りをどれだけ減らすか?

RQ4

多段階の翻訳(高速 → 文の推敲 → 段落の構成)は、速度と精度を両立できるか?

RQ5

AI の確信度を示すことで、ユーザーの信頼と利用は高まるか?

仮説

H1

声紋と文脈で言語を結び付けると、ベースラインより言語のフラップ率が有意に下がる。

H2

会議単位のワーキングメモリを用いた翻訳は、一文ずつの翻訳より有意に高いスコアを得る。

H3

話題別の用語バンクでモデルを調整すると、専門用語の単語誤り率が有意に下がる。

H4

ユーザーは Argus を使うと、多言語会議の理解度を高く評価する。

ロードマップ

5 つのフェーズ、それぞれに通過すべきゲート

開発は知覚から推論へと、脳と同じ順序で進みます。各フェーズは前のフェーズの上に築かれ、測定可能な出口ゲートを通過する必要があります。Argus の機能は、5 つすべてを待たず、フェーズを通過するごとに公開されます。

フェーズ 1 · 知覚

5 言語の音声を聞き取る

タイ語を調整した 5 言語音声認識 · 話者分離(ECAPA-TDNN)· 模擬会議データセット · 全指標のベースライン

ゲート 1 · WER/CER と DER がベースライン比で目標達成

フェーズ 2 · 注意

注意と言語の結び付け

話者と言語の自動結び付け(声紋 + 文脈)· コードスイッチング · 周囲の声の除去 · ワンタップで言語を修正

ゲート 2 · 言語識別 ≥ 95% · フラップ率 50% 以上減

フェーズ 3 · 理解

理解と記憶

Meeting Context Buffer · 3 段階翻訳 · 文単位の通訳 · 多言語の同時翻訳

ゲート 3 · 一文ずつの翻訳より高品質 · 遅延 2 秒未満

フェーズ 4 · 予測

予測と組織の記憶

Topic-aware Prior · Domain Skills 用語バンク · PDPA の同意に基づく組織の長期記憶

ゲート 4 · 専門用語 WER 30% 以上減 · DPO の承認

フェーズ 5 · 推論

推論とメタ認知

Origami と連携した Consult · Act · Summarize · 確信度の推定 · パイロット組織での実地試験

Cortex LLM v1.0、Argus で稼働

指標と出口ゲート

各フェーズの測り方

以下は暫定目標で、フェーズ 1 でベースラインを測定した後に具体的な数値として設定します。

フェーズ別の指標と暫定目標
フェーズ 指標 測定内容 暫定目標
1 知覚言語別 WER / CER文字起こしの誤り率(タイ語・中国語・日本語は CER)タイ語は公開ベースラインより 20% 以上改善
1 知覚DER話者分離の誤り率模擬会議でベースライン未満
2 結び付けと注意言語識別の精度各話者の言語を正しく識別発話区間ごとに 95% 以上
2 結び付けと注意フラップ率話者 1 人・1 時間あたりの誤った言語切り替え回数ベースラインから 50% 以上減
3 理解と記憶COMET / ネイティブ評価者意味レベルの翻訳品質一文ずつの翻訳より有意に良い
3 理解と記憶初回表示までの遅延発話終了から最初の翻訳が表示されるまでの時間< 2 秒
4 予測と組織の記憶専門用語 WER組織固有の用語の誤り汎用モデル比で 30% 以上減
5 推論とメタ認知キャリブレーション誤差表示した確信度が実際の精度とどれだけ一致するかフェーズ 4 で合意した閾値未満
5 推論とメタ認知ユーザーの理解と信頼パイロット組織での会議後アンケート対照群より有意に良い

わずかな精度向上より、安定性こそが信頼を生む。

Argus の設計で得た重要な教訓:フラップ率が低いこと、つまり言語識別が切り替わり続けないことは、わずかな精度向上よりもシステムの信頼感を高めます。そのため、フラップ率がフェーズ 2 の主なゲートです。

方法論

作り、試し、実際の組織で実証する

研究はデザインサイエンス研究と定量実験を組み合わせて進めます。システムを作り、標準データセットで試験し、実際の組織で評価し、各フェーズで繰り返します。

データ

公開データセット

5 言語すべての音声認識・話者分離・翻訳のベースライン。

模擬会議

参加者の同意を得て、言語の切り替え、発話の重なり、雑音などを設計したシナリオで録音した多言語データ。

タイ語ビジネス音声

英語の用語が混ざるタイ語の会議音声。文字起こしは専門家が確認。

パイロット組織

データ利用契約と PDPA に基づくパイロットパートナーのデータ。

実験

E1 · 言語の結び付け

音声のみの検出 vs. 声紋 + 文脈

RQ1 · H1

E2 · 文脈の記憶

一文ずつ vs. Meeting Context Buffer 使用

RQ2 · H2

E3 · 専門用語

汎用モデル vs. Topic-aware Prior 付きモデル

RQ3 · H3

E4 · 多段階翻訳

1 段階 vs. 3 段階、遅延と品質を測定

RQ4

E5 · 実地調査

パイロット組織で Argus あり・なしの多言語会議を比較

RQ5 · H4

倫理・プライバシー・PDPA

声紋は生体データです。初日からそのように扱います。

タイの PDPA では声紋は生体データにあたるため、これらの原則はフェーズ 1 から適用されます。

同意が最優先

研究データとパイロット会議の参加者全員が書面で同意します。

声紋は会議内でのみ使用

標準では声紋は会議終了時に削除され、同意がある場合のみ保持されます。

音声はオンプレミスに

音声と生体データは組織の外に出ません。クラウドに送るのはテキストのみです。

部外者は登録しない

隣のテーブルや近くのブースなど、会議外の人の声は決して登録しません。

透明性

参加者は、録音と翻訳がいつ行われているか、身元と言語がどう検出されるかを常に把握できます。

変更時は必ず DPO に相談

データの種類や保存期間が変わるたびに、データ保護責任者に相談します。

隠れた評価はしない

明確な方針と同意なしに、会議データを個人の評価に使うことはありません。

成果

期待すること、まだ難しいこと、そして次の一歩

期待される成果

学術: 多話者の会議翻訳のための脳に着想を得たアーキテクチャと、アジア言語における話者と言語の結び付けに関する新たな知見。

リソース: コードスイッチングを含むタイ語ビジネス会議のデータセットと評価手法。

製品: Argus の中核となり Origami Platform と連携する Cortex LLM v1.0。

組織: AI に支えられた多言語コミュニケーションが会議の理解と成果を高めるという根拠。

限界

タイ語とラオ語のような近い言語では、言語識別を誤る可能性があります。

複数人が同時に話す状況は、話者分離にとって依然として難しい課題です。

限られたパイロット組織での実地結果は、すべての業界を反映するとは限りません。

脳の比喩は設計の枠組みであり、生物学的なシミュレーションではありません。

次へ:Cortex v2.0 とその先

ベトナム語、インドネシア語など、ASEAN の言語をさらに追加。

会議中に画面に映るスライドや資料など、音声とあわせた視覚の知覚。

会議のシグナルを Origami HR Skills Graph につなぎ、継続的なエビデンスループに。

あなたの会議で Cortex の働きを体験

デモを予約 ARGUS に戻る