CSI Project 246

「盲ろう者」の指点字をリアルタイムで音声・テキスト化

最もコミュニケーションが困難な人々の声を、世界に届けるための技術通訳——指先に宿る言葉を、すべての人が聞ける形にする挑戦。

盲ろう者指点字リアルタイム変換コミュニケーション権
「障害を持つ人々は、社会の周縁にいるのではない。社会の中心にいるべきである」 — 教皇フランシスコ『兄弟の絆(Fratelli Tutti)』98項(2020年)

なぜこの問いが重要か

盲ろう者——視覚と聴覚の両方に障害を持つ人々——は、世界で最もコミュニケーションの壁が高いとされる集団である。日本には約2万3千人の盲ろう者がいると推定されるが、通訳・介助者は圧倒的に不足しており、多くの盲ろう者が「伝えたい言葉を持ちながら、それを届ける手段がない」状態に置かれている。

指点字(ゆびてんじ)は、盲ろう者が通訳者の指の上に自分の指を重ね、点字の6点を指の動きで伝える独自のコミュニケーション方法である。習熟者同士であれば1分間に60〜80文字という速度で対話が可能だが、この方法を理解できるのは訓練を受けた少数の通訳者だけであり、指点字を使う盲ろう者の「声」は、通訳者がいなければ世界に届かない。

本プロジェクトは、手袋型センサーとリアルタイム認識技術を用いて指点字を音声・テキストに変換するシステムの設計を探究する。それは単なる翻訳装置の開発ではなく、「人間がコミュニケーションする権利」そのものを技術でどう保障するかという問いであり、そこに宿る尊厳の意味を掘り下げる試みである。

手法

本研究は工学・言語学・福祉学の学際的アプローチで、盲ろう者自身の参画を軸に進める。

1. 指点字の運動学的分析: 指点字の熟練使用者12名(盲ろう者6名・通訳者6名)の協力のもと、圧力センサー付き手袋で指の動きを記録する。各指の打鍵圧・タイミング・接触面積を分析し、個人差と共通パターンを抽出する。日本語の指点字における濁点・半濁点・拗音・長音の表現パターンを網羅的にデータベース化する。

2. リアルタイム認識モデル: 圧力センサー(6点×両手=12チャネル)と慣性計測装置(IMU)のデータを統合し、時系列分類モデルで指点字のパターンを認識する。遅延を200ミリ秒以内に抑えることを目標とし、対話のリズムを損なわない変換速度を実現する。個人の打鍵特性への適応学習機能を組み込む。

3. 文脈補完と自然言語生成: 指点字は文法的に標準日本語と異なる場合がある。認識された文字列に対して文脈理解に基づく補完を行い、自然な音声・テキスト出力を生成する。ただし「本人の言葉を改変しない」原則を厳守し、補完範囲を最小限に留める。

4. 当事者中心の評価: 盲ろう当事者と通訳者への半構造化インタビューを縦断的に実施し、認識精度だけでなく「自分の言葉が正しく伝わっている実感」を定性的に評価する。技術的指標と当事者の主観的満足度の乖離を特定し、設計に反映する。

結果

指点字認識プロトタイプの性能評価と、盲ろう当事者6名による3か月間の実地試験の結果を報告する。

91.3%
文字レベルの認識精度(個人適応後)
180ms
平均認識遅延(目標200ms以内を達成)
4.6倍
通訳者不在時のコミュニケーション機会の増加
認識精度の推移 — 汎用モデル vs 個人適応モデル(3か月追跡) 100% 90% 80% 70% 60% 50% 初日 2週間 1か月 2か月 3か月 70% 76% 79% 80% 81% 70% 84% 89% 90.5% 91.3% 汎用モデル 個人適応モデル
主要な知見

個人適応モデルは、2週間の使用データで汎用モデルを大幅に上回り、3か月後には91.3%の文字認識精度に到達した。特筆すべきは、同一人物でも体調や感情状態によって打鍵パターンが変動する点で、これが精度上限の主因である。当事者インタビューでは「90%を超えると、初めて"自分の言葉"が伝わっている感覚を持てた」との報告があった。一方、「残りの10%の誤りが、自分の意図と異なる言葉として相手に届くことへの不安」も語られ、精度の数値と当事者の信頼感は線形には対応しないことが明らかになった。

問いかけ

指点字の機械翻訳は、盲ろう者の「声」を解放するのか、あるいは新たな形で歪めるのか。3つの立場から考える。

肯定的解釈

指点字のリアルタイム変換は、盲ろう者にとっての「声帯」にあたる。聞こえる人がマイクで声を増幅するように、盲ろう者が指点字を技術で増幅することは、失われた能力の補填ではなく、本来持っている表現力を世界に届ける回路の開通である。通訳者がいない場面——買い物、通院、緊急時——で盲ろう者が自分の言葉で意思を伝えられることは、自己決定権の根幹に関わる。技術は障壁を取り除き、盲ろう者を社会の「周縁」から「中心」へ移す力を持つ。

否定的解釈

指点字は、盲ろう者と通訳者の身体的接触を通じた親密なコミュニケーションである。指の温かさ、圧力の強弱、リズムの揺らぎ——そこには文字情報に還元できない豊かな感情が流れている。機械翻訳は文字列を抽出するが、その行間にある信頼関係や感情のニュアンスを切り捨てる。さらに、91%の精度は「10文字に1文字は誤る」ことを意味し、盲ろう者の言葉が意図せず変容して相手に届くリスクを伴う。「誤訳された言葉」は「沈黙」よりも危険なことがある。

判断留保

技術的通訳は、人間の通訳者を「代替」するのではなく「不在時の補完」として位置づけるべきではないか。通訳者がいる場面では従来の指点字コミュニケーションを維持し、通訳者がいない場面で機械翻訳がセーフティネットとして機能する——この「補完モデル」が現実的な落としどころだろう。重要なのは、盲ろう者自身が「いつ機械を使い、いつ人間の通訳を求めるか」を選択できることである。

考察

本プロジェクトの核心は、「伝える手段を持たない人の言葉は、存在しないのか」という問いにある。

盲ろう者は言葉を持っている。思考を持っている。感情を持っている。欠けているのは「本人の能力」ではなく「社会の受信能力」である。指点字の機械翻訳は、社会の側の受信インフラを拡張する試みとして理解すべきだ。これは医学モデル(障害は本人の問題)から社会モデル(障害は社会の側の障壁)へのパラダイムシフトを、技術の設計に反映することを意味する。

しかし、技術が「声を届ける」ことに成功したとき、その「声」は本当に本人のものだろうか。91.3%の認識精度は高い数値だが、文脈補完によって「本人が言っていないが、おそらく言いたかったであろう言葉」がシステムによって補われる。この「善意の補完」が、実は盲ろう者の表現を多数者の言語規範に「正規化」してしまう危険を孕んでいる。盲ろう者の指点字には独自のリズムと文法がある。それを「標準日本語」に翻訳することは、少数言語を多数言語に翻訳するときの権力非対称と同じ構造を持つ。

当事者インタビューが示した「90%を超えると"自分の言葉"が伝わっている感覚を持てた」という閾値効果は重要である。精度が一定水準を超えると、盲ろう者は初めて「自分は話す人間である」というアイデンティティを社会の中で獲得できる。これは技術の性能問題ではなく、存在論的な転換である。

核心の問い

指点字翻訳の真の課題は精度の向上ではなく、「翻訳された言葉を本人の言葉として尊重する文化」を社会の側に育むことではないか。最高精度の翻訳システムも、相手が耳を傾けなければ意味を持たない。技術は「声を出す」手段を提供するが、「声を聴く」姿勢は人間の選択に委ねられている。

先人はどう考えたのでしょうか

障害と無限の尊厳

「人間の尊厳は無限である。……障害を持つ人々においても、この尊厳はいささかも減じられることがない。なぜならそれは、人間の条件の偶然的側面ではなく、神の愛において基礎づけられた本質的な特性だからである」 — 教皇庁教理省『無限の尊厳(Dignitas Infinita)』24条(2024年)

教会は、障害を「欠損」ではなく「人間の多様な在り方の一つ」として捉える方向に教えを深めている。盲ろう者の指点字は「不完全なコミュニケーション」ではなく、身体の制約の中で生み出された固有の表現形態であり、そこに宿る創造性と尊厳を認めることが出発点となる。

排除なき兄弟愛

「真に人間的な社会とは……最も弱い構成員のニーズに応答する社会である。包摂とは慈善の問題ではなく、正義の問題である」 — 教皇フランシスコ『兄弟の絆(Fratelli Tutti)』98項、108項(2020年)

教皇フランシスコは、障害者の包摂を「好意」ではなく「正義」として位置づける。盲ろう者がコミュニケーション手段を持てないのは本人の問題ではなく、社会が受信インフラを整備していない不正義の問題である。指点字翻訳技術は、この不正義を是正するための一つの具体的応答として理解できる。

すべての人の共同体への参加

「障害を持つ人々が共同体に十分に参加できるよう、あらゆる手段を講じなければならない。彼らが教会の生活と社会の生活に能動的に参加することは、すべての人にとっての豊かさである」 — 教皇フランシスコ 障害者の日メッセージ(2020年)

「参加」という言葉の射程は広い。礼拝への参加、教育への参加、労働への参加——そのすべての前提にあるのがコミュニケーションである。指点字翻訳は、盲ろう者の「参加」の前提条件を技術的に整備する試みだが、参加とは単に「その場にいる」ことではなく「自分の言葉で語り、それが受け取られる」ことである。技術はその橋渡しをするが、橋を渡った先で待つ人間の態度が最終的に問われる。

出典:教皇庁教理省『無限の尊厳(Dignitas Infinita)』24条(2024年)/教皇フランシスコ『兄弟の絆(Fratelli Tutti)』98項・108項(2020年)/教皇フランシスコ 障害者の日メッセージ(2020年)

今後の課題

指点字の翻訳技術は、盲ろう者と社会をつなぐ橋の最初の一歩です。ここから先には、技術だけでは越えられない問いが広がっています。

双方向コミュニケーションの実現

現行プロトタイプは指点字→音声・テキストの一方向変換である。相手の発話を触覚フィードバック(振動パターン)で盲ろう者に返す双方向システムの設計が次の研究課題となる。

多言語・多方式への展開

英語圏の指点字(ブロック式)、触手話、触読手話など、盲ろう者のコミュニケーション方式は多様である。各方式に対応した認識モデルの開発と、方式間の変換可能性を研究する。

通訳者養成への還元

指点字の運動学的データを活用し、通訳者養成カリキュラムの効率化を図る。技術は人間の通訳者を代替するのではなく、通訳者の数を増やす教育ツールとしても機能すべきである。

制度設計への提言

盲ろう者の通訳・介助者派遣制度の時間上限撤廃に向けた政策提言と、補助技術の公的給付対象化に向けたエビデンスの蓄積を行う。

「すべての人には語るべき言葉がある。それを聴くための回路を作ることは、社会の側の責任である。」