あなたの手話が、
誰かの「伝わる」につながる。
手話を理解できるAIを育てるために、実際の手話データを集めています。一人ひとりの表現の違いが、より多くの人に寄り添えるAIづくりにつながります。
AIだけでは、手話データはつくれません。
実際に人が使う手話には、一人ひとり異なる動きや表現があります。その違いそのものが、手話AIにとって重要な学習データになります。
皆さま一人ひとりの手話が、
未来の手話AIを育てる大切なコーパスになります。
AI技術がどれだけ発展しても、皆さま一人ひとりの実際の手話表現そのものを、AIだけで置き換えることはできません。 手話には、人によって手の位置、動き方、速さ、表情などの違いがあります。 だからこそ、多くの方のご協力によって実際の手話データを集めることが重要です。 皆さまのご協力と善意によって集まった手話コーパスが、これからの手話認識AIや手話翻訳機器の発展に貢献していくものと考えています。
表現の違いを集める
同じ意味の手話でも、人によって動きやタイミングが異なります。多様な実例を集めることが重要です。
AIが学習する
収集した手話コーパスを整理し、手話認識・手話翻訳などのAI研究・開発に活用します。
社会へつなげる
研究だけで終わらせず、実際のコミュニケーション機器やサービスの発展につなげていきます。
ボランティアでお願いしたいこと
画面に表示された単語や短い文章を見て、カメラの前で手話を表現していただきます。
- 指定された単語や短い文章を手話で表現
- 同じ内容を複数回お願いする場合があります
- 新しい単語・文章の追加収録をお願いする場合があります
- 収集データは手話AIの研究・開発に利用します
参加しやすい仕組みを目指しています
専用アプリまたはWeb画面から、自分のペースで参加できる仕組みを想定しています。
- スマートフォン・タブレットから参加
- 表示された内容に沿って収録
- その場でデータ送信
- 短時間ずつ参加できる設計を想定
参加の流れ
申込みから収録完了まで、できるだけ簡単な流れにします。
専用アプリをインストール
Google Playより専用アプリをインストールします。
内容を確認
活動内容、利用目的、データの取り扱いを確認します。
手話を収録
表示された単語・文章をカメラの前で手話表現します。
送信して完了
収録データを送信すると、作業は完了です。
映像そのものは送信しません。
手話の動きに必要な情報だけを、座標データとして扱います。
アプリから送信されるデータについて
本アプリが外部へ送信するのは、体・手・顔の動きを表す553点の座標データのみです。
端末上でカメラ映像を座標データへ変換し、元の映像はその場で破棄します。
そのため、手話翻訳に必要な動きの情報は残しながら、 顔が写った映像そのものを外部へ送信することはありません。
集まった手話コーパスを、社会へ。
ご提供いただいた手話コーパスは、手話AIやコミュニケーション機器の研究・開発に活用します。
AI機器・サービスの研究開発へ
収集した手話コーパスは、手話認識・手話翻訳などのAI機器やサービスの研究・開発に活用します。 より実用的な手話AIの実現に役立てていきます。
JSLの発展に取り組む企業・団体へ
JSL（日本手話）の発展や、手話を活用したAI技術・コミュニケーション機器の研究・開発に取り組む 企業・団体等へ、手話コーパスを提供する場合があります。
漫画でわかる
手話が言葉になるまで
専門的なしくみが難しく感じられる方にもわかりやすいように、 手話をAIが読み取り、言葉として相手へ伝えるまでの流れを漫画でまとめました。
1. まずは手話を読み取る
カメラで手話を読み取り、手の形・動き・位置・表情などの情報を見て、 AIが理解しやすい形へ変換する準備を行います。
2. 点のデータとして動きを捉える
アプリは体・手・顔の動きを表す553点の座標データに変換します。 元の映像は端末上で破棄し、必要な動きの情報だけを扱います。
3. AIが意味を見つける
AIは動きの順番やタイミング、手の形や位置などを学習済みのたくさんの例と比べ、 もっとも近い意味を見つけて言葉へ変換します。
4. 文字・音声・翻訳で相手に伝える
認識した内容は日本語の文字として表示できるほか、音声で読み上げたり、 他の言語へ翻訳したりすることで、より多くの人に伝えられます。
手話AIの未来を、一緒につくる企業様へ
協賛・サポート企業様を募集しています。
本プロジェクトでは、手話コーパスの収集と手話AI技術の発展を一緒に支えていただける 協賛・サポート企業様を募集しています。企業・団体の皆さまと連携し、 手話認識・手話翻訳技術の研究開発と実用化を進めていきます。
参加者への説明・同意内容および本プロジェクトの利用条件の範囲内で、収集した手話コーパスデータの共有を予定しています。
開発段階に応じて、手話認識・手話翻訳アプリケーションのベータ版提供などを予定しています。
手話AI、アクセシビリティ、コミュニケーション機器や新しいサービスの研究・開発への活用を想定しています。
手話AIの未来を、一緒につくる
団体様も募集しています。
手話コーパスが一定数集まり、アプリケーション開発がベータ版の段階に進んだ際、 実際の利用環境でテストにご協力いただける団体様を募集しています。 実際にお使いいただき、操作性・認識精度・使いやすさなどについて ご意見やご感想をお寄せいただき、より実用的な手話AIの開発につなげていきます。
施設や団体様の実際の利用環境で、ベータ版アプリケーションをお試しいただきます。
操作性、認識精度、わかりやすさなど、実際に使って感じたご意見をお聞かせください。
いただいたご意見を今後の機能改善や手話AI・コミュニケーション機器の開発に活用します。
よくある質問
誰でも参加できますか？
対象年齢、手話経験、対象となる手話言語など、参加条件が確定後に記載します。
どのくらい時間がかかりますか？
1回あたりの所要時間が確定後、目安を記載します。
映像は保存されますか？
いいえ。端末上でカメラ映像を体・手・顔の動きを表す553点の座標データへ変換し、元の映像はその場で破棄します。外部へ送信するのは座標データのみで、顔が写った映像そのものは送信しません。
データは何に使われますか？
手話認識・手話翻訳などのAI機器やサービスの研究・開発に利用します。また、JSL（日本手話）の発展や手話AI技術の研究・開発に取り組む企業・団体等へ提供する場合があります。顔が写った元映像そのものを外部へ提供することはありません。
お問い合わせ
協賛・サポート、ベータ版テストへのご協力、手話コーパス収集ボランティアへの参加、 その他プロジェクトに関するお問い合わせはこちらからご連絡ください。
あなたの手話を、未来につなげませんか。
AIだけでは集められない、実際の手話表現があります。多くの方のご協力と善意を、未来の手話AIとコミュニケーション機器の発展につなげていくプロジェクトです。
ボランティア参加フォームへ