2021年3月29日公開

アバターを活用した遠隔コミュニケーションと自動同時通訳技術を組み合わせた遠隔同時通訳の実証実験が実施

凸版印刷株式会社は、総務省の委託研究「多言語翻訳技術の高度化に関する研究開発」を2020年6月9日より実施している。今回この活動の一環として、アバターを活用した遠隔コミュニケーションと自動同時通訳技術を組み合わせた遠隔同時通訳の実証実験を、すみだ北斎美術館を始め、都内の複数拠点で実施したと発表した。

本実証実験では、美術館などで来場者と説明員が対面で鑑賞した際と比較し、アバターを用いた遠隔での鑑賞で、説明員と鑑賞者間の円滑なコミュニケーションに必要なユーザーインターフェース（UI）の要件を抽出した。具体的には、凸版印刷が2016年より取り組んでいる「IoA仮想テレポーテーション」と総務省委託研究において試作した自動同時通訳アプリケーション（プロトタイプ）を使用して実証を行った。美術館や企業ショールームに説明員（日本語）を置き、離れた場所に視聴者（英語）を配置。説明員はIoANeckを用いて展示解説を実施。また、自動同時通訳アプリケーションを介して、説明員と視聴者は、それぞれ相手の発話内容を自分の母国語の音声として聞くことができ、さらに字幕による確認も可能としたという。実施後、説明員・視聴者双方に対してアンケート調査を行い、UIに関する要件を抽出し、遠隔鑑賞、見学/視察の有用性を確認した。今後、凸版印刷は本実証実験の結果を基にUIの機能向上を行い、国内および国外から博物館や美術館、企業ショールームなどに遠隔鑑賞や見学/視察、商談などが可能となるサービスの実用化を目指していくとのことだ。

出典元：プレスリリース

■実証実験の概要と成果

現地施設には、ガイドを行う説明員、遠隔地に視聴者を配置。説明員はIoANeckでガイド（日本語）を行い、視聴者は映像閲覧用の端末と自動同時通訳用の端末で鑑賞（英語）。双方が日英自動同時通訳アプリケーション（プロトタイプ）を介して遠隔コミュニケーションを実施。実施後、説明員・視聴者双方に対してアンケート調査を行い、UIに関する要件を抽出。コロナ禍を契機に定着しつつある遠隔鑑賞、見学/視察の有用性が認められたという。

＜実証実験実施地＞
・美術館・・・すみだ北斎美術館（2021年1月12日）
・企業ショールーム・・・凸版印刷 PLAZA21小石川（2020年12月18日）
　NECネクサソリューションズ Walk In Solution Center 東京（2021年1月20日）

＜検証内容＞
①会話する目的を達成できたか（展示説明が理解できたか？質疑応答ができたか？）
②通訳結果の字幕表示の有無によるUXの違い
③遠隔と対面でのUXの違い（特に遠隔の優位な点）

＜成果＞
・コロナ禍で人の移動に制限がある状況において、遠隔地の外国人に向けた自動同時通訳によるコミュニケーションに対するニーズの高さを確認。
・抽出されたUIに関する要件

1.　視覚情報の情報量の多さが、対人ガイドに比べ理解度に影響する
（例：字幕表示と対象物を視点が行き来することによるユーザーエクスペリエンス改善の必要性）
2.　反応速度がコミュニケーション理解度に影響する
（例：発話者は質問の回答まで時間がかかると発話が到達・理解されているかが判断つかず困惑）
3.　ガイド、視聴者の様子を映像で共有することにより不安が解消される
（例：相手の表情を見えるようにする必要性）
4. その他のUIに関するニーズとして、合成音声の声色選択、発話タイミングの可視化などが挙がった

■背景

ウィズコロナ/アフターコロナ時代において活動が制限される博物館や美術館、企業ショールームなどでは、非対面・非接触での鑑賞、見学/視察を実現するサービスの提供が求められている。将来的には海外から日本のさまざまな施設を遠隔で鑑賞できるサービスに自動同時通訳技術が組み込まれ、言語の壁を越えたコミュニケーションが可能となり、日本の歴史や文化、製品やサービスの理解を促進し、広く世界に認知させることが期待できるとのことだ。

連載特集

人気記事

月間総合

AIの思考を人間が助ける。AI領域で人気の職種「プロンプトエンジニア」とは何か

プロンプトエンジニアという言葉をご存知でしょうか。英語圏では2021年頃から盛り上がりを見せている職種の一つで、中国でも2022年の夏頃からプロンプトエンジニアの講座が人気を呼んでいます。今回は、プロンプトエンジニアとは何か、どうトレーニングすればよいのかについて、日本国内でプロンプトエンジニアの採用と教育を実施している株式会社デジタルレシピ代表取締役の伊藤新之介氏に解説していただきました。

ChatGPTを仕事にどう使う？【「ChatGPTのビジネスにおける活用法と限界」ウェビナーレポート】

知りたいことや聞きたいことをテキストで入力すると、あらゆることについて人間のような文章で回答してくれる対話型AI「ChatGPT」が日本を含め世界中で話題になっています。誰でも無料で利用できるため、「早速使った」という人も多いかもしれません。しかし、とりあえず使ってみたものの「実際に普段の仕事で活用するにはどうすればよいのか」「ChatGPTの普及で何が変わるのか」などの疑問を抱いた方もいるのではないでしょうか。そこで本記事では、国内最大7万人超のAI・データ人材プラットフォームを運営する株式会社SIGNATEが2023年3月7日に開催し、代表取締役社長CEOの齊藤秀氏が登壇したウェビナー「ChatGPTのビジネスにおける活用法と限界」の内容をもとに、ChatGPTの最前線をレポートします。

中国EV市場を席巻する、三大新興メーカーを徹底分析。脅威の中国EVメーカー最新事情・後編【中国デジタル企業最前線】

中国企業の最新動向から、DXのヒントを探っていく本連載。今回は、ガソリン車に代わるモビリティとして期待が高まるEV（Electric Vehicle＝電気自動車）と、その核とも言える自動運転技術で世界をリードする中国の強さに迫ります。前編では「EV先進国」の名を欲しいままにしているその理由を、国の政策や技術の面から探ってきました。後編となる今回は、自動車産業に参入してきた新興メーカー3社を紹介するとともに、日本の立ち位置の考察、中国が抱える課題を話題に進めていきます。

「8割以上の精度で、赤ちゃんが泣く理由が判明」CES2021イノベーションアワード受賞。注目の日本発ベビーテック企業とは

テクノロジーの力で子育てを変えていく。そんなミッションを掲げ、泣き声診断アプリや赤ちゃん向けスマートベッドライトなど、画期的なプロダクトを世に送り出してきたファーストアセント社。「CES2021 Innovation Awards」を受賞するなど、世界的に注目を集めるベビーテック企業である同社の強さの秘密とは。服部伴之代表にお話を伺いました。

メタバース覇権を握る、最有力候補！？フォートナイトを運営する「Epic Games」〜海外ユニコーンウォッチ #6〜

「ユニコーン企業」――企業価値の評価額が10億ドル以上で設立10年以内の非上場企業を、伝説の一角獣になぞらえてそう呼ぶ。該当する企業は、ユニコーンほどに珍しいという意味だ。かつてはFacebookやTwitterも、そう称されていた。この連載では、そんな海外のユニコーン企業の動向をお届けする。今回は人気オンラインゲーム「フォートナイト」を運営する「Epic Games（エピックゲームズ）」を紹介する。

【AI×音楽】AI作曲が可能となっても、作曲家の仕事は残る。「FIMMIGRM」が変える音楽の未来＜後編＞

AIによりヒットソングの特徴をふまえたオリジナル楽曲を作成するサービス「FIMMIGRM（フィミグラム）」。AIによる作曲サービスが盛り上がりを見せつつある昨今、音楽プロデューサーとしてYUKIや中島美嘉、Aimerなどのアーティストを手がけてきた玉井健二氏が開発に携わっていることで、大きな話題を呼んでいます。 FIMMIGRMの利用方法は、大量に自動生成された曲から好みの曲をジャンルごとに選択するGENRES（ジャンル）、ワンクリックでAIが曲を生成する ONE-CLICK GENERATE（トラック生成）、ユーザーの自作曲をもとにAIが曲を生成するGENERATE（トラック生成）、AIが生成した曲にプロの編曲家が手を加えるPRO-ARRANGED（プロアレンジ）の4パターン。AIにより専門知識不要で誰もが作曲できるようになる未来が間近に迫った今、音楽業界はどのように変化するのか？株式会社TMIKと音楽クリエイター集団agehaspringsの代表を務める玉井健二氏にお話を伺いました。

世界のMaaS先進事例7選。鉄道・バス・タクシーなど交通手段を統合したサブスクモデルも！

国内でMaaS（Mobility as a Service）実証が活発化している。新たな交通社会を見据え、既存の交通サービスの在り方を見直す変革の時期を迎えているのだ。交通社会は今後どのように変わっていくのか。MaaSの基礎知識について解説した上で、海外のMaaSに関する事例を参照し、その変化の方向性を探っていこう。

【海外レポートから読み解く】2025年、AIはここまで進化する

2022年7月に画像生成AI「Midjourney」がリリースされ、その後「Stable Diffusion」などのさまざまな画像生成AIが数多く登場するなど、大きな話題を呼びました。この数ヵ月の間、世界の人々のAIに対する捉え方は大きく変わったのではないでしょうか。今後AIはどのような進化を遂げていくのか。今回は、国内外のAI事情に詳しい株式会社デジタルレシピ代表取締役の伊藤新之介氏に、海外のレポートから読み解くAIの進化について解説していただきました。

メンタルヘルス後進国、日本。DXはメンタルヘルスに貢献できるのか

欧米に比べ大きく遅れているといわれる日本のメンタルヘルスを取り巻く環境。事実、欧米ではカウンセリングを受診した経験のある人は52％にも上りますが、日本では6％という低水準。先進国のなかで突出した自殺者数についても、厚生労働省は深刻な状況と受け止めています。そんななか、β版での運用を終え、2022年7月5日に正式ローンチされた「mentally（メンタリー）」は、日本では敷居の高いメンタルヘルスに関する相談が気軽に行えるアプリ。株式会社Mentally 代表取締役CEOを務める西村創一朗氏は、自身も過去に双極性障害（※）を乗り越えた経験を持っています。メンタルヘルス市場はDXによりどう変化していくのか。インタビューを通して、日本のメンタルヘルス市場の未来を紐解きます。 ※ 双極性障害：活動的な躁（そう）状態と、無気力なうつ状態を繰り返す障害。

クリエイター支援プラットフォーム「Patreon（パトレオン）」〜海外ユニコーンウォッチ #9〜

「ユニコーン企業」ーー企業価値の評価額が10億ドル以上で設立10年以内の非上場企業を、伝説の一角獣になぞらえてそう呼ぶ。該当する企業は、ユニコーンほどに珍しいという意味だ。かつてはFacebookやTwitterも、そう称されていた。この連載では、そんな海外のユニコーン企業の動向をお届けする。今回はクリエイターを支援するプラットフォームサービスを提供する「Patreon（パトレオン）」を紹介する。

ただの激安通販アプリじゃない。AmazonにもマネできないWishの戦略～デジタルシフト未来マガジン〜

「デジタルシフト未来マガジン」では、石原靖士氏が捉えた国内外のデジタルシフトの最新事例を紹介する。