Today's PICK UP

映像をAIで解析し臨場感を伝える「感情表現字幕システム」が開発

大日本印刷株式会社(以下、DNP)は、株式会社NHKテクノロジーズ(以下、NT)と共同で、映像と音声をAI(人工知能)で解析し、内容や感情に合わせた最適なイメージのフォントで字幕を表示する「感情表現字幕システム」のプロトタイプを開発したと発表した。本システムは、2018年にDNPが開発した文章の内容に合うフォントを自動で判別して表示する「DNP感情表現フォントシステム」を活用している。これにより、耳の不自由な人や音が出せない環境でも、番組の臨場感を伝えることができる。
出典元:プレスリリース

■「感情表現字幕システム」開発の背景

近年、多くの人にわかりやすく情報を伝える“ユニバーサルメディア”へのニーズが高まっており、テレビも聴覚に障がいのある人や高齢者などに向けて、より多くの番組への字幕付与が求められている。NTでは2018年度に「多様な視聴者が番組やコンテンツを楽しめる」をテーマに聴覚に障がいのある人とディスカッションを行い「これまでの字幕放送はフォントに抑揚が無い」、「タイミングがずれることがある」、「発話者がわかりにくい」といった課題があがる一方で、映像効果としてテロップに使われるユニークなフォントは印象深くなるという意見があがったという。また、制作側では番組に字幕を入れる作業が大きな負荷になっており、自動的に精度の高い字幕を付与できる技術が求められていた。こうしたニーズを受けて、両社は「感情表現字幕システム」の共同開発にいたったとのことだ。

■「感情表現字幕システム」の特長

1.映像と音声をAIで解析して、字幕の自動付与と最適なフォントへの自動変換表示
録画やライブ(生放送)の音声を解析して、リアルタイムで字幕を自動的に付与する。その際、字幕の内容や発話者の表情を解析して感情を把握し、その感情の表現に最適なフォントを12種類の中から自動で選んで字幕に使用する。例えば、楽しい内容は丸みのあるフォントで、怒っている内容は角ばったフォントで表示することで、より直感的に内容を伝える。

2.映像内の人物の顔を認識して、発話者の口元の近くに字幕を自動的に表示
映像内の発話者を特定して、自動的にその口元の近くに字幕を表示することができる。これにより、複数の人物が登場する映像でも、誰が何を話しているかを直感的に伝えることができる。

・12種類の感情・イメージと使用フォントの組み合わせ例(感情の分類やフォントは手動で変更可能)
出典元:プレスリリース

人気記事

大手ゲーム会社も注目!今後のNFT市場をゲームが牽引する理由。

大手ゲーム会社も注目!今後のNFT市場をゲームが牽引する理由。

今年に入り、突如として注目度の高まった「NFT(非代替性トークン)」というキーワード。アート業界のバズワードとして認識している人も多いかもしれません。ところが実は、NFTはゲーム業界の未来、IP(知財)コンテンツの未来を考える上でも欠かせないキーワードであることをご存知でしょうか。そこで今回お話を伺ったのが、世界No.1を記録したNFTを活用しているブロックチェーンゲーム『My Crypto Heroes』(現在の運営はMCH社)を開発したdouble jump.tokyo株式会社の代表取締役 上野 広伸氏です。この新たなテクノロジーは、ゲームの世界にどのような変化をもたらすのでしょうか。そのポテンシャルに迫ります。

「8割以上の精度で、赤ちゃんが泣く理由が判明」CES2021イノベーションアワード受賞。注目の日本発ベビーテック企業とは

「8割以上の精度で、赤ちゃんが泣く理由が判明」CES2021イノベーションアワード受賞。注目の日本発ベビーテック企業とは

テクノロジーの力で子育てを変えていく。そんなミッションを掲げ、泣き声診断アプリや赤ちゃん向けスマートベッドライトなど、画期的なプロダクトを世に送り出してきたファーストアセント社。「CES2021 Innovation Awards」を受賞するなど、世界的に注目を集めるベビーテック企業である同社の強さの秘密とは。服部 伴之代表にお話を伺いました。

世界のMaaS先進事例7選。鉄道・バス・タクシーなど交通手段を統合したサブスクモデルも!

世界のMaaS先進事例7選。鉄道・バス・タクシーなど交通手段を統合したサブスクモデルも!

国内でMaaS(Mobility as a Service)実証が活発化している。新たな交通社会を見据え、既存の交通サービスの在り方を見直す変革の時期を迎えているのだ。 交通社会は今後どのように変わっていくのか。MaaSの基礎知識について解説した上で、海外のMaaSに関する事例を参照し、その変化の方向性を探っていこう。

立教大学ビジネススクール 田中道昭教授の熱血講義『世界最先端のデジタルシフト戦略』Vol.1 最速10分で商品が手元に。「ダークコンビニ」に学ぶ、未来のコンビニ像

立教大学ビジネススクール 田中道昭教授の熱血講義『世界最先端のデジタルシフト戦略』Vol.1 最速10分で商品が手元に。「ダークコンビニ」に学ぶ、未来のコンビニ像

コロナ禍で大きな打撃を受けている日本のコンビニ業界。その一方で、アメリカで生まれた「ダークコンビニ」は、コロナ禍において三密回避ができる新しいビジネス業態として注目されています。店舗を持たずに取扱商品を厳選して、オーダーが入れば30分以内という超短時間で商品を届けるサービスが支持を集め、いまでは各国で同業態が生まれているほど。そのターゲットは一般消費者のみならず、B2B業界にも拡大中です。三密回避が求められる時代において、コンビニはどのように変化していくべきなのでしょうか。アメリカの事例も踏まえながら、AIやDXを活用した未来のコンビニの姿について、GAFA等メガテック企業の戦略にも詳しい、立教大学ビジネススクール田中道昭教授に徹底解説いただきました。

累積導入2万件以上!デジタルマーケ初心者企業から圧倒的支持を得るSaaS徹底解剖

累積導入2万件以上!デジタルマーケ初心者企業から圧倒的支持を得るSaaS徹底解剖

コロナ禍の影響を受けて、これまで以上にデジタルマーケティングの重要性が高まる昨今。その一方、人材やノウハウの不足から、デジタルマーケティングの第一歩を踏み出せない中小企業も、少なくありません。そうした企業の担当者から、今、多くの支持を集めているのがクラウド型デジタルマーケティングツール「Cloud CIRCUS(クラウドサーカス)」です。指原 莉乃さんがカラフルな動物キャラを率いてサーカスの団長を務めるCMで覚えている方もいるかもしれません。「従来のSaaSとは設計思想から異なる」というそのツール群には、どんな魅力があるのでしょうか。クラウドサーカス株式会社の北村 健一CEOにお話を伺いました。

リアル店舗の逆襲。日本の小売・流通業界の生存戦略とは

リアル店舗の逆襲。日本の小売・流通業界の生存戦略とは

Amazonをはじめとする、アメリカのデジタルネイティブ企業によって様変わりする小売・流通業界。そんな中、アメリカではウォルマートがDXに注力し、コロナ禍においてもリアル店舗を活かした戦略で成長を遂げています。一方で、日本の小売・流通業界はどのように変化しているのでしょうか。 小売・流通業界にとってDXは、競争戦略ではなく生存戦略——。そんな危機感を滲ませるのは、リテールテック分野におけるDXをリードしてきた一般社団法人 リテールAI研究会の代表理事、田中 雄策氏だ。日本の小売・流通業界が抱える特有の課題とは何なのか。また今後、どのような変革を仕掛けていくのか。そしてリアル店舗は今後、どのように変わっていくのか。同研究会のテクニカルアドバイザーを務める今村 修一郎氏にもご同席いただき、お話を伺いました。

Googleやビル・ゲイツも出資する“代替肉”スタートアップ「インポッシブル・フーズ」〜海外ユニコーンウォッチ#2〜

Googleやビル・ゲイツも出資する“代替肉”スタートアップ「インポッシブル・フーズ」〜海外ユニコーンウォッチ#2〜

「ユニコーン企業」ーー企業価値の評価額が10億ドル以上で設立10年以内の非上場企業を、伝説の一角獣になぞらえてそう呼ぶ。該当する企業は、ユニコーンほどに珍しいという意味だ。かつてのfacebookやTwitter、現在ではUberがその代表と言われている。この連載では、そんな海外のユニコーン企業の動向をお届けする。今回は欧米を中心に注目されている「代替肉」を扱う「インポッシブル・フーズ」を紹介する。

コロナ禍でラジオが復権!? 民放ラジオ業界70年の歴史を塗り替えたradiko(ラジコ)の「共存共栄型 DX」とは

コロナ禍でラジオが復権!? 民放ラジオ業界70年の歴史を塗り替えたradiko(ラジコ)の「共存共栄型 DX」とは

Clubhouseをはじめ、新勢力が次々と参入し、拡大を見せる音声コンテンツ市場。その中で、民放開始から70年の歴史に「大変革」を巻き起こしているのが“ラジオ”です。放送エリアの壁を取り払う、リアルタイムでなくても番組を聴けるようにするといった機能で、ラジオをデジタル時代に即したサービスに生まれ変わらせたのは、PCやスマートフォンなどで番組を配信する『radiko(ラジコ)』。今回は、株式会社radiko 代表取締役社長の青木 貴博氏に、現在までのデジタルシフトの歩みと将来の展望について、お話を伺いました。

Googleやビル・ゲイツも出資する“代替肉”スタートアップ「インポッシブル・フーズ」〜海外ユニコーンウォッチ#2〜

Googleやビル・ゲイツも出資する“代替肉”スタートアップ「インポッシブル・フーズ」〜海外ユニコーンウォッチ#2〜

「ユニコーン企業」ーー企業価値の評価額が10億ドル以上で設立10年以内の非上場企業を、伝説の一角獣になぞらえてそう呼ぶ。該当する企業は、ユニコーンほどに珍しいという意味だ。かつてのfacebookやTwitter、現在ではUberがその代表と言われている。この連載では、そんな海外のユニコーン企業の動向をお届けする。今回は欧米を中心に注目されている「代替肉」を扱う「インポッシブル・フーズ」を紹介する。

「8割以上の精度で、赤ちゃんが泣く理由が判明」CES2021イノベーションアワード受賞。注目の日本発ベビーテック企業とは

「8割以上の精度で、赤ちゃんが泣く理由が判明」CES2021イノベーションアワード受賞。注目の日本発ベビーテック企業とは

テクノロジーの力で子育てを変えていく。そんなミッションを掲げ、泣き声診断アプリや赤ちゃん向けスマートベッドライトなど、画期的なプロダクトを世に送り出してきたファーストアセント社。「CES2021 Innovation Awards」を受賞するなど、世界的に注目を集めるベビーテック企業である同社の強さの秘密とは。服部 伴之代表にお話を伺いました。