「言語を超える翻訳」は果たして可能か？ 吹き出しから考える、やわらかいコミュニケーションの未来 Fukidashi☓中村ケンゴ（美術家）

中村ケンゴ（美術家） ※写真右

Eメールで使われる顔文字、ワンルームマンションの間取り図、マンガの吹き出しやキャラクターのシルエットなど、現代社会を表象するモチーフから、美術史上のさまざまなイメージまでをも用いたユニークな絵画を制作。日本画の技法で描かれるこれらの作品は、近代になって生まれた「日本画」をはじめとする「日本の美術」のドメスティックな概念を相対化する仕事でもある。また、絵画制作だけでなく、他ジャンルのクリエイターとのコラボレーションのほか、展覧会、シンポジウムなど様々なアートプロジェクトの企画運営にもあたる。国内外の展覧会、アートフェアに多数出品。多摩美術大学大学院修了。

http://www.nakamurakengo.com

 

「翻訳」をいかにカジュアルにするか

中村ケンゴ(以下、中村)：そもそもの話を伺いますが、お二人はまだ学生ですよね。どんな分野の研究をしているんですか？

Fukidashi篠原(以下、篠原)：私は情報工学です。

Fukidashi小坂(以下、小坂)：僕はプロダクトデザインを学んでいます。

中村：このプロジェクトをやろうとなったきっかけは何だったんですか？

小坂：最初はパナソニックさんから大学の方にお話をいただいて、産学協同プロジェクトをやることになったんです。その時点では「翻訳」というもののこれからのあり方を考えませんか？ というくらいのお話だったんですけど。

中村：そこから「吹き出しを使おう」という話になったんですね。

小坂：実は、吹き出しの形のアイデアが出たのはずいぶん後ですね。僕たちは２つのチームに分かれてブレインストーミングをしていたんですが、そのうちに「翻訳」をいかにカジュアルにするかというが未来に繋がるんじゃないかということに議論が向くようになったんです。

中村：身近なコミュニケーションで使えるもの、ということですよね。

小坂：はい。そこで、例えば２人の間に翻訳機というか、デバイスを挟むとカジュアルになるんじゃないかという話になって。それこそ通訳ロボットみたいなものが発想のスタートなんですが、それもそれで大層な感じになってしまうので、それなら話者と話者の間にもうちょっとライトな何かを挟むのがいいと。そうなった時に、一番カジュアルな形って「マンガの吹き出しなんじゃないか？」という話になっていったんです。

中村：吹き出しなら今や世界中の人たちに通じるし、“ジャパニーズオリジナル”感も出るし。

小坂：そうですね。

中村：僕にも吹き出しを使った作品のシリーズがあるんですが、ちょっと面倒くさいことを言うと、美大で日本画を専攻していたんですね。

　日本画というと古くからある伝統的なものというイメージがあるかもしれません。でも、四角いパネルに紙を張って額装して美術館やギャラリーの白い壁に飾って見るというのは西洋のスタイルなんです。「日本画」というのは、明治に開国した際に入ってきた油絵に対してできた言葉、つまり近代の概念なんですね。そもそも「ART」という概念は西洋のもので、当時の日本人はその「ART」、詳しく言えば、ドイツ語の「KUNST」だったんですが、どう日本語に翻訳するか苦労したようです。その「ART」のルールに従って日本で作品を作っているなかで、自分のオリジナリティって何だろう？ という疑問が生まれてきた。いわゆる「日本画」のイメージに沿って作品を作るのではなく、西洋と日本、過去と現代をつないで自身のリアリティを表現できないかと考えたんです。その中で、自分の日常にあった日本のポップカルチャーであるマンガの意匠、吹き出しを使った絵画のシリーズが生まれました。

　実存的な意味で言えば、例えば今日着ているTシャツにはたくさんの吹き出しが描かれていますが、これは「これだけたくさんの言いたいことや思いが自分にはあるぞ」ということと、この吹き出し、一つも台詞が書かれていませんよね。つまり「これだけたくさん喋っても、ひとつも意味が伝わらない、もしくはそもそも意味がない」という両面の意味があると思っています。

 

文字情報「以外」をどう表現するか

小坂：作品を拝見していても、実際のマンガでもそうなんですが、吹き出しって、いろいろな形があるじゃないですか。今あるこれはプロトタイプではあるんですが、そもそも「吹き出しをデバイスにしよう」となったときに、「そもそもこの形しかないってどうなんだろう」という矛盾に行き着くんですよね。デバイスだから、何か形がないといけない。でも、そうなると形が固定化されてしまって、結果的に単なる文字情報しか表現できないというジレンマがあって。

中村：たしかに。

小坂：吹き出しである以上は、しゃべっている内容に従って形が変わるというのが理想的なんですよね。細かい感情の表現というところで、吹き出しのさまざまな形のバリエーションが生まれてきたわけですし。

篠原：もしくは、会話の内容とか声のテンションに合わせて文字のフォントや色が変わるというのは現在の技術でも考えられるなと思うんですけど、デバイスとして一番問題なのはプロダクトの枠をどうするかということで。

中村：例えば透明な液晶ディスプレイみたいなものを間に置いてそこに吹き出しを表示して、会話のテンションを検知して吹き出しの形が変わるというふうにすれば、今でもできなくはないのかな。会話のテンションという意味では、機械翻訳も大事ですね。

篠原：そうですね。機械翻訳の精度をどれくらい高めていくか、という話で。

中村：現状、どういうシステムを使っているんですか？

篠原：今は音声認識と機械翻訳のWeb APIを使っています。その精度自体もそうなんですが、デバイスとしては「マイクでどれだけ音を正確に拾えるか」ということががキーになっています

現状は距離が近すぎると逆にうまく音を拾えないなど技術的な問題もあるので、そこはこれからの改善ポイントですね。

中村：そうか。理想を言うなら、音声認識ソフトまで独自で開発できるといい気はしますけど、そこはけっこうハードルが高くなりますよね。

 

「話しかけるハードル」を下げたい

篠原：そうですね。あと、私たちの考えとしては、そもそも「この外見によって、どれだけ会話が生まれるか」こそが最大のキモだなということもあるんです。

中村：なるほど。そもそも単なる翻訳ツールのデザインというだけでなく、この形が果たす機能ということですね。例えば外国から来た人が「お、吹き出し型のデバイスか！」と興味を惹かれて、そのへんにいる人を相手に使ってみたくなる、みたいな。

小坂：はい。このプロトタイプではスタンド型にしていますが、そもそも、これはカフェやパブリックスペースなど不特定多数の人が集まる場所にインフラとして設置したいという思いもあったので、初期計画から「会話が周囲に見える（聞こえる）」とか、「会話のきっかけになる」ということが非常に重要だと思っています。

篠原：身の周りを観察してると、特に日本人は自分から見知らぬ相手に話しかけるということがとても苦手なんですよね。だからこそ、こういうものが間にあることによって「それ何？」みたいなコミュニケーションが生まれればいいなと。

小坂：スマホの機械翻訳ということなら別に、お互いスマホを見せ合って……みたいなことでも同じなんですけど、そのやりとりに至るまでの心理的なハードルは絶対にあると思っていて。それをなるべく低くするための、ある種の舞台装置であるということはできます。

中村：「吹き出しである」というだけですごく有効なインターフェイスになりますよね。

　これは話者と話者の間に置かれるスタイルだけど、たとえば対面であれば話者同士の背後に配置することによって、より相手にマンガの吹き出しのように見せるということもできそう。

小坂：初期計画ではそういう感じを考えていましたけど、ひとまずはミニマムに話者間に置くというところから始めることにしました。

　このプロジェクトのゴールは『ドラえもん』の「ほんやくコンニャク」（*1）にあると思っているんです。これを介するだけで、誰もがいつでもどこでもストレスなく会話をすることができるという。そういう意味では必ずしも設置型が最終形態ではないと思いますし、モバイルな何かであったり、先ほど中村さんがおっしゃった透過ディスプレイみたいなものもいいのかもしれません。とにかく、まだまだ改善の余地だらけだなと。

*1 食べるだけでどんな言語も脳内で母語に変換されるコンニャク。リスニングだけでなく文字を読む際にも有効で、さらに動物、宇宙人、ロボットなどの言葉も解することができる。「アンキパン」と並んで受験生垂涎の一品。

 

ローカルなまま世界とつながる

中村：翻訳ツールが21世紀において最も重要なテクノロジーのひとつになるということは、僕もずっと思っているんです。

　僕たち日本語話者は、そこそこ高いレベルで他の言語を解さない限りは日本語の中に閉じ込められている。例えばBBCからアル・ジャジーラまでさまざまなメディアに触れることができれば、明らかに世界の捉え方が変わってくる。インターネットのおかげで世界の情報に触れられるようになったからこそ、日本人は英語を話す人たちと比べて、「理解できる情報」の種類や量の格差が大きくなっていると思うんですね。そんな時に、スムーズに正確な翻訳を可能にするデバイスがあればどんなにいいか。

篠原：全ての言語に対応するのはハードル高いですけど、理想像ではあります。

中村：ちなみに、日本語は標準語じゃないと訳せない？

篠原：いえ。ある程度は関西弁とか、京都弁にも対応できるなという感触ですね。

中村：そういうローカルな言語を捨てないままで世界の人と理解し合えるとしたら、とてもいいなと思います。

　SF映画なんかを見ると未来の人たちはどの人種の人たちも言葉が通じあっていますよね。子供の頃は「未来になったら世界統一政府ができて、誰もが統一言語を話すすばらしい時代になっているんだ」と思ってたんだけど、今思うと「あれ？ その時には日本語はどうなっているんだろう」と。今はグローバルな時代と呼ばれて、あらゆる文化が画一化される方向の力が働いているけど、だからこそ、京都弁でも津軽弁でもデンマーク語でも、ローカルな文化を残したままで世界の誰とでも交流できるデバイスを作ったり、そういう価値観で研究が進んでいくことは、とても希望があることだと思います。

　先に話した「ART」を日本人作家としてどう対峙するかという問題も、広くとらえれば「翻訳」の問題とも言えると思います。これはたしか翻訳家の柴田元幸さんが言っていたんだけど、イギリス人が「日本人はいいよね、シェイクスピアが翻訳できて」と。つまり英語で書かれたシェイクスピアは一つだけど、日本人は無限にバリエーションを持てるという。

国立言語研究所は1966年から77年にかけて、日本全国の言語の細かい差分を調査。それを計300もの地図にして公開している（上図はその土地の方言が「こわい」を「恐ろしい」の意味で使うかどうか、という図）。「日本語」というものですら、決してひとつではないということがよくわかる。　https://www.ninjal.ac.jp/publication/catalogue/laj_map/

小坂：いまは性能やデザインなど翻訳機としてのあり方が最優先になっているので、ソフト面というか、例えばローカリティによって同じ字面でも意味がまったく全く違うといった要素をどこまで再現できるかというのは大きな課題になりますね。

中村：京都弁で「ぶぶ漬けどうぞ」(*2)って言ったらどう訳すのが適切なんだろう（笑）。

小坂：（笑）。そこまでのことじゃなくても、表示された翻訳と本心の間に文字では表現できない細かなズレやニュアンスの違いがあったりは絶対にするはずなので、「そもそも何を翻訳すべきなのか。言葉なのか、感情なのか」という、翻訳ツールの本質の部分まで考えながら研究開発を進めていく必要があると思います。

*2 京都において、訪問先などでぶぶ漬け（お茶漬け）を勧められるのは「早く帰ったらどうですか」という隠語だとされることで、上方落語などのネタにもなっている。直接的な物言いを避ける京都人の「いけず」エピソードとしてしばしば挙げられるが、現在はそんなこと言う人はほとんどいない、はず。