2020年11月6日金曜日

ニューラル機械翻訳方式の独自解釈

  Google翻訳など、ニューラル機械翻訳技術は近年著しく発展して、実用レベルにあると言われています。実際に使用してみて、確かにそのように感じます。しかし、その処理内容の全貌はなかなか掴みきれません。一例ですが、Google翻訳で、以下の和文を入れてみると、次のように英文に翻訳されました。

「学生は物理学を教授から」→ Students learn physics from a professor

 うん?「学ぶ」とは言っていないのに、なぜ、「learn」と翻訳されたのか?これについて、小生が独自に(勝手に情報を設定して、思い切った簡略化をして)推測してみた結果を以下の図に示します。恐らく、「当たらずと雖も遠からず」と思っていますが、いかがなものでしょうか。いずれにしても、単語(および単語列)のベクトル(分散表現)と、その間のコサイン類似度等が根底にあり、それに基づくAttentionという機能が使われているのはまちがいないようです。

ニューラル機械翻訳の大胆な簡略化による説明


2020年11月3日火曜日

国立国語研究所から届いたマスキングテープ

 最近は、自然言語処理(機械学習は重要な手段の一つ)を勉強しています。それに不可欠なのが、言語コーパスです。言語コーパスとは、言語による文例を大規模に収集して、一定の処理を施した後に、各種の情報(形態素、構文情報等)を付加したデータベースと考えられます。国立国語研究所では、その主要な業務のひとつとして、多様なコーパス群を研究開発し、公開しています。

 少し前に、これらのコーパスを利用した「KOTONOHA検索コンテスト2020」が開催され、小生もこれに作品応募しました。(少しは期待していたのですが)入選はできなかったのですが、参加賞としてマスキングテープ4個が送られてきました。研究所や検索ツールのロゴ(NINJAL、中納言など)がデザインされています。ちょっとうれしかったのですが、はて、これ何につかうもの?目隠し、目張りに使う?

国立国語研究所のマスキングテープ

 そんな時には、「Ok Google, マスキングテープはどのように使う」です。お見事!

 さらに納得!百円ショップへ行った時のこと。カラフルな様々な模様を印刷したマスキングテープが大量に売られていました。上記のとおり、小物やバックやスマホなどのデコレーション用として、今人気上昇中であることが分かりました。粘着性が高いのに、不要になった際に剥がしやすいのもよいらしいです。

市販されているマスキングテープ

 それでは、ということで、小生もiPhoneの裏に、国立国語研究所のマスキングテープで飾ってみました。ちょっと渋いですが、気分転換になりそうです。

iPhoneの裏に国立国語研究所のマスキングテープ

2020年10月8日木曜日

超小型AIカメラをコイン識別器にしてみる

【要旨】前回記事の続編です。雑誌を参考に、超小型AIカメラを(コーデイング無しで)コイン識別器にしてみました。AIの初歩的な体験ですが、いかがでしょうか。

■独自画像を学習させたいが、そのデータは?
 前回記事は、このメーカーが提供する種々のアプリ(顔検出や手書き数字識別など)の紹介でした。今回は、独自画像を識別してみます。と言っても、なかなか題材がありませんが、手元に何種類かの外国コインがありました。それを使います。以下の5種類を対象とします。

■学習用画像の準備
 この小型AIカメラで、5種類のコインそれぞれ40枚を撮影します。コインはそれぞれ8枚づつ用意しましたが、それを色々な角度から写して40枚にします。合計で200枚の画像です。そのうち、8割は学習用(training)に、残りの2割を検査用(validation)に用いることにします。

■画像の学習
 
ここが最も重要なパートなのですが、このメーカーでは、規定に沿った画像を送ると、学習結果を返してくれるという、有り難いサービス(m5stack Training Service)を提供しています。すなわち、自分で何もコーディングせずに、学習済みモデルを入手できるのです。そればかりか、下図のように、学習状況(accuracyとlossのグラフ)も送り返してくれます。さらに、その学習モデルを動かすサンプルプログラム(マイクロPythonによる)も付けてくれます!これは、やってみるしかないです。


■これでコイン識別器のできあがり!
 あとは、送られてきたサンプルプログラムと、学習済みモデルをいっしょにマイクロSDカードに格納して、この超小型AIカメラに挿入するだけです。それを使ったテスト結果を以下に示します。学習時とは別のコインを使ったテストですが、例えば、10_Pfennigや20_EuroCentは0.98〜0.99のconfidenceで認識されました。

感想

 「具体的に自分でコーディングしないとAI技術を学ぶことにならない」というのも確かではあります。しかし、大学などの授業で、AIの考え方や基本技術を学ぶ前に(あるいは後でもいいですが)上記のような体験をすることは意味があるのではないかと思います。AIに馴染む、あるいは、その中味を知りたいという意欲をかき立てることに繋がるようにも思います。

 返送されてくるサンプルプログラムは、上図のように認識結果を表示するだけの非常に短い(40行程度の)ものです。Pythonを少し知っていれば、これを拡張(例えば音声を付けたり、第2候補を示したり)することも難しくないです。


2020年10月7日水曜日

AIチュートリアル:手旗信号(セマフォア)練習

【要旨】この記事は、Scratchを用いたAIアプリのチュートリアル[1]の紹介です。両腕を使った手旗信号(セマフォア信号)の発出練習をゲーム感覚で行います。ML4K(Machine Learning for Kids)[2]が提供しているのですが、レベルは"advanced"ですので、学生諸君にも参考になるでしょう。

■作成するAIアプリの概要
 下図は、このAIアプリの使用手順です。"next"の矢印は、次の課題の出題を意味します。この例では、"K"の手旗信号のポーズを要求しています。あなたは両腕でそのポーズを取り、"ready"と叫んで下さい。すると、このアプリは、図中央にあるように、ポーズ認識結果としての線画と、正解のセマフォア画像を提示します。あなたは両者を比較して、自分のポーズが正解か否かを判断し、"yes"または"no"と叫びます。"yes"であれば、得点が加算されます。その後、自動的に"next"の状態になり次の出題を行います。

■2つの学習モデルを使ったセマフォアのポーズの認識
 2つの学習モデルを使います。1つ目は、音声認識です。これにより、途中でPCに触れることなく、音声でアプリを制御でき、何回でもゲームを繰り返すことができます。2つ目は、両腕を使ったセマフォアのポーズを認識するためのものです。

(1)音声認識のための学習モデル
 発話によりゲームをコントロールします。上に述べた"ready"、"yes"、"no"を認識させるため、下図のように、それぞれ発話例を16回以上録音します。また、これとは別に環境音(周囲の雑音)も同程度収録します。その後、あるボタンを押すと学習が始まります。実際には、IBM Cloudのsoundサービスが起動されます。学習後は、3種類の発話は95%程度以上のconfidence(確かさ)で認識できるようになるはずです。


(2)ポーズ認識のための学習モデル
 ここでの「学習」とは、身体によるセマフォアの信号表現(画像)そのものの学習ではなく、「身体骨格」を学習するという意味です。つまり、身体画像のなかの左右の手首、肘、肩、膝などがどこにあるか(を示す座標)を認識するために、膨大な身体画像を学習させるという意味です。それは大変なコストを要しますので、ここではそれを実施せず、そのような目的の学習済みのモデルを利用します。下図は、それを利用して、左右両方の手首の位置(xy座標値)を得るためのScratchのブロックの利用例です。


(3)セマフォアのポーズが正しいかどうかの判断
 セマフォアのポーズにおいて、両手首や肘、肩の座標が分かれば、最初の図にある「認識結果」のような線画を描くことができます。この時、同時に正解の綺麗なセマフォア画像も表示しますので、自分で両者を比較し、このポーズが正しかったかどうか判断できます。それを"yes"または"no"の音声で答えると次の出題となります。"yes"であれば得点が加算されますので、練習の励みになります。

■感想
 よく考えられた、受講者の興味を惹く優れたチュートリアルだと思います。ポーズの学習済みモデルを利用するので、相当に簡単になるとはいえ、それを使って、実際のセマフォアポーズを線画で表示するところは少し面倒かもしれません。しかし、3番目の図のように、ある程度のところまで、ブロックを提供していますので、敷居はかなり低くなっています。途中に提供されているブロックを削除して挑戦させれば、やや程度の高い問題となるでしょう。

■参考資料
[1] 機械学習プロジェクト:Semaphores
https://machinelearningforkids.co.uk/#!/worksheets
https://github.com/IBM/taxinomitis-docs/raw/master/project-worksheets/pdf/worksheet-semaphores.pdf

[2] ML4K Teach a computer to play a game
https://machinelearningforkids.co.uk


2020年10月4日日曜日

AIにおけるフレーム問題や状況依存視点も知りたい

末尾に、【注1】【注2】を追記しました。
--------------------------------------------------------------------------------

■AIのおけるフレーム問題など
 AI(人工知能)における「フレーム問題」は重要な未解決問題のひとつと言われている。この問題は、WikiPedia[1]によれば、「有限の情報処理能力しかないロボットには、現実に起こりうる問題全てに対処することができない」という問題だという。参考文献[2]等にも簡単な例をあげた解説がある。

 しかし、小生にはよく分からない。「知らないことはできないわけだから、知っている条件それぞれについて適切な処理を行い、知らない条件の場合は何もしないか、デフォルトの処理を行う。」これしかできないのではなかろうか。でも、これだけ話題になっているということは、もっと深遠な哲学的な難問であり、小生には素養がないだけのことかも知れない。それを少しでも補うつもりもあって、今回、下記のシンポジウムに参加した。

■国立国語研究所 NINJALシンポジウム(対面+Webで開催)
「言語コミュニケーションの多様性」2020年10月3日
(1) 配慮の表現・行動から見るコミュニケーションの諸相(主に国語研の研究者による)
(2) 基調講演「AIと対話」(中島秀之 札幌市立大学学長)

 新型コロナウィルスの影響で、ここでの研究集会等も、長らく全てWeb開催であったが、今回、人数限定の現地対面での開催となった。なお、オンラインでも同時開催しており、質問などは、zoomを介して開場で流されていた。

 講演のうち、(1)では5件の研究発表があった。これらは、「対人配慮」という、相手に対する心的・社会的距離のとりいれ方がコミュニケーションにおいてどのように影響しているか、また、その歴史的経過も踏まえて深く入り込んだものであり、たいへん勉強になった。

 基調講演が本記事の対象である。著名なAI学者である中島秀之氏によるものであり、「TensorFlow (keras)による深層学習実践」といった技術論とは全く別の観点からの、「人工知能の根源を考える」といった趣のお話であった。

国立国語研究所(立川市)
初期の南極観測で活躍したカラフト犬たちのモニュメント
(隣接する国立極地研究所の庭にて)

■中島秀之氏の講演より
 講演内容をここで正確に伝えることはとてもできない。上記の「AIにおけるフレーム問題」にも触れられていたが、小生の理解力不足もあり、疑問(モヤモヤ)が晴れたわけではない。しかしながら、この講演には優れた観点や考え方が多数示されて、非常に有用であった。以下には、そのうちのごく僅かを掲載させていただく。もちろん、小生の誤解があるかも知れないが、ご容赦いただきたい。

(a) 知能と常識
 「知能」とは、「情報が不足した状況で、適切に判断して処理できる能力」のこと。「常識」は、人間が身体をもってこれまでの生活体験をとおして獲得したものである。ロボットにはそれはできない。できたように見えても、それは人間の常識とはちがうものになっているはず。

(b) 状況依存視点のちがい
 端的に言うと、英語は「鳥の視点」、すなわち外から(上から)の視点に立つ場合が多い。逆に日本語は「虫の視点」、すなわち内から(中から)の視点に立つ傾向がある。その面白い対比例は以下の「雪国」(川端康成著)の冒頭に現れる。

【和文原文】国境の長いトンネルを抜けると雪国であった。
【英語訳文】The train came out of the long tunnel into the snow country.
(↑著名な日本文学研究者エドワード・サイデンスデッカーによる英訳)

 これを、日本語と英語をそれぞれ母国語とする人に見せて、イメージを描いてもらうと下図のようになるという。(この図は、当日発表スライドを見たあとで小生が描画したものである。)


 この類いの、視点の違いの例は他にも沢山あるという。「鳥の視点」にたつと、状況(システムの状況)を全部言わないと行けないが、「虫の視点」に立つと(内部にいるのだから)全部は言わなくてもよい。全部は言わないゆえに、日本語は「あいまい」だと指摘される場合があるが、それは正しい主張とは思われない。

 フレーム問題は、「鳥の視点」に立つ以上、避けられないのか?(by FoYo)

-----------------------------------------------------------
【注1】上記和文原文を、現代の自動翻訳器にかけた結果を以下に示します。いずれも、サイデンスデッカー訳とは異なり、英語特有の「鳥の視点」の立場を取らずに、和文をそのまま「直訳」しているように思います。それも興味深い点です。ロボットは人間にはなれない。
●Google Translate:
  After passing through a long tunnel on the border, it was a snowy country.
●Amazon Translate:
  Through the long tunnel of the border was a snowy country.
●Microsoft Translate:
  It was a snowy country through a long tunnel on the border.
●IBM Watson Language Translate:
  After exiting the long tunnel of the border, there was a snowy country.
----------------------------------------------------------
【注2】上記の和文原文とサイデンスデッカー英訳との対比については、参考資料[3]にも興味深い論考がある。
----------------------------------------------------------

参考資料
[1] フレーム問題(wikipedia)https://ja.wikipedia.org/wiki/%E3%83%95%E3%83%AC%E3%83%BC%E3%83%A0%E5%95%8F%E9%A1%8C
[2] 人工知能の話題-フレーム問題(人工知能学会)
https://www.ai-gakkai.or.jp/whatsai/AItopics1.html
[3] 松野町夫:リベラル21
http://lib21.blog96.fc2.com/blog-entry-357.html

2020年9月23日水曜日

指先に載るAIカメラ

(念のため、末尾に(注1)(注2)(注3)を追記しました。)
(→続編はこちらにあります。)

  掌どころか指先に載ってしまう、この小さなカメラですが、AI(人工知能)のためのニューラルネットワークプロセッサ(CNNやFFTアクセラレータを含む)を搭載しているとのことですから驚きます。日経ソフトウェア最新号(2020年11月号)に紹介記事が出ています。M5StickVという製品ですが、注目度が高く品薄のようです。ようやく、秋葉原の店の通販で、3,500円で購入できました。

AIネットワークプロセッサ搭載の超小型カメラ(レンズは背面)

    初期状態で搭載されているのは、顔検出アプリです。人の顔の膨大なデータを使った学習は既に終了していて、その学習結果を使って、顔をリアルタイムに検出するものです。さっそく試してみました。首相官邸のホームページに、新内閣の閣僚が並んだ写真が載っています。検出結果の一例を以下の図に示します。管総理と麻生副総理のお顔が検出され白い枠線で囲まれています。ベリーグッド。見せますね。

管総理と麻生副総理(首相官邸ホームページの写真からの顔検出)

    これ以外にも、学習済みデータはいくつか用意されています。例えば、有名な手書き数字認識(MNIST)のための学習済データ(モデル)も提供されています。これを利用して、自分で紙に描いた数字をリアルタイムに認識させるには、[入力画像前処理]+[forward計算]+[表示処理]の合計で、マイクロPythonプログラム約25行だけ書けばよいのです。すなわち、学習過程のプログラムは書きませんが、認識するためのプログラムは高レベルで小さく作れますので、AIの初歩の勉強にもなります。こんなに小さな安価なデバイスで、それができるは素晴らしいと思います。

手書き数字「5」を認識した状態(confidence = 0.829)
    
 もうひとつ行ってみます。Brownie 1000というアプリも公開されています。何かものを撮影した場合、1000種のラベルのどれに該当するかを、音声で答えてくれます。以下の例では、犬のぬいぐるみを撮影したところ、日本語で、「いぬです」と返って来ました。なかなかです。

「犬です」と音声で応答(Brownie 1000による)

 以上のような既存のアプリや、提供されている学習済のデータ(モデル)では物足りなくなった場合は、ちゃんとそれに応えてくれます。例えば、自分で多種類のコインを多数持っていて、コインを識別させたいとします。その場合は、種類毎にコインの画像(各ラベル毎に35枚以上)を用意して、指定のwebサイトへ送れば、その学習結果を送り返してくれるサービスもやっています。上記の手書き数字の場合と同様に、返送されてくる学習結果を利用して認識(識別)用の短いプログラムを作れば良いのです。実用性はあまりないかと思いますが、AIの勉強にはとてもよいデバイスではないでしょうか。

(注1)ここで利用する学習済みモデルは、kmodelという形式です。しかし、Google ColabやAnacondaで別途学習させてできるモデル(h5 keras)をkmodelに変換するツールもあります。したがって、中級から上級の人にとっても、このデバイスは色々と使い道があるかもしれませんね。

(注2)ただし、このデバイス、まだ不安定な動作をする場合もあり、色々と調査して対処する必要が生じるかも知れません。実際、小生の経験では、最新のファームウェアに書き換えた場合、上記のいずれの例も不具合が起こるため、少し古いファームウェアにダウングレードしました。

(注3)残念ながら、通信機能(WiFiなど)は搭載されていません。他のデバイスと連結させて何とか通信できないこともないようですが、WiFi機能搭載のM5StickV+はすでに開発済とのことですから、その国内発売を期待したいと思います。

2020年9月15日火曜日

Voice Calculator: well-crafted AI tutorial

Japanese (Summary)
  MIT App Inventorの高校生向けAIチュートリアル6例目として、「Voice Calculator」が追加されました。これは、音声入力「3.14掛ける8はいくら?」や「では、12の3.5倍は?」等々に対して、計算結果を音声で答えます。初歩的とはいえ、自分なりのミニ「Siri」やミニ「OK Google!」もどきなので、受講生の興味を惹くのではと思います。実際にやってみると、"こんなに簡単に!?"と思うはずです。それは、第一にApp Inventor自体の優秀さ、第二に(皆様方の実験の準備などと同じく)適切な手引きが周到に準備されているからです。そして、このアプリは一つの雛形に過ぎないので、自分でいろいろと拡張・発展を考えるよう促しています。そこがひとつ重要なのだと思います。高校生向け講座や、大学低学年のAI導入の参考になるかも知れません。大人でも、スマホで楽しめます!この優れたチュートリアルに、私が補足すべきことはないのですが、この記事では、日本語版にする場合の留意点(文字単位の検査か、あるいは正規表現利用か)を中心に書きましたので、ご参考になれば幸いです。

Creating your very first own voice calculator

    This time, a new tutorial Voice Calculator [1], mainly for high school students, has been added to the "Artificial Intelligence with MIT App Inventor" [2]. It executes basic arithmetic operations given by voice. Although it is a rudimentary application, it is a challenging task because commands are given in natural language. For example, for multiplication, various utterances as shown in Fig. 1 is allowed. Addressing these challenges will help us to understand how Alexa and Siri, which are commonly used on smartphones, understand human speech, and respond appropriately.


Fig.1 Acceptable utterance examples for multiplication

    This project makes use of speech recognition and text processing blocks built into App Inventor. And, the calculation result is responded with a synthetic voice. The explanation of the creation procedure is meticulously assembled and easy to understand. You will be given appropriate hints along the way, so you will be able to complete an app like Fig. 2 without frustration.

Fig.2 Voice Calculator made with MIT App Inventor


    I don't need to add anything to this excellent tutorial. However, there are some things to consider when creating this project in Japanese, so I will show it below.

Extracting numerical values from the uttered text

(1) Splitting at spaces
    Fig. 3 shows an example in which the utterance related to multiplication is converted into text by voice recognition. Note that in the English version numbers are separated by spaces, but in the Japanese version there are no such spaces. In the English version, you can extract numerical values (two in this case) by paying attention to space and using App Inventor's text processing "split at spaces" and "is number?" as shown in Fig.4. However, this method cannot be applied to the Japanese version because there is no such white space. 

Fig.3 Resulting text from speech recognition 


Fig.4 Extracting numbers by splitting at spaces

(2) Character by character inspection in the Japanese version
    In the Japanese version, an alternative method is required such as shown in Fig.5. Here, you need to scan the text character by character to see if it's a number or a period. This seems somewhat complicated but will be useful for beginners to practice string manipulation.

Fig.5 Extracting numbers by examining each character

(3) Using Regular Expressions
    Alternatively, you can use a regular expression search. For real numbers, give the regular expression pattern "[\d.]+" or "[0-9.]+". The simplest way is to use regular expression extension such as [3]. Fig. 6 shows an example of its use.

Fig.6 Extracting numbers using a regular expression extension

    You can also write a short JavaScript program as another way to use regular expressions. Fig.7  illustrates it. A good tutorial on calling JavaScript programs from MIT App Inventor can be found in reference [4].

Fig.7 Extracting numbers with regular expressions in JavaScript

    By the way, recently, the format of the file path given to the WebViewer URL has changed. That is, as shown in Fig.7, specify "http://localhost/..." as the file path for both debug execution and production execution. Please see Evan's posts [5][6] and related post [7] for more details.

Notice

    It has also been shown that recently developed new Text Blocks can be used effectively. For example, as shown in Fig. 8, not only "contains" but also "contains any" and "contains all" are very useful when determining whether the utterance is intended for multiplication.

Fig.8 An example of newly developed Text Block


References

[1] Voice Calculator
http://appinventor.mit.edu/explore/resources/ai/voice-calculator

[2] Artificial Intelligence with MIT App Inventor
http://appinventor.mit.edu/explore/ai-with-mit-app-inventor

[3] Regular expression extension (by kevinkun)
https://community.thunkable.com/t/regular-expression-extension/3657

[4] WebView Javascript Processor for App Inventor
https://appinventor.mit.edu/explore/ai2/webview-javascript

[5] App Inventor nb185 is live
https://community.appinventor.mit.edu/t/app-inventor-nb185-is-live/15563

[6] File Path Updates Starting with Android 10, Aug 8, 2020 evan's Blog
http://appinventor.mit.edu/blogs/evan/2020/08/08/file-path-updates-android-10

[7] How to call a simple Javascript function
https://community.appinventor.mit.edu/t/how-to-call-a-simple-javascript-function/15698




2020年9月10日木曜日

50年を越えて復刻されたある数学入門書

 人は、年をとるにつれて、感傷的に青春時代を思い起こすことがあります。今回の記事もそのような類いですが、それでもかなり抑制気味に書いていますのでご容赦下さい!?

    大学入学後間もなく、夢中になって読んだ(勉強した)数学書のひとつに「赤攝也著:集合論入門、培風館刊」があります。180ページほどの小冊子ではありますが、はしがきに「本書は、現代の数学的標準にてらしても、ほとんど杜撰な点を含まないものとなったと信じている」と書かれていたことに心が惹かれました。確かに、一歩一歩丁寧に精緻な叙述になっていますが、最後の方はかなり難解になっていました。すなわち、「整数と実数の濃度は異なる」ことに関する理論を経て、最後は、圧巻の「整列可能定理」と「ツォルンの補題(付録)」で終わっています。小生の手元にある本書には、「1967年8月31日読了」とメモ書きが残っていました。実に、今から53年前のことです!

    なぜ、今回この記事を書いたのかと言いますと、最近になってこの書が「文庫本」として復刻されているのを偶然知ったからです。普通のポピュラーな文庫本ではありません。「ちくま学芸文庫」という、筑摩書房による学術部門文庫判レーベルの一つです。これは名著の証ですね。さらに驚いたことに、著者の赤攝也先生ご自身が、「文庫化に際して」という文章を巻頭に寄せておられることです。すなわち、原本(培風館)の初版は1957年で、文庫本は2014年出版ですから、57年も経過しているのです。素晴らしいことだと思います。

    この50年を越える時の流れを振り返り、以下に新旧の本の写真を載せたいと思います。

(赤攝也先生は、他にも多数の数学の名著を書かれており、そのいくつかは同様にこの文庫で復刻されています。誠に残念ながら、先生は、昨年(2019年)お亡くなりになっていたことが分かりました。ご冥福をお祈り致します。)

赤攝也先生著「集合論入門」ちくま学芸文庫(2014)、培風館(1957)
初版本の中味(|V. 整列可能定理のところ)

現代の技術書と共に置かれた50年以上前の数学入門書(復刻版)


2020年9月8日火曜日

国立国語研究所「言語資源活用ワークショップ2020」(その2)

この記事は、前回記事の続きです。
国立国語研究所「言語資源活用ワークショップ2020」(その1)

以下は、ここでの小生のポスターWeb発表に対する質疑応答を記録したものです。(ご討論戴いた方のお名前は匿名化させていただきました。)デフォルトでは、SLACKのチャット機能を利用した討論形式です。希望者は、自分でzoomの部屋を立ち上げればリアルタイム映像で討論可能ですが、小生はSLACKだけにしました。ご参加戴いた方々、特にご討論戴いた方々に感謝申し上げます。

■ポスター発表 質疑応答状況(2020-9-8  15:00-15:50)
■本ポスターセッションの発表数 = 10件、セッションログイン数 = 318名
----------------------------------------------------------------
P2-5 植物に関する自由形式説明文からのJSON形式テキストの自動生成
発表者:山本 富士男(神奈川工科大)
----------------------------------------------------------------

■Fujio Yamamoto  2:31 PM
こんにちは、みなさま
ご質問ご意見等ございましたら、よろしくお願い致します。

■AAA氏  3:03 PM
京大のAAAと申します.興味深く拝見しました.こちらの JSON のタグとして type, what, how を設定されていますが,この value に入るものが重複しているのが気になりました.このサンプルではナツメの leaf の how は “楕円形で” となっておりますが,fruit の what にも “楕円形の” と類似した表現が生起していますが,これは設計通りのものなのでしょうか?

■Fujio Yamamoto  3:08 PM
気にしていた点をご質問いただき、ありがとうございます。確かに、現在のバージョンでは、例えば、花の色に関しては、「白い花」ならば、白はwhatに入りますが、「白く咲く」だとhowに入ってしまいます。そうすると、「白い花」の検索を、howとwhatの両方見る必要があり、不便です。改善を考えています。 

■BBB氏  3:24 PM
国語研のBBBです。今回、対象を植物とされたのは、どのような理由によるのでしょうか。例えば植物は動物にくらべると処理しやすいというようなことがあるのでしょうか。

■Fujio Yamamoto  3:29 PM
ご指摘ありがとうございます。今回、動物ではなく植物にしたという特別な理由はありません。きっかけは、予稿集の参考文献に挙げてあります、「デジタル植物写真集」の自由形式記述から、植物の特性を指定した柔軟な検索を行いたい、ということから始まりました。一定の検討は必要と思いますが、動物や観光地などの検索にも適用できるかも知れません。 

■BBB氏   3:31 PM
ありがとうございました。高い精度で自動抽出が可能になれば、大変有益だろうと思いました。

■Fujio Yamamoto 3:34 PM
重ねてありがとうございます。
今回は、type、what、howという大まかな特性の抽出に留まっています。それはそれで有利な面もありますが、特性の分解能をもう少し高くして、精密化を図れないか検討したいと思います。

==================================
感想:
この分野(コーパス言語学や言語資源研究)では全くの素人である小生ですが、情報系との接点である「自然言語処理」の応用という観点から参加させていただきました。初めてのWEB開催ということで、主催者側の準備も大変だったと思いますが、良い雰囲気で参加者と発表者の交流ができたと思います。来年は、恐らく世の中も落ち着いて、国語研究所現地での開催となることを期待し、小生もそれまでに少しでも新たな進展を達成して、また発表に望みたいと考えます。

クロージングでの、主催者側のまとめによりますと、下図のとおり、37件の発表の多くは言語学・日本語学に属するものでした。小生の発表は6件ある自然言語処理のひとつになっているはずです。恐らく、今後、自然言語処理も増加する方向ではないかと思います。

2020年9月7日月曜日

誰もが実感できる自然言語処理の発展

 趣味で、Googleアシスタント(OK Google!)を利用しています。自然言語処理の応用は、自動翻訳だけではないようです。今回は、植物の特性や台風情報等を音声で与えて、所望の情報が得られるかどうか確認してみます。

【音声による検索】
    ♪ 
漏斗状の赤紫の花を咲かせる植物
    ♪ 葉脈が明瞭な植物
    ♪ 虎柄の長い葉を持つ植物
    ♪ 葉は掌状で果実は楕円形
    ♪ 去年の台風で920hPa以下に発達したものはありますか
    ♪ それでは3.14かける8の答えは

 結論から言いますと、上記の最初の4例(植物)に対する結果は、いずれも、かなり優秀だと思います。Googleのやり方は、よく分かりませんが、最近雑誌などでも解説が増えているBERTという仕組みのもとで、実用的な自然言語処理がなされているのだと思います。



 利用した感触としては、出力結果はあくまで「候補」、ということのようです。ですから、例えば、「赤い4枚の花弁を持つ植物」と与えても、4枚に限らず、5枚や3枚の花弁のものも候補に挙がる場合があります。恐らく、この場合は、花弁の枚数よりも「赤い」が優先されるのだと思います。それはそれで、我々の感性に合致しているように思います。

 また、残りの2つの音声検索からも分かるように、人間がしゃべったことを正確に理解しているのではなく、いわば「拾い読み(赤字の部分のみを)」して、候補らしい回答を出力しているようです。的確な拾い読みができるとすれば、それは素晴らしい能力です。最終的には人間が判断するのですが、そのための有力な情報を与えるということでよろしいとおもいます。