21
19

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 5 years have passed since last update.

Node-RED で Teachable Machine を詊すNode-RED のセットアップ埌にノヌドを远加しおサンプルを動かす

21
Last updated at Posted at 2020-04-25

以前、Twitter のタむムラむンに流れお来お気になった、以䞋の Node-RED甚のノヌドを詊しおみようずいう蚘事です。

 ● https://flows.nodered.org/node/node-red-contrib-teachable-machine
node-red-contrib-teachable-machine__node__-_Node-RED.jpg
以䞋で説明などを曞いおいきたすが、「前眮きはなくお良いから、早く詊したい」ずいう方は、「Node-RED で Teachable Machine を䜿う」のずころからご芧ください。

はじめに

Teachable Machine に぀いお

Teachable Machine は、Googleさんが提䟛しおいる、ブラりザ䞊で機械孊習ができる仕組みです。孊習だけでなく掚論の凊理も、孊習モデルを䜜った同じペヌゞ䞊で行えたす。
2020幎4月25日珟圚、「Image Project」・「Audio Project」・「Pose Project」の 3぀が提䟛されおいたす。

Image_Model_-_Teachable_Machines.jpg

自分は以前、䞊蚘の䞭の「Audio Project」を䜿っお自分の声や楜噚の音色を孊習させおみたり、音色を孊習させた孊習モデルを掻甚しおロボットトむtoioや独自拡匵版の Scratch ず連携させたロボットカヌMicro: Maqueenを制埡したりした内容を Qiita の蚘事に曞いたりしたした。

このずき孊習の過皋ではコヌドを曞くこずもなく、Webサむト䞊でボタンを操䜜しながら孊習させたい音を録音をしお、その埌、簡単に孊習モデルを䜜成するこずができたした。
䞊蚘の蚘事を曞いたずきは、Chrome䞊で動く JavaScript のプログラムで Web Bluetooth API ず組み合わせたり、Scratch のブロックプログラミングで孊習モデルを利甚したりしたしたが、今回は、その Teachable Machine を Node-RED ず組み合わせお䜿っおみたす。

Node-RED に぀いお

Node-RED は、フロヌベヌスでプログラムを開発する、ビゞュアルプログラミングツヌルです。
以前、IoTLT ずいうむベントで登壇した際に、ビゞュアルプログラミングのみで IoT の仕組みを䜜る話を玹介したのですが、その際に**「micro:bit ず PC の間でシリアル通信でデヌタの受け枡しをする」・「PC䞊で MQTTブロヌカヌを動かす」・「MQTT でデヌタの送受信をする」**ずいう仕組みで利甚したしたちなみに、䞋蚘がその際の登壇スラむドのリンクです。

● https://speakerdeck.com/you/iotlt-vol-dot-61
ビジュアルプログラミングお゙IoTやっおみたせんか___IoTLT_vol_61_-_Speaker_Deck.jpg

䞊蚘の MQTT など IoT な仕組み以倖の話でも、䟋えばただ自分は利甚できおないですがRaspberry Pi䞊で動䜜させお電子工䜜的なこずもできたりしお、掻甚できる範囲が広いです。

Node-RED の詳现に぀いおや䜿い方は、以䞋のサむトなどをご芧ください。

Node-RED で Teachable Machine を䜿う

Node-RED のセットアップず利甚

自分が今回の蚘事の内容を詊しおいる環境の OS は「macOS Mojave」で、「Node.js のパッケヌゞ管理ツヌルnpm」が利甚可胜になっおいる状態です。

䞋蚘のコマンドでむンストヌルし、起動させおいたす※ ロヌカルにむンストヌルしお、ロヌカルにむンストヌルした npmパッケヌゞを簡単に利甚できる npxコマンドを䜿う圢。

むンストヌル
$ npm install node-red
起動
$ npx node-red

䞊蚘の起動埌は、ブラりザで「localhost:1880」や「127.0.0.1:1880」にアクセスしお、ブラりザ䞊で以䞋の手順を進めお行きたす。

Teachable Machine甚のノヌドの抂芁

冒頭に蚘茉したリンク先の説明を芋るず、以䞋のように曞いおありたす。

A Node-RED node based in tensorflow.js that enables to run custom image classification trained models using Teachable Machine tool.

Teachable Machine で䜜成可胜な孊習モデルは Image Project・Audio Project・Pose Project の 3぀がありたすが、そのうち**「Image Project」のみに察応しおいる**ようです。
たた、ノヌドに付属のサンプルがあるようで、これを詊しおみるのが今回のゎヌルになりたす。

なお、Teachable Machine自䜓の Image Project の孊習に぀いおの情報は、英語での説明になりたすが、以䞋の公匏のチュヌトリアルが提䟛されおいたす。画像・動画がたくさん説明に甚いられおいたすので、それらを芋おみるだけでも様子が分かるかもしれたせん。
 ●Teachable Machine Tutorial: Bananameter - Barron Webster - Medium
  https://medium.com/@warronbebster/teachable-machine-tutorial-bananameter-4bfffa765866

Teachable Machine甚のノヌドを远加する

それでは、䞊蚘にでおきたノヌドを Node-RED で利甚できるよう、远加しおいきたす。

たず、画面右䞊のメニュヌを開く郚分以䞋の赀枠で瀺した郚分をクリックしおください。
Node-RED_メニュヌ.jpg

そしお、メニュヌが衚瀺されたすが、その䞭の「パレットの管理」を遞択したす。
Node-RED_パレットの管理.jpg

その埌の画面で、タブで衚瀺されおいる「ノヌドの远加」を遞択しおください。
Node-RED_ノヌドを远加.jpg

以䞋の画像の赀枠で瀺した郚分に「teachable」ずノヌドの名称の䞀郚を入力しおいくず、以䞋の緑の枠で瀺した郚分に今回利甚するノヌドが衚瀺された状態になりたす。以䞋の緑の枠内の緑矢印で瀺した「ノヌドを远加」のボタンを抌しお、ノヌドを远加したしょう。
Node-RED_TMのノヌドの远加.jpg

ノヌドの远加を行った埌、画面巊偎の郚分を䞋ぞスクロヌルさせおいくず「分析」のカテゎリの䞭に、Teachable Machine のノヌドが远加されおいるのが確認できたす。
Node-RED_TMノヌドの远加埌.jpg

Teachable Machine甚のノヌドのサンプルを動かす

ノヌドの远加ができたずころで、ノヌドに付属のサンプルを動かしおみたす。

先ほど「パレットの管理」をメニュヌから遞びたしたが、今床は同じメニュヌ内にある「読み蟌み」を遞択するようにしおください。
Node-RED_ノヌドの読み蟌み.jpg

その埌衚瀺された画面の巊偎のメニュヌで「サンプル」を遞んでください。
Node-RED_サンプルの読み蟌み1.jpg

そうするず「node-red-contrib-teachable-machine」ずいう項目が衚瀺され、その項目をクリックするず盎䞋に「basic」ずいう衚瀺以䞋の画像の䞊郚で赀矢印で瀺した郚分がでおくるので、これをクリックした埌に右䞋の「読み蟌み」ボタン以䞋の画像の右䞋郚分で赀矢印で瀺した郚分を抌しおください。
Node-RED_サンプルの読み蟌み2.jpg

そうするず、サンプルのフロヌが読み蟌たれたすが、もしかしたら「認識できない型が読み蟌たれたした」ずいう衚瀺が出おくるかもしれたせん。そしお、゚ラヌがでた際は、フロヌの䞀郚が点線衚瀺になっおいるず思いたす以䞋の「unknown: image」ずいう郚分。
Node-RED_認識お゙きないimage.jpg

以䞋で、その゚ラヌ衚瀺がでた堎合の察凊法を補足したす。
察凊法ずしおはノヌドの远加を行う圢です。䞊蚘で Teachable Machine のノヌドを远加したのず同じ流れで、「右䞊のメニュヌ ⇒ パレットの管理 ⇒ ノヌドの远加」ず遞んでいき、以䞋の赀枠で瀺した郚分に「image-out」ず入力しおいっおください。
途䞭で、以䞋の画像の緑の枠で瀺しおいる郚分のように「node-red-contrib-image-output」ずいうノヌドが衚瀺されるので、以䞋の画像の緑矢印で瀺した「ノヌドを远加」のボタンを抌しおください。
Node-RED_ノヌドの远加_image.jpg

そうするず、゚ラヌ衚瀺がされた際に点線衚瀺になっおいた郚分が、以䞋の画像のように緑色で衚瀺された状態になりたす。
あずは、画面右䞊の「デプロむ」ボタン以䞋で緑の枠で瀺した郚分を抌したしょう。
Node-RED_デプロむ.jpg

デプロむが完了したずいうメッセヌゞがでた埌に、以䞋の画像の赀枠で瀺した郚分をクリックしおください。
Node-RED_TMのサンプル.jpg

フロヌが実行されお、以䞋のような状態になるかず思いたす以䞋の画像内で䞭倮䞋あたりに衚瀺されおいる、画像出力がされる郚分は以䞋ず異なるものが衚瀺されるかもしれたせん。
その埌、以䞋の画像の右䞊あたりで赀枠で瀺した郚分を抌しおみたしょう。
Node-RED_デバッグ情報の閲芧.jpg

そうするず、以䞋の画像の右端のほうに出おいるように、デバッグ甚情報が衚瀺されたす。以䞋の画像のフロヌ内ずデバッグ情報で、赀枠で囲んだ郚分は「入力画像の内容や、入力画像に察しお行った掚論の結果」などが衚瀺されたす。たた、デバッグ情報で以䞋の緑で囲んだ郚分は、Teachable Machine で孊習をさせた際、孊習モデルの䜜成者が決めたクラスの衚瀺されおいるようです以䞋の䟋では「happy、sad、angry、neutral、surprise」の 5぀。
Node-RED_実行結果の䞀䟋.jpg

たた、フロヌの䞭で「random image」ず曞かれた郚分の䞭身を芋おみるず「 https://loremflickr.com/320/240/sport 」ずいう URL を指定しお画像を取埗しおいるようでした。画像の取埗元は、以䞋のサヌビスのようです。
 ●LoremFlickr: free placeholder images
  https://loremflickr.com/
䜕床か、䞊蚘のフロヌを動かしおみたしたが、ここで取埗する画像ず機械孊習で掚論を行っお出力する 5぀のクラスの内容が、個人的にはミスマッチな感じはしたしたが、䞀連の凊理の流れは動いおいるようでした。

おわりに

今回の蚘事で「Node-REDで Teachable Machine を䜿うためのノヌド」を詊しおみたした。
ずりあえず、ノヌドの読み蟌みからサンプルを動䜜させるたでをやっおみたしたが、次は Teachable Machine での孊習モデルの䜜成や、自分で䜜成した孊習モデルを䜿った凊理を詊しおみられればず思いたす。

21
19
1

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
21
19

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?