シャオミ、SIMが挿さる多機能液晶バックミラー

これは、バックミラーなの？

シャオミ、SIMが挿さる多機能液晶バックミラー Smart Rearview Mirrorを製品化。8.88インチ画面でナビや録画、音声操作に対応
http://japanese.engadget.com/2017/02/27/xiaomi-smart-mirror/

人工知能はラーメン二郎を識別する

人工知能はラーメン二郎を識別するか
http://qiita.com/shouta-dev/items/dc160b3b4b0a36e405d0

音の機械学習に行ってきた！

２月２８日　AITC オープンラボ

第5回　機械学習勉強会
音の機械学習～入門編

に行ってきた！ので内容メモメモ

---

■ＡＩＴＣについて

■音の機械学習 前置き
・ＵＳＢ内のファイルをコピー
・dockerイメージ
前置き
・自己紹介
　動画像の機械学習→音声認識
　音響情報処理：超音波スピーカー
　　https://www.youtube.com/watch?v=2Hx881WFUsA

・音響分野の需要拡大
　Amazon エコー
・音声認識以外
　感情認識　ＡＰＩ
　声紋認証
→最近は音声認識のほうが手早い
　イベントで知識を得る
　２月で６９件、画像８１件、音声２１件
　　→ＡＩ全般
・音響エンジニア界隈の現状
　需要の拡大に対して情報が少数
　オープンコミュニティ・勉強会はほぼない
　日本のベンチマークは、学術的・お金を払うようなもの

・一週間ばかりニューヨークに取材した
　→知っている人は知っているが
　　知らない人はまったくしらない（音素）

・音の機械学習の基礎
・音の機械学習とは
　１．しくみ
　２．特徴量

・音声認識の仕組み
　画像のように、ラベルが１個かえるのではない
　音声（マイク入力）
　特徴量抽出　　次元統一、次元圧縮
　音素推定　　　特徴量の音素を推定
　発話推定　　　単語の尤度を推定
　文脈推定　　　文脈から正しい文を推定

演習１：
　基礎から音を機械学習で使用する方法を学ぶ
演習２：
　仕組みはともかくサービスを組み入れる

・音声の特徴量
　ＷＡＶ（わぶ）ファイル：時間波形
　パターンマッチングでは見つからなくなる
→スペクトルに分解
　フーリエ変換する：周波数軸に変換する
　何の音素か推定可能になる
　人間の耳に注目：低い周波数には敏感
→メルフィルタバンク
　低いほうは細かく、高いほうは大雑把に周波数を変形する
→ＭＦＣＣ（メル周波数ケプルトラム係数）
　メルフィルタバンクをかけたスペクトルを離散コサイン変換
　一般的に音声認識で用いられる特徴量

※その他
　感情、音圧
　これを取ってくるＯＳＳがある

音素推定
・音素・発音を記号で表したもの
　ＧＭＭ(がうしあん　みくすちゃー　もでる）
　→多クラス分類
・音素だけではなく、様々なクラスタリングタスクに応用できる
　推定クラス：登録した家族の声→個人認識
　正常・異常時の音声

演習１
Pythonを使って特徴量抽出、音素推定
　numpy
　scipy.io.wavfile　　音声ファイル読み込み
　scikits.talkbox　　　特徴量抽出
　Pyaudio マイクからの動的入力ライブラリ

dockerにはいって、
python audio.py input.wav
精度が悪かったら録音しなおしてね！

・ソースコード
　import
　特徴量抽出　MFCCを求める scikits.talkbox
　機械学習
　認識部分
　モデル（あモデル、いモデル・・）
　尤度計算

・音声の入力
　scipy.io.read(input_file)
・ＭＦＣＣ
　scikits.talkbox
→pythonでなくても、とにかくＭＦＣＣが出れば、どうにかなりそう・・
　
■音のＯＳＳ
・音に関するソフト（ＯＳＳ）
　音声認識をサービスに組み込みたい
　　julius（じゅりあす）

・音の分析がしたい
　　SPWAVE：スペクトルを出す。声紋認証のグラフなど。フーリエ変換も
　　　声紋：強弱を色で表す。周波数をたてに

　　OpenSmile：感情量、商用だとお金かかる？
　　Praat　：感情

・自分で音声認識モデルを作りたい
　　HTK
　　kaldi（かるでぃ）
　音素推定、単語、文脈推定：敷居高い→音に入りにくい

・今日から使える
　じゅりあす
　　ＵＩ部分が用意
　　自分で作ったモデルもＯＫ
　　マルチプラットフォーム

　ＧＭＭ／ＨＭＭ　ＤＮＮ／ＨＭＭの２モデル

■演習２
・文法が決まった発話
　grammar-kit-
電話音声：音声認識　コールセンター
　辞書に入っていないと、とってくれない
　追加すると・・・
　認識してくれる

Arduinoでサブギガ帯通信をするには・・・

Google検索で、「920MHz無線モジュール arduino」で、このブログに来た人がいるみたいなんだけど・・

ごめん、その情報を載せてないね、ちょっと知っていることを
書いてみる（思いこみなど、不正確な部分あり）

---

■どういう構成＆インターフェースをとるのか

サブギガ（９２０ＭＨｚ帯のこと）に限らず、通信モジュールには、
ＵＡＲＴの口があることが多い。

なので、Arduinoに限らず、マイコンと通信モジュールを接続する
場合には、マイコン側でシリアル通信を行い、TX,RXを、
通信モジュールのＵＡＲＴの口（ＴＸ，ＲＸ）に接続する。

通信内容は、ＡＴコマンドを受け付けたり、独自プロトコルだったり
様々なので、マニュアルをみよう！

ただし、ArduinoとインタープランのＩＭ920との場合は、
上記接続の他に、シールドがある
秋月で売ってる

Ａｒｄｕｉｎｏ　ＵＮＯ　Ｒ３対応　ＩＭ３１５ＲＸ・ＩＭ３１５ＴＲＸ・ＩＭ９２０用　ＩＭ無線シールド
http://akizukidenshi.com/catalog/g/gM-10144/

---

■通信モジュールについて

　インタープランのＩＭ９２０のほか、
　ローム　
　http://www.rohm.co.jp/web/japan/news-detail?news-title=2015-01-07_ad&defaultGroupId=false
　や
　村田
　http://www.murata.com/ja-jp/about/newsroom/news/product/wireless/2015/0217
　富士通
　http://www.fujitsu.com/jp/group/fcl/products/pdut/detail/1186515/wirelessmodule/MBH7SLZ01
　沖
　https://www.oki.com/jp/920M/mh/module/
　などが出している。どれもＵＡＲＴには対応しているので、上記の方法で通信できる

　ただし、９２０の仕様には、ＷＩ－ＳＵＮとLoraがある。どちらだかは、
　それぞれのメーカーのサイトなり、営業さんに聞いてね！
　（ファームウェア書き換えで対応できるかも？）

---

■マイコン側について

　ＵＡＲＴは、事実上、シリアル通信できればよい。
　ＰＩＣだと、ＵＳＡＲＴ，ＥＵＳＡＲＴになっているものもあるけど、
　これらはＵＡＲＴ通信できる。

　シリアル通信を行う場合、ＵＳＢとの関係において、２つのケースがあるので注意
　　ＵＳＢとデジタルピンのＴＸ，RXがつながっている
　　ＵＳＢと、シリアル通信は独立。ＴＸ，RXはつながっていない
　これ、arduinoの中でも異なる
https://trac.switch-science.com/wiki/Guide/ArduinoLeonardo
　を参照のこと
　
　つながっていてもいなくても、とにかくＴＸ，ＲＸピン（Arduinoの場合、０番、１番）に、
　　通信モジュールのＴＸ，ＲＸを接続して
　　　（通信モジュールとマイコンはそのままつないでＯＫ、
　　　　通信モジュール同士を接続して通信する場合は、自分のＴＸに相手のＲＸをつなぐ）
　そこへ、シリアルで書きこむ感じ・・

---

わかりましたあ？