アーカイブ

IoT時代のセンサ技術について(4)

栗山敏秀
((一社)次世代センサ協議会 理事 IoTセンサ技術研究会)

4.IoT時代のセンサデータ

センサ信号をマイコンとつなぐインターフェイス規格として図10に示すようにSPI(Serial Peripheral Interface)やI2C(Inter-Integrated Circuit)などがあり、図中に示すプログラム命令(Python言語)を使いセンサデータの取得を簡便にしている。

図10 センサのインターフェイス 規格

次世代センサ協議会では、「IoTセンサ技術実習セミナー」を行っているが、これはワンボードコンピュータのラズベリーパイ3(Raspberry Pi 3)を使い各種センサを用いた計測とそのデータのクラウドへの収集を経験するものである。

図11はラズベリーパイ3の全体写真とその外部端子である。名刺大の大きさで通信端末として有線LAN、WiFi、Bluetoothを内蔵しており、外部インターフェイスとして上記のSPI(Serial Peripheral Interface)とI2C(Inter-Integrated Circuit)を備えている。

図11 ラズベリーパイ 3 とインターフェイス回路

ラズベリーパイ3は、最近のマイコンではよく内蔵されるA/D変換回路を持たないので、外部にA/D変換回路を設けてセンサからのアナログ信号を取り込む必要がある。マイクロチップ社のMCP3002(SPIインターフェイスを持つ10ビット2チャンネルA/D変換回路)を使用した場合の測定例を図12に示す。

図12 A/D 変換回路を用いたアナログ信号の取得

ラズベリーパイでは、プログラミング言語としてGuido van Rossum氏が開発したPythonが良く使われる。Pythonは人が理解し易い高水準言語で、機械語に翻訳するコンパイルが不要なスクリプト言語であり、AI(Artificial Intelligence)のディープラーニングのプログラムでも良く使用されている。

図13 SPI インターフェイスのプログラム例

図12の回路に対するデータ取得プログラムを参考のため図13に示す。最初のimport という命令はPythonに組み込まれている共通の機能がまとめられているモジュールを読み込みもので、import spidevはspidev モジュールをインポートする命令、spi = spidev.SpiDev()はSpidev オブジェクトのインスタンス(あらかじめ定義されたプログラムやデータなどを 、メインメモリ上に展開して処理・実行できる状態にしたもの)作成の命令である。このプログラムにより、2種類のアナログ信号のデータを読むことができる。

図14 IoT におけるセンサデータの活用

IoT(Internet of Things)においては、センサにより集められた大量のデータ(ビッグデータ)をどう活用するかが大きな課題になっており、図14に示すようにAIの利用、中でもAIの一分野である『機械学習』の一つである『深層学習(Deep learning)』に期待がかかっている。機械学習とは「ロボットやコンピュータなどの機械が、与えられたデータから自動的に学習し最適なパラメータを取得する手法」で、深層学習(Deep learning)は神経細胞の回路網に相当するニューラルネットワークが多層(Deep)に構成されたものである。囲碁で「AlphaGo」がプロ棋士に勝利した事や、自動車の自動運転などにより、第3次AIブームが実感されるようになっている。

深層学習(Deep learning)は、脳を手本としたもので、脳と似た構造、機能をもっている。脳の神経細胞(ニューロン)回路における、神経細胞の興奮(活動電位)の生化学的なメカニズム、シナプス結合による他細胞への信号伝達、学習によるシナプスの伝達効率の変化(シナプスの可塑性)は図15のように人工のニューラルネットワークに対応される。また、脳は6層の神経回路網からなり高度な情報処理が行われている。

図 15 脳の神経回路網とAIのニューラルネットワーク

1980年代の第2次AIブームにおいて、機械学習の一つとしてバックプロパゲーション(Backpropagation、誤差逆伝播法)がDavid E. Rumelhartにより提唱された。3層のニューラルネットワーク(入力層、中間層、出力層)において中間層の活性化関数として非線形関数が用いられ、出力層の誤差からニューラルネットワークの結合度が調整される。そのため、ニューラルネットワークを多層化すれば脳のような情報処理が実現できると期待された。しかし、多層化による高度な学習実現の試みは、しばらく頓挫することになる。これは、ニューラルネットワークの層を増やしてゆくと、当時のバックプロパゲーションの手法では出力誤差から十分な学習ができなかったためである。
『深層学習(Deep learning)』は、ニューラルネットワークの層を多層に深くしても学習できるように工夫されたもので、画像や音声の解析に効力を発揮している。2012年に画像認識の世界的なコンテストであるILSVRC(ImageNet Large Scale Visual Recognition Challenge)で「AlexNet」3) が多層のCNN(Convolutional Neural Network、畳み込みニューラルネットワーク)を使用して抜群の認識率を達成した。それ以降、CNNにおいて層をより深くしたニューラルネットワークによる認識率の向上が競われている。
『深層学習(Deep learning)』に関して、次世代センサ協議会ではディープラーニングセミナー(実習付き)が行われており、このセミナーにおいてはディープラーニングライブラリを用いた、多層ニューラルネットワークでの画像認識、再帰ニューラルネットワークでの時系列データ予測、上記のCNNによるMNISTの手書き文字認識の実習が自分のパソコン上で実施することができる。また、モーターの動作異常の検出を、加速度センサで測定した信号をディープラーニングで解析することにより行っている。自分でプログラムや装置を動かすことにより、ディープラーニングの性能を実感できるものとなっている。

5.IoT時代のセンサ情報セキュリティ

IoTの普及とともに重要性を増しているのがセンサ情報のセキュリティである。図5に示したように、IoTが現実の物理空間とサイバー空間をつなぐものであるため、IoT機器へのサイバー攻撃は人の生命や社会の安全に対する大きな脅威になる可能性がある。

「IoTセキュリティガイドライン」4) は、これらの脅威に対処するために経済産業省と総務省が示したもので、センサに関するものとしては(1)外部インターフェイスからのリスク、内包リスク、物理的接触リスクの3つについて個々の機器で対策を検討、(2)個々のIoT機器やシステムで対応しきれない場合、それを含む上位の機器やシステムで対策を検討、(3)IoT機器・システムの異常を検知できる設計、などが示されている。

6.おわりに

IoT時代のセンサ技術について、これまでの進歩や現状、将来について解説を行った。IoTにおいてはデータが中心的な役割を果たすが、それを生み出すセンサの重要性が改めて注目されている。
IoTセンサ技術研究会は、次世代センサ協議会の目指す「センサを高機能・高付加価値化させる革新的センサ技術」=「SENSPIRE (=Sensor inspire)」創出の一端を担う活動を行っている。

山の遭難救助ロボットコンテスト(Japan Innovation Challenge 2018)の開催

Japan Innovation Challenge 2018実行委員会は、10/10~10/12の3日間に実際の山を使った遭難救助ロボットコンテスト「Japan Innovation Challenge 2018」(賞金総額:500 万円)を北海道上士幌町にて開催すると決定、7月30日(月)参加受付を開始した。

 大会内容は、 山の遭難救助における「発見」・「駆付」の2つの課題が設定される。「発見」には300万円、 「駆付」には200万円、 合計500万円の賞金が用意される。 一つ目の課題「発見」は、 実施会場に設置されたマネキンを発見し、 位置情報と写真を取得する。 二つ目の課題「駆付」は、 1チームに1つずつ配布されるレスキューキット(主催者より貸与される無線機や毛布等を想定した重さ3kg程度の筒)をマネキンの周囲まで運ぶというもの。

このコンテストは、 第一回開催当初から、 実際の山を活用し開催することで、 産業技術力の発展を目指してきた。 消防関係者との共同訓練は、 早期発見・早期救助へつながる新たな手法を、 実際に利用する可能性のある消防関係者が体験することで、 実用化に向けて、 技術課題の抽出だけではなく、 持続可能な運用体制の検討を加速させる狙いがある。


ニュースサイト:https://www.dronetimes.jp/articles/3152
大会公式サイト:https://www.innovation-challenge.jp

スマートフォンに「4800万画素カメラの時代=8Kの時代」がやってくる

以前にもお伝えしたが、SONYの発表によれば、同社はスマートフォン向けCMOS画像イメージセンサーIMX586を発表した。本イメージセンサーの画素数は4800万画素と、小さな面積にこれまでにない画素数を実現している。技術詳細はリンクを参照。大きな画素数のイメージセンサーはより精密なレンズの需要も呼び起こすことだろうが、4800万画素というイメージセンサーは主に2020年の8Kの時代を見据えている製品であることは間違いない。加えて、被写界深度を自由に設定できる画像処理技術などとの組み合わせやソフトウエア画像補正技術の発達で、レンズの質が良くない場合でも、また、必要な画角が得られない場合でも、高解像度の意図したデジタル画像が容易にできる時代がやってきた、といえるだろう。

スマートホーム製品を使用した熱中症対策商品 スペクトラムテクノロジー













スペクトラム・テクノロジーは、スマートホーム大手のWulian製品の温湿度センサ、赤外線送信機を使って室内の温湿度を自動で制御する、熱中症対策商品の販売を開始した。

特徴としては、マイルール機能を使い温湿度を暑さ指数に基づいて設定し、エアコンのオン・オフを自動で行う。 また、シーン機能を使い在宅時のみに温湿度制御ができる。いったんマイルールを設定すると、ローカルでエアコンをオフにしても、温湿度が上昇すると自動でオンになる。また、高齢者をサポートしている人は、遠隔のスマホから温湿度の確認が簡単にできるという。

ニュースリリースサイト:https://spectrum-tech.co.jp/smarthome/heatstroke.html

GDPR新たな展開か?

日経XTECHの報道によれば、欧州議会は「Privacy Shield」を、米国企業などが2018年9月1日までに順守できない場合、停止するよう決議した、とのこと。

空港での荷物検査ではもうPCを取り出さなくていい?

American Airlinesの広報によれば、米国JFK Airportで、乗客の手荷物検査に3Dスキャナーを試験的に導入し、カバンからいちいちPCを取り出すなどの手間がなくなる、という。

ソニー 4800万画素スマホ向けCMOSイメージセンサを発売

一般的に画素の微細化を進めると、1画素あたりの集光効率が悪くなり、感度が低下するとともに、飽和信号量も低下するが、この製品では、集光効率、及び光電変換効率を従来よりも高める設計・製造技術を駆使することにより、感度と飽和信号量の高い世界最小0.8μmの微細画素の開発に初めて成功した。 さらに、新開発の画素を採用することで、対角8.0mmという多くのスマートフォンに搭載可能なサイズでありながら有効4800万画素を実現した。

また、隣接4画素が同色のカラーフィルターであるQuad Bayer配列を採用することにより、高感度と高解像度を両立。夜景撮影等低照度下での撮影時には、隣接する4画素の信号を加算することで、画素サイズ1.6μm相当(有効1200万画素)に感度を高め、低ノイズで明るい写真や動画の撮影が可能。日中屋外等での明るいシーン撮影時には、イメージセンサに搭載した独自の信号処理機能で配列変換することにより、リアルタイムで有効4800万画素の高解像度画像が得られる。

ニュースリリースサイト:https://www.sony.co.jp/SonyInfo/News/Press/201807/18-060/

IoT時代の光ファイバセンサー(3)

梶岡 博
((株)グローバルファイバオプティックス 代表取締役)

4.光ファイバ干渉計と応用センサー

4.1 光干渉計と干渉条件

光は波なので干渉する。二つの波源からでたヤングの干渉実験は有名である。図4.1に3つのタイプの光ファイバ干渉計を示す。光ファイバ干渉計は一つの光源から出射された光を分岐して分岐光の光路差(位相差)を光の干渉で検出する。(a)のマイケルソン干渉計は身近なところでは医療用OCTに使われている。また数年前のアインシュタインが100年前に存在を予言した重力波の観測にもこのマイケル干渉計が使われている。(b)のマッハツエンダ干渉計はL.MachとL.Zehnderによって1891年にほぼ同時に考案された。筆者も光ファイバをカンチレバーの上下に張り付けた歪センサーを試作し干渉縞を観測した経験がある。(c)はリング干渉計でリングを左右両方向に伝搬する光の位相差を測定する。光ファイバジャイロはリング干渉計の光路を光ファイバで構成したものであり、次章で詳しく述べる。

図4.1 光ファイバ干渉計の種類

図4.2はマッハツエンダ干渉計で干渉縞の観測をしている様子を示している。我々は経験上A端とB端から出射される偏波面が一致し、干渉性のある(コヒーレントな)光源の時に干渉縞が生じることを知っている。すなわち光が干渉する条件は光源から出射された二つの光の偏波面の整合と光源からの距離の差(光路差)がコヒーレント長以下であることである。光の干渉は重要な現象なのでこの命題の理由を考えてみたい。レーザの国際会議で常に”What is light?”、 “The nature of light.” 等のテーマのチュートリアルがあるように光の正体はいまだ神秘的である。ここではハイゼンベルクの不確定性原理を考える。
同原理によると光のエネルギーと時間の観測誤差は以下の関係がある。ここでhはプランク定数である。

図4.2 光干渉縞の観測の様子

ΔT・ΔE ≥ h・・・(1)
これを変形すると

ΔX ≥(λ2/Δλ)・・・・(2)

となる。(2)式の右辺はいわゆる光源のコヒーレント長である。つまり光源が決まると二つの光の光源からの距離の差がコヒーレント長まで広がっても干渉する。次に偏波面の整合が干渉に必要な理由について考える。図4.2で同一偏波の場合A端、B端のどちらから出射したかが識別できない、すなわち位置誤差ΔXがあるのでエネルギーが観測できる。すなわち干渉縞が見える。A端とB端から直交した偏波が出射された場合は干渉する光子が偏波状態で区別されておりどちらの端子から出射したかの位置誤差(あいまいさ)はない(ΔX=0)のでエネルギーの観測誤差は無限大になり干渉縞が見えない。これは筆者の考察であるので物理学のご専門の先生にご批判をいただければ幸いである。

4.2 光ファイバジャイロ

リング干渉計が回転するとリングを両方向に伝搬した光の干渉光が回転の速さに比例して変化するので角速度が計測できる。この現象は1913年にフランス人のSagnacによって発見され、発見者に因んでSagnac効果と呼ばれる。リングを光ファイバで構成した光ファイバジャイロ(FOG:Fiber Optic Gyroscope)は1976年にValiによって発表された。FOGにはオープンループ型とクローズドループ型の2タイプある。ここでは図4.3に示すオープンループ型について説明する。

図4.3 オープンループ型FOGの構成

FOGは光干渉センサーなので光ファイバには偏波面保存ファイバ(PMF:Polarization Maintaining Fiber)が適している。オープンループFOGは光ファイバのみならず分岐器や偏光子などの光部品がすべて光ファイバ型で構成できる。筆者は1970年半ばから日立電線(現日立金属)で通信用光ファイバ・ケーブルの開発に従事した。1970年後半からは日立製作所中央研究所の指導のもとPMFの開発に従事した。当時PMFは将来のコヒーレント光通信用に使われる可能性があり、またジャイロスコープなどの計測用への適用の可能性も指摘されていた。当時の会社のトップから新製品開発はメーカ存続の鍵であるのでPMFのみならずFOGを開発するような指示が降りた。

図4.4 楕円ジャケット型PMFの断面写真

このような背景のもと図4.4に示すPMFを世界で初めて商用化に成功し1983年に日刊工業新聞の10大新製品賞を受賞した。一方FOGを開発するために1980年代後半に関連の光部品も開発し1990年はじめに産業用のFOGの商品化に成功した。その後1990年代初めにトヨタ自動車マークIIなどの高級車のカーナビ用にオープンループFOGを約1万台納入し、「カーナビ用光ファイバジャイロ」で1993年度のIR100を受賞した。当時はGPSも普及しておらずFOGで自立航法ができた。その後GPS用衛星が打ち上げられ、道路地図も高精度化され、マップマッチングソフトも登場したためジャイロは安価な振動式に置き換えられた。しかしFOGはその他の用途で今日まで20数年間にわたりロングセラーとなっている。FOGは光ファイバが囲む面積に感度が依存する。光ファイバ長を1km、ファイバコイル直径が10cmの場合、0.1度/時オーダーの回転角速度が検出できる。弊社にある手のひらサイズのサンプルFOGは地球の自転角速度(24時間で1回転、15度/時)を容易に計測できるわけである。一般にFOGは筋の良いセンサーだと言われている。Sagnac効果は相対性理論によって証明できる。また最小角速度分解能は不確定性原理によって導かれる。FOGは今日の物理学を支える2つの理論に支えられている。そのほかFOGには前述した光ファイバのメリットがある。現在まで実用化されているFOGのもう一つの応用としてフェンス(侵入)センサーがある。

IoT時代のキーデバイスMEMSセンサ(3)

江刺正喜
(東北大学 マイクロシステム融合研究開発センター)

3. 光スキャナ式画像センサ (センサ + アクチュエータ)

アクチュエータを組み合わせたセンサの例として光スキャナ式画像センサを紹介する。図8に 電磁駆動による2軸光スキャナの構造を示す9)。シリコンのジンバル構造に駆動用コイルと鏡が形成されており、電流を流したコイルと外部の磁石の間に働く電磁力により鏡を2方向に偏向させることができる。なおこのセンサではガラス上の検出用コイルで鏡の向きを検出することも可能である。

この2軸光スキャナは、3次元的な距離画像センサ(レンジイメージャ)として用いられている。図9にその原理を示すが、光は1ns で30cm進むため、パルスレーザの光が対象で反射されて戻るまでの飛行時間から、対象までの距離を知ることができる。レーザ光をスキャンし反射してきた光を検出するのを電磁駆動2軸光スキャナを用いて行うことにより、距離画像を得ることができる10)。図9中に示す画像の色が距離に対応している。このシステムは東京の山手線の駅に設置されているプラットフォームドアに用いられており、飛び乗る人などを検知し事故を防ぐのに役立っている。なおこのレンジイメージャは、これからの自動車の自動運転に必要なLIDAR (Laser Imaging Detection and Ranging)としても開発されている。このシステムの場合は、光スキャナを通して戻ってきた光を検出するため、背景光の影響を受けにくい。

図8. 電磁駆動2軸光スキャナ
図9. 電磁駆動2軸光スキャナを用いたレンジイメージャ

以上のような電磁駆動以外に、静電駆動や圧電駆動などを用いた光スキャナも開発されている。図10は圧電薄膜をアクチュエータに用いた圧電駆動光スキャナの写真である11)。チタン酸ジルコン酸鉛(PZT)にNbを添加したPNZT薄膜を、シリコンの梁に3μm厚でスパッタ堆積により形成してあり、薄膜の上下の電極に電圧を印加すると、シリコン梁が曲がってばねで接続されたミラーを共振駆動することができる。なおこのばねに圧電薄膜を形成し、圧電センサとしてミラーの動きを検出することも行っているが、これによって共振状態に制御することが可能になる。このミラーは図11のような内視鏡型のOCT(Optical Coherent Tomography)プローブに用いられている。OCTは眼の断層画像を撮るのに使われているものであるが、この内視鏡型プローブの場合は、Swept-Source OCTと呼ばれるレーザの波長を変化させて異なる深さの情報を得る方法を用いた。これには波長可変の速度に対し、遅い速度で鏡を動かす必要があり、100Hz程度の低い共振周波数になるようにして用いている。図11の下はこれによって得られた指先の断層像であるが、写真の左右方向をスキャンするのにこのスキャナを使用する。

図10. 圧電駆動光スキャナ
図11. 圧電駆動光スキャナを用いたOCTプローブとそれによる指先断層像

文献

9) N. Asada, H. Matsuki, K. Minami and M. Esashi, Silicon micromachined two-dimensional galvano optical scanner, IEEE Trans. on Magnetics, 30, 6 (1994) 4647-4649

10) 石川智之, 猪俣宏明, MEMS技術とレーザ計測技術の融合 MEMS光スキャナ「ECO SCAN」を用いた測距センサ, 日本信号技報, 33, 1 (2009) 41-46

11) T. Naono, T. Fujii, M. Esashi and S. Tanaka, Large scan angle piezoelectric MEMS optical scanner actuated by Nb doped PZT thin film, J. Micromech. Microeng., 24, 1 (2014) 015010(12)