概要
人から見える「世界」を理解し、ナビする
人から見えている「世界」は、IoTで観測できる「世界」とは少し異なっていることがあります。 IoTがこの“差”を理解できるようになれば、これまでにないナビゲーションや情報推薦が実現できる可能性があります。 そのために、人を情報システムに組み込むHuman-in-the-loopなアプローチ（参加型センシングなど）によって、人から見えている「世界」をモデリングする研究について取り組んでいます。
新しいIoT・AIを発明する
現在市販されているIoTを用いることで、様々な人や環境をセンシングしたり情報を提示したりすることが可能ですが、全てが網羅されているわけではありません。新たなIoTやAIを発明することによって、今までにセンシングできなかった情報を得られたり、それに基づく情報提示が実現でる可能性があります。そのために、ハードウェアからソフトウェアに至るまで、IoTのセンシング・データ処理・情報提示の方法を編み出す研究に取り組んでいます。
プラットフォーム・コミュニティを創る
研究開発したIoT・AIを社会実装していくためには、ITに精通していない人々でも簡単に技術を扱うことができ、かつ、持続可能な形で運用できるようなシステム・仕組みを構築することが肝要です。その実現に向けて、街に存在する様々なコミュニティや活動と連携しつつ、システムを運用する方法を実践的に模索する研究に取り組んでいます。
研究プロジェクト
EmoTour： 観光客のマルチモーダルな感情・満足度推定
スマートフォンをはじめとするスマートデバイスを活用し、観光中に有益な情報が得られる「スマートツーリズム」が注目を集めています。このスマートツーリズムにおいて、より観光客の状況に即した観光情報を提供するためには、観光客が実地で抱く心理状態（感情・満足度など）を理解し考慮することが重要です。
そこで本研究では、観光客の心理状態が観光中の無意識的な仕草、例えば頭や体の動きや表情や声色といった形で現れるという仮説のもと、その仕草を計測・分析することで観光中の観光客の心理状態を推定する手法の実現を目指しています。
MusA x EmoTour： 理解度・興味によって変化する美術館ガイダンス
美術館は芸術作品を鑑賞する場として人々に親しまれています。しかし、美術館には膨大な数の展示作品があり、鑑賞者は興味や関心に合わせて作品を鑑賞することが難しいという課題があります。
本研究では、鑑賞者の心理状態を芸術作品を鑑賞する際の仕草のセンシングに基づき推定することで、鑑賞者の興味や関心に合わせたナビゲーションの提供や、鑑賞体験の向上につなげることを目指しています。
BLECE： BLE電波受信状況を用いた公共空間の混雑度・体感混雑度推定
都市内で滞在・移動する人々にとって関心の高い情報の一つが、交通機関や飲食店、公共施設などといった様々な空間における混雑度情報です。しかしながら既存の混雑度計測サービスはそれぞれ異なる方式でデータ収集・情報提供がなされており、ユーザが横断的に混雑度情報を取得することが難しいことが問題となります。
本研究では、人々が持つスマートフォンなどの電子機器から発されるBLE（Bluetooth Low Energy）の電波を環境側からスキャンし、電波受信状況からある特定空間の混雑度を推定することにより、場所や環境に依存しないユニバーサルな混雑度推定手法の確立を目指しています。
AbaCaaS： 卓上カメラを用いた珠算学習支援システム
算術力を獲得するための方法の一つとして、算盤（そろばん）を用いた計算、すなわち「珠算」が現代においても活用されています。珠算による計算は様々な方法・順序で「珠」を操作する必要があるため、習得には長期に渡る繰り返し学習を要することが知られています。学習過程では、様々な計算ミスや苦手な珠操作が生じますが、これらの「つまづき」には規則性・パターンがあると考えられます。
そこで、卓上カメラをセンサとして用いることで算盤の盤面（入力値）を推定するとともに、苦手を克服するための個人に合わせた問題生成・提示などによって、「珠算」の能力習得を支援する方法の確立を目指しています。
Tongar： トングでゴミ拾いするだけでポイ捨てゴミの種別・位置を記録するシステム
近年、奈良公園のシカをはじめ、野生の動物が誤ってポイ捨てゴミを食べて死に至る状況が発生しています。この点にとどまらず“ポイ捨て”は深刻な環境問題であり、解決が望まれています。Tongarは、ゴミ拾いに利用するトングにカメラを搭載し「どこ」で「どんな」ゴミが「いつ」捨てられているのかの情報を自動で収集するシステムです。
ソラシル： みんなの手でつくる「じぶん温度」
sorashiru（ソラシル）は、体感温度をアプリで記録するだけで、「じぶん温度」を知ることができるようになるアプリです。
人それぞれが感じる体感温度のことを「じぶん温度」と名付け、AIによる解析によって算出することを目指しています。
ためしば： ボトムアップ式のスマートシティアプリ
自治体だけでなく、市民や民間企業、大学といった様々な組織に属する人たちみんなで創るスマートシティアプリです。シビックテック（Civic Tech）の考え方で、オープンに街を良くするためのプラットフォームとして利用できるようにすることを目指しています。
レポっと： ブラウザで動作するユーザ参加型位置情報付き写真収集システム
「レポっと」は、みんなの視点で見た街の様子を共有するためのプラットフォームです。 ブラウザだけで動作し、位置情報付きの写真📸・コメント💭・ハッシュタグ🔖 を投稿することができます。
集めたデータはデジタルアーカイブ化し、オープンデータとして公開しています。
にしょロボくん： 小学生が創る地域のデジタル図鑑
子供目線で地域の情報を収集して「世界に一つだけの地域のデジタル図鑑：にしょロボくん」を創る、全校縦割り活動プロジェクトです。ワークシートやギガスクール端末を用いて様々な形式（テキスト・写真・音声・動画・地図・絵…）でニッチな街の情報を可視化します。
共同研究・連携機関
- 自治体・行政機関
- 生駒市
- 奈良県
- 奈良県立美術館
- 民間企業
- 日本たばこ産業株式会社
- 讀賣テレビ放送株式会社
- ソフトバンク株式会社
- LINEヤフー株式会社
- 奈良交通株式会社
- YuMake株式会社
- 近鉄ケーブルネットワーク株式会社
- 大学・学術機関
- 奈良先端科学技術大学院大学
- DFKI（ドイツ人工知能研究センター）