Overview

株式会社Preferred Networksは、ロボットが身近な場所で活躍する社会の実現に向けて、パーソナルロボットの研究開発を行っています。

CEATEC JAPAN 2018では, トヨタ自動車株式会社が開発する "生活支援ロボットHSR(Human Support Robot)" を使い、最先端の深層学習技術を応用した「全自動お片付けロボットシステム」を展示します。

このシステムは、CEATEC JAPAN 2018に展示されるイノベーション性が高く優れている技術・製品・サービス等を表彰する「CEATEC AWARD 2018」 において、インダストリ/マーケット部門 準グランプリ を受賞しました。

部屋の全自動片付けは、従来のロボットシステムでは実現困難でしたが、近年の深層学習の発展によって初めて実用的なレベルで実現できました。 物をつかむ、物を置く、動作計画を立てる、人の指示に対応するなど、ロボットが人間の生活空間で仕事をするために必要な物体認識・ロボット制御・音声言語理解技術に最先端の深層学習を用いた結果、ロボットが高速・高精度に動作できるようになりました。


PFNは、HSR開発コミュニティに参画し、HSRのハードウェアおよびソフトウェアプラットフォームを利用しました。

Object Detection

これまでロボットは主に工場で利用されてきました。工場のラインでは通常少ない種類の物品しか扱わないこと、必要な物を常に正確にロボットの前に持ってくることで高速正確に動作することができます。

一方で人間の生活空間には、非常に多様なものが存在し、また常に状況も変化します。パーソナルロボットはこうした状況に柔軟に対処しなければなりません。 PFNは最先端の深層学習技術を用いた画像認識エンジンを開発し、数百種類の物体を部屋に乱雑に散らかしたとしても、その位置と種類を識別することを可能にしました。

このエンジンを元に、どの物体をどのようにつかんでどのように片付けるかといった計画を立てることができます。


この画像認識エンジンは、深層学習フレームワークChainerおよびChainerMN、ChainerCVを用いたCNN(畳み込みニューラルネットワーク)で実現されています。 CNNは先日の物体検出コンペティションで世界2位の成績を収めたPFDetを拡張したモデルを用い、学習には大規模GPUクラスタMN-1bの100台を超えるGPUを活用しています。

ロボットに搭載されたカメラからの視点映像と、認識結果を可視化した動画です。

ロボットが認識している部屋のマップと現在位置を表示することで、ロボットがどのように部屋を認識しているか可視化しています。

Picking & Placing Objects

人間の生活空間には様々な物体が存在します。ハンカチのように形状の変化するものや、ペンのように細長いもの、クリップのように小さくてつかみにくいものがあります。

本システムは、様々な形状や素材の物体も安定してつかみ、所定の場所に置くことができます。

例えばペンを片付ける際は、カメラでペン立ての位置を探す、ペンの向きを認識して向きを揃える、ペン立てに入れるといったことが可能です。

衣服や靴下のような形の変わる物体も安定してつかんでくれます。
人間が無意識に行っている細かな判断を繰り返すことによって初めて可能になります。

Human Interaction

従来の産業用ロボットは、特殊な制御盤を利用して、専門的な技能を持った人にしか利用することができませんでした。 誰もがロボットを利用できるようにするためには、より直感的に利用できる手段でロボットに指示を出せる必要があります。 本システムは、人の声による指示と指差しによるジェスチャーを理解します。この技術を利用して、人に依頼するのと同じようにロボットに対して仕事を指示することができるようになります。

部屋の中の全ての物体の位置はロボットにより把握されており、探し物をロボットに尋ねれば位置を教えてくれます。

また、拡張現実 (AR)の技術を使って、ロボットが考えていることを人間に提示することができます。 ロボットが部屋の中をどのように認識しているか、次にどのように行動しようとしているか、といった情報を表示します。

このAR画面を用いて、直感的にロボットの状態を把握し、より適切な指示をだすことが可能になります。

Our Team

IoTにフォーカスした深層学習技術のビジネス活用を目的に、2014年3月に創業。デバイスが生み出す膨大なデータを、ネットワークのエッジで分散協調的に処理する「エッジヘビーコンピューティング」を提唱し、交通システム、製造業、バイオ・ヘルスケアの3つの重点事業領域を中心に、様々な分野でイノベーションの実現を目指しています。 オープンソースの深層学習フレームワークChainerTM(チェイナー)の開発・提供をはじめ、トヨタ自動車株式会社、ファナック株式会社、国立がん研究センターなどの世界をリードする組織と協業し、先進的な取り組みを推進しています。

このシステムは、CEATEC JAPAN 2018に展示されるイノベーション性が高く優れている技術・製品・サービス等を表彰する「CEATEC AWARD 2018」 において、インダストリ/マーケット部門 準グランプリを受賞しました。

選評(抜粋)

部屋の片づけという従来のシステムでは困難だったタスクを実用レベルの精度で達成しており、今後更に付加価値をつけて製品化されれば市場・社会へのインパクトは大きい。ビッグデータを活用する方向への期待ができるとともに、サービス・ロボットのためのデータライブラリーの提供など、新たなビジネスの可能性も期待できる。

Media Coverage

2018/10/15 日本経済新聞・電子版 プリファード、家庭用お片付けロボの頭脳を開発

2018/10/15 日経 xTECH/日経エレクトロニクス 「スマホの次はパーソナルロボ」、成功のカギは深層学習にあり

2018/10/15 IT Media 全自動で衣類をたたむ、散らかった部屋を片付け……“ズボラな人”向けロボット続々

2018/10/15 ロボスタ PFN、圧巻の「全自動お片付けロボットシステム」をCEATECで展示へ

2018/10/15 NHK World Japan CEATEC Japan focuses on robots with AI

2018/10/16 日本経済新聞・電子版 プリファード社長「ロボット活躍の時代が到来」

2018/10/16 日本経済新聞・電子版 映像で見るIT・家電見本市ー全自動片付けロボ、おもちゃやくつ下を認識

2018/10/16 Impress PC Watch 散らかった部屋を片付けてくれるロボット

2018/10/16 日刊工業新聞Newswitch Preferred Networks、ユカイ工学…暮らしに寄り添うロボット始まる

2018/10/16 EE Times PFNがお片付けロボットを公開【動画あり】

2018/10/16 マイナビニュース 家の中の片付けをロボットが全自動でやってくれる未来を見せるPFN

2018/10/16 Japan Times Autonomous Tidying-up Robot System at CEATEC 2018

2018/10/17 日経 xTECH PFNが家庭用ロボ開発へ、ソフト基盤を2020年にも投入

2018/10/17 MONOist PFNが全自動お片付けロボットで示した可能性、2020年投入の開発ツールで具現化

2018/10/17 NHK World Japan NEWSLINE The Future Is Now

2018/10/17 AbemaTV けやきヒルズ 全自動お片付けロボ」システム

2018/10/18 日本経済新聞・電子版 シーテックがオープンイノベーションの舞台に

2018/10/18 Internet Watch “ガジェット好き議員”視点の「CEATEC」見どころガイド 〜「未来の景色を体験して欲しい」〜 「切実に、これは買いたい」…「家庭用全自動お片付けロボット」

2018/10/18 Ledge.ai 日本は“AI後進国”なんかじゃない。世界に誇る深層学習技術

2018/10/18 MIT Technology Review PFNが家庭用ロボ向けソフト開発、「全自動お片づけ」をデモ

2018/10/18 GIZMODO 「もー! 勝手に片付けないでよ!」なんて言えない、超親切なお片付けロボット

2018/10/19 NHK おはよう日本 おはBiz「靴下もAIでお片づけ!?」(6時台のおはよう日本)

2018/10/19 テレビ朝日 ワイドスクランブル「AI社会の未来予想図は?」

2018/10/19 Impress 家電Watch 部屋に散らかったおもちゃや日用品を片付けてくれる「全自動お片付けロボット」

2018/10/23 産経ニュース 【テクノロジー最前線】家政婦ロボは見た…AI企業が描く家庭内のデジタル化

海外メディア

2018/10/15 Wall Street Journal Robot Solves a Problem Kids Can’t: Cleaning Their Rooms

2018/10/16 共同通信Japanese AI venture develops autonomous tidying-up robot

2018/10/16 Ruptly “Time for a new boyfriend? Super-clean robot will tidy up your home!”

2018/10/16 Bright Deze robots ruimen je rommel op / これらのロボットはあなたの部屋を片付ける

2018/10/17 LCI “Première mondiale au CEATEC de Tokyo : plus fort que le robot aspirateur, voici le robot qui range” [Video]

2018/10/18 Eenadu (India) Watch: Dancing and tidying robots steal the show at Ceatec /

2018/10/19 Le Soir (Belgium) Un robot qui fait le ménage à votre place

2018/10/21 Almasdar Tech فيديو| روبوت ياباني يمكنه ترتيب غرفة طفلك وإعادة كل شيء إلى مكانه

2018/10/22 Robotics Research Personal robot to tidy your room

2018/10/16 Cool3c.com CEATEC 2018 :家裡客廳被亂丟的玩具弄得一團亂? Preferred Networks 結合 Toyota 機器人幫你把散落一地的物品歸位