数える、見張る、教える。いずれも、これまで人が映像を見て読み取っていた仕事を機械に渡すための技術です。
とくに技能の伝え方については、手本の映像と学習者の映像をどう突き合わせるかという課題を、5件の特許で角度を変えて押さえています。
特許 6703679 + 米国 12067494 / 中国 ZL2020800030176
計数装置、学習器製造装置、計数方法、学習器製造方法、及びプログラム
満了 2039.02.01
枠で囲むのではなく「小さな点」に変換するので、重なっていても崩れない
【できること】同じ形のものが山積み・密集・重なりの状態で写っていても、写真1枚から個数を出せます。検品や棚卸し、養殖・育苗の個体数把握など、人が目視で数えていた工程をそのまま置き換えられます。学習していない大きさの対象物も数えられるため、サイズ違いが混ざる現場にも耐えます。
【しくみ】撮影画像と、各対象物の位置に対象物より小さい「教示図形」を置いた画像との対でモデルを学習させます。推論時は対象物が小さな図形に変換された画像が出てくるので、その図形を数えます。図形ごとに教示図形との近さで確信度を付け、閾値を超えたものだけを数えます。
USE CASES部品・錠剤の検品/棚卸し・稚魚や苗の計数・畜産の頭数管理・イベントの人数把握
特許 6742623 + 米国 12705896 / 中国 ZL2020800927711
監視装置、監視方法、及びプログラム
満了 2039.11.13 共同出願:アイシースクウェアパートナーズ株式会社
設置場所ごとに検知モデルを作り込まない。現場が変わっても同じ装置でよい
【できること】監視カメラを増やしても、映像を見張る人を増やさずに済みます。設置場所ごとに「万引き用」「転倒用」と検知モデルを作り分ける初期構築が要らないので、多拠点展開のコストが大きく下がります。判定モデルはあとから更新でき、固定カメラだけでなく車両・ドローン・ロボットにも同じ仕組みで載せられます。
【しくみ】映像から監視対象の種別をAIが判定し、その対象に応じた異常判定モデルをクラウドから取得して使います。装置側に持つのは判定の枠組みだけで、中身は現場に合わせて入れ替わります。
USE CASES多拠点の店舗・施設監視・インフラ点検・巡回警備ロボット・車載やドローンによる広域監視
特許 6959682 / 7044426 + 米国 12477094 / 中国 ZL2021800937031
画像合成装置、画像合成方法、及びプログラム
満了 2040.12.28 / 2041.10.14
実写のステレオ映像に、操作できる3Dオブジェクトを立体のまま重ねる
【できること】実写で撮ったステレオ映像の中に、ユーザーが手で動かせる3Dオブジェクトを立体のまま置けます。熟練者の手元を立体で撮っておけば、初心者はその映像の中に自分の器具を重ねて練習できます。CGで一から作り込む必要がなく、現場を撮るだけで教材になります。3Dオブジェクトが映像の裏に回り込んで消える現象も起きません。
【しくみ】3次元仮想空間の中に、無限遠に対応する点が重なるように右目用画像と左目用画像を配置し、そこへ操作に応じた3Dオブジェクトを置いて、左右それぞれの視点から描き直します。特許7044426は、画像面を有限の距離に置く配置もあわせて押さえたもので、オブジェクトが近づいたら画像面の距離を広げて再配置します。
USE CASES手術手技のVRトレーニング・スポーツや楽器の動作練習・産業機器の操作訓練・タレントとのインタラクティブ体験
特許 7412826
映像合成装置、映像合成方法、及びプログラム
満了 2043.07.28
切り替えではなく、割合を連続的に往復させることで両者が融合して見えなくなる
【できること】手本の映像と自分の映像を重ねて見せる学習画面で、「どちらが自分か分からなくなる」問題を解消します。ずれているときほど見分けがつきやすくなるため、初心者ほど効果が出ます。既存の映像教材システムにも、表示のしかたを変えるかたちで組み込めます。
【しくみ】2つの映像の合成割合を、時間に沿って連続的に繰り返し変化させます(正弦波状に往復させる態様を含みます)。手本と自分が離れているほど自分の映像を濃く出す制御もあわせて規定しています。
USE CASESリハビリの動作訓練・ダンスやスポーツのフォーム矯正・製造現場の作業教育
特許 7432275
映像表示装置、映像表示方法、及びプログラム
満了 2043.07.28
手本と同じ撮影環境を学習者側に用意しなくてよい
【できること】手本がヘッドマウントカメラの一人称映像でも、学習者は手持ちのカメラ1台で見比べられます。学習者側に同じ機材と設置環境を用意する必要がなくなるため、教材を作った側は配るだけで済み、受け取る側の導入障壁もなくなります。遠隔の技能伝承をそのまま事業にできる形です。
【しくみ】学習者の映像から骨格を認識し、手本に対応する3Dオブジェクトを学習者の動きに合わせて動かします。手本のカメラと被写体の位置関係と、3Dオブジェクトを見る視点の位置関係が一致するように映像を生成して並べます。
USE CASES遠隔の技能伝承・オンライン実技講座・多拠点への作業標準の展開
特許 7486860
映像合成装置、映像合成方法、及びプログラム
満了 2043.08.04
「ずれている」だけでなく「どう直すか」まで出す
【できること】学習者に、手本とのずれを見せるだけでなく、どちらへどれだけ動かせば合うかというガイドを出せます。指導者が横に付いていなくても独習が進むため、教える側の人手を減らせます。器具や工具を使う作業のように、体の動きだけでは合わせにくい対象に向いています。
【しくみ】手本の映像から特徴点を使って「手本とその撮影カメラ」の位置関係を、自分の映像から「動作対象とその撮影カメラ」の位置関係を求め、両者から「手本と動作対象」の位置関係を算出します。これをもとに追従用のガイドを生成し、合成映像とあわせて表示します。
USE CASES器具を使う手技の独習・工具作業の教育・検定や実技試験の練習支援
特許 6671672
対話装置、発話生成方法、及びプログラム
満了 2039.05.13
深層学習と知識体系を組み合わせて応答を組み立てる
【できること】受付や案内の対話を、決め打ちのシナリオに頼らずに組み立てられます。深層学習と知識体系(オントロジー)を組み合わせた発話生成に関する特許で、対話エンジン「Dialog AI」の基盤になっています。
USE CASES受付・案内ロボット・施設の音声案内・接客支援