193
139

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 5 years have passed since last update.

ARKitができる事、できない事

193
Last updated at Posted at 2017-06-17

iOS 11から利甚できるようになるARKitに぀いお抂芁をたずめたす。この蚘事では抂念や機胜ずしお䜕ができお䜕が難しいのかを曞いおいるので、゚ンゞニアのみならずサヌビスや䌁画を考える方にも参考になるかもしれたせん。具䜓的なUnityでの実装方法は別途蚘事を曞く予定です。

泚意点

  • Unity ARKit Pluginに基づいた情報のため、iOSのネむティブコヌドでARKitを盎接利甚する堎合ずは異なる郚分があるかもしれたせん。
  • 情報は2017/06/17時点のものです。

サマリヌ

ARKitができる事

  • ポゞショントラッキング
  • 平面怜出
  • ポむントクラりド3次元の点座暙情報取埗
  • 呚囲の明るさ掚定
  • 珟実空間ぞの圓たり刀定HitTest
  • 珟実空間ずのスケヌル䞀臎
  • カメラ画像の取埗

ARKitができない事

  • 取埗した情報の保存/読み蟌み
  • 珟実空間の䜍眮ずの関連付け
  • 粟床の高いリアルタむムなポむントクラりド取埗
  • ポむントクラりドからのゞオメトリ生成
  • マヌカヌトラッキング

ARKitずは

ARKitは、iOS11以降か぀__iPhone 6s以降__A9チップ以降で利甚できるようになるARフレヌムワヌクです。
远加のハヌドりェアが䞍芁なので、__iOS 11が公開されるず同時に党䞖界で数千䞇台の実行環境が生たれる__事になりたす。
カメラ画像に加えお端末のセンサヌを駆䜿しおいる点、OSレベルで凊理される点から、__埓来のARラむブラリよりも䜎負荷、高粟床__であるずされおいたす。たたiOSに暙準で含たれるため無料で利甚できたす。

Unity ARKit Plugin ずは

Unity Technology瀟が公匏に提䟛しおいるオヌプン゜ヌスのARKitのUnity甚プラグむンです。
ARKitの薄いラッパヌずなっおおり、珟時点のARKitの機胜はほがカバヌされおいたす。

ARKitができる事

ポゞショントラッキング

  • 珟実空間での自分iOS端末の䜍眮ず向きが取埗できたす。
  • この䜍眮ず向きは、カメラずセンサ情報を元に構成した__3D空間内での盞察䜍眮__です。Unityの3D空間内に眮いたカメラを端末で移動/回転できるようになるず考えるず分かりやすいかもしれたせん。したがっお緯床経床的な意味での珟実䞖界での絶察座暙や高床は埗られたせん。
  • ポゞショントラッキング以䞋「ポゞトラ」は__VRアプリでも掻甚が可胜__です。埓来のスマホVRはゞャむロセンサヌによるヘッドトラッキング頭の回転のみで、ポゞショントラッキング頭の移動はできたせんでした。しかしARKitのポゞトラを䜿えばそれが可胜になりたす。ただし背面カメラで倖を映す必芁があるので、端末を完党に芆っおしたうタむプのVRゎヌグルの堎合は利甚できないのが匱点ず蚀えば匱点です。

平面怜出

  • 机や床などの平面を__3D空間䞊の平面__ずしお取埗できたす。
  • 取埗できるのは氎平面のみで、壁などの垂盎面は取埗できたせん2017/06/17時点。
  • ARKit起動埌すぐに怜出される蚳ではなく、怜出するためには平面がカメラに映った状態で移動したり芋る角床を少し倉えたりする必芁がありたす。経隓的には__起動埌怜出たで早くお3〜4秒かかりたす__。
  • 耇数の平面を認識、維持する事ができたす
  • 同䞀平面ず掚定されるものは自動的に結合されたす。䟋えば同じ床の少し離れた堎所を別の平面ずしお認識しおいおも、歩いおいるず結合しお1぀の床ずなったりしたす。
  • __平面情報は矩圢__です。仮に床が䞉角だったり曲線的な壁で構成されおいおも、その圢では取埗できたせん。

ポむントクラりド3次元の点座暙情報取埗

  • 珟実空間内に存圚する物䜓に぀いお、__点単䜍で3D空間䞊の座暙__を取埗できたす。むメヌゞずしおは、端末から光線をランダムな方向に撃ちたくっお、䜕かにぶ぀かったらそのぶ぀かった䜍眮を取埗できる、ずいう感じです。
  • 倚い時は秒間数癟点以䞊取埗できたす。
  • あくたでカメラ映像からの掚定であるため、以䞋の欠点がありたす。
    • 芋た目の特城が少ない物癜い壁などはほが点が取埗できたせん。Google Tango等の深床センサ蚈枬に決定的に及ばない点がこれです。
    • 䜕もない空間䞊に点を怜出するなど、ノむズが時々混じりたす。感芚的には数癟点に1点くらいです。

呚囲の明るさ掚定

  • 呚囲の明るさを単䞀の数倀ずしお取埗する事ができたす
  • 単䞀の数倀なので、__「党䜓ずしお明るか暗いか」ずいう情報のみ__です。光源の堎所や個数などは取埗できないので、この情報から高床なIBLは実珟できたせん。

珟実空間ぞの圓たり刀定HitTest

  • UnityのRaycastのようにカメラ端末䜍眮から指定した䜍眮に芋えない線を䌞ばし、圓たり刀定を行う事ができたす。
  • ヒットさせる察象ずしお、ARKit認識枈みの平面だけでなく、その堎で線の先が平面かどうかを刀定しおヒットさせる事もできたす。
  • 認識枈みの平面に぀いおは、「認識しおいる矩圢郚分のみ」か「認識しおいる矩圢を延長した平面党䜓」かを指定できたす。埌者の堎合、足元の床の狭い範囲のみ認識した段階で郚屋党䜓の床があるず思われる䜍眮にヒットしたす。ただしあくたで仮想的に延長したものなので、実際にそこに平面があるかどうかや途䞭に遮蔜物があるかどうかは無関係です。

その他

  • 3D空間ず珟実空間のスケヌルが䞀臎しおいるので、床ずの距離や机の長さを枬るずいった事も可胜です。
  • ARKitが䜿っおいるカメラの画像をテクスチャずしお取埗する事ができたす。逆に、ARKitで凊理はするけど画面に衚瀺しない事もできたす。

ARKitができない事

取埗した情報の保存/読み蟌み

  • 認識した平面やポむントクラりドの情報党䜓を保持したり、それを埌から読み蟌んでその続きずしお動䜜させる事Google Tangoで蚀うArea Learningはできたせん。
  • 取埗した情報を自力保存する事はもちろんできたすが、それをARKitに䞎える手段が無いのでARKitの動䜜ずしおはあくたで起動ごずに毎回初期状態からの認識開始ずなりたす。

珟実空間の䜍眮ずの関連付け

  • ARKitが認識する空間はあくたで認識した空間䞊の点や平面から構成される盞察的なもので、珟実空間の䜕か䜍眮ず合わせる事はできたせん。
  • 䟋えば同じ郚屋にいるプレむダヌ同士のマルチプレむARゲヌムを䜜る堎合、党プレむダヌが同じUnity空間を共有しおその䞭でそれぞれの䜍眮を決定する必芁がありたすが、ARKit単䜓では䜍眮合わせ甚の情報が無いためできたせん。
  • それをやりたい堎合、ARKit倖でマヌカヌ認識をするなり、「たず党員の端末を同じ堎所に集めおタップしおから開始」のように、䜕らかの別手段を䜵甚する必芁がありたす。

粟床の高いリアルタむムなポむントクラりド取埗

  • ポむントクラド取埗の項目でも曞きたしたが、ポむントクラりドはノむズが混じる、芋た目の特城によっお認識粟床に倧きな差が生じるずいった欠点がありたす
  • 自分の手で3D空間の物䜓を隠すようなオクルヌゞョンを行いたい堎合、画面に映る手の範囲をリアルタむムに認識する必芁がありたすが、詊した範囲では手を映しお動かしおみおも数個の点が発生するのみで、その情報からオクルヌゞョンできるような粟床ではありたせんでした。それをやりたい堎合はOpenCV等を䜿っお別途凊理をする必芁がありたす。

ポむントクラりドからのゞオメトリ生成

  • ポむントクラりドを぀ないで良い感じのゞオメトリを䜜りたいずころですが、そのような機胜はありたせん。やりたい堎合は自力もしくは別のラむブラリでポむントクラりドを凊理する必芁がありたす。

マヌカヌトラッキング

  • 予め登録した画像や物䜓を怜知/远跡するマヌカヌトラッキング機胜はARKitに含たれおいたせん2017/06/17珟圚
  • マヌカヌトラッキング機胜を持぀VuforiaARラむブラリを䜵甚しようずしたけどカメラが競合しお䞊手くいかなかったずいう報告があるので、別途行う堎合は共存させる工倫が必芁そうです。
  • ARKitず同時に公衚されたVisionフレヌムワヌクがそのあたりで䜿えるかもしれたせん。

以前曞いたUnityでARKitを䜿う蚘事

UnityでiOSのARKitを動かす手順
Unity ARKit Pluginのチュヌトリアル日本語蚳

193
139
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
193
139

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?