【メタバース】パススルーAPIで何ができる?

 コメント1件

MetaのPassthrough Camera APIに関する議論。ChatGPTなどのAIを使ってOrionのようなインタラクションが可能になったことや、家具の配置シミュレーション、ARバトルボットなど様々なアイデアが提案されている。プライバシーやセキュリティに関する懸念も指摘されている。

  • 1:スレ主

    メタの新しいPassthrough Camera APIキタ━━━━(゚∀゚)━━━━ ChatGPTとかDeep SeekでOrionみたいなことができるようになるらしいぞ https://www.uploadvr.com からパクってきた画像だけど、マジで色々作れそうじゃね? https://preview.redd.it https://www.linkedin.com の画像も参考になるかも アクションフィギュアをスキャンしてAIにアニメーションさせたり、引っ越しの時に家具の配置をシミュレーションしたり…夢が広がるわ https://preview.redd.it 次世代に期待

  • 11:以下、名無しがお送りします

    これ、アプリでどう活用されるか楽しみだわ スマホでできることをわざわざヘッドセットでやる必要あるかっていう疑問はあるけど、OrionみたいなAIコンパニオンとしてはアリかも

  • 21:スレ主

    >>11 翻訳UI作って、それをOrionグラスに移行すればUIの互換性問題は解決じゃね? AI部分はバックエンドで完結するから、アプデで変わることもないだろうし UIとバックエンドがライブで表示されるのはマジで投資のチャンスだと思うわ

  • 23:以下、名無しがお送りします

    「嫁枕を愛してくれ」

  • 29:スレ主

    >>23 倫理的な問題は置いといて、技術的には可能 AI、アニメーション、音声の専門セクションもあるし…ノーコメントで

  • 37:以下、名無しがお送りします

    引っ越しの家具配置シミュレーションはめっちゃクールだろ 3Dのインテリアデータを家の位置に正確に重ねて、スケール感とかを確認できるようにしたい リアルタイムでリサイズとかもできたら最高

  • 46:スレ主

    >>37 それ、実現したらマジで億万長者コースじゃね? Google Geospatialみたいに照明のシミュレーションもできるとなると、開発はかなり大変そうだけど、誰か絶対作ると思うわ

  • 48:以下、名無しがお送りします

    これはマジでワクワクする開発だわ 色々な可能性が広がるね

  • 51:以下、名無しがお送りします

    BattleBotsやってるんだけど、ARで対戦相手と戦えるアプリ作りたい 自分のロボットの位置をトラッキングして、ARの相手がリアルタイムに反応するとか、マジで面白そう

  • 55:スレ主

    >>51 それには深度カメラが必要だけど、今のMeta APIはまだ対応してないんだよね Environmental RaycastってAPIがあるけど、現状ではバトルには情報が足りないかも

  • 61:名無しのA

    AIは計算リソースめっちゃ使うから、Questじゃ無理じゃね? ハイエンドPCでもリアルタイムは厳しいかも それに、ローカルで使えるツールも少ないし 結局、動画と音声をAI企業にアップロードするしかないってこと? プライバシー的にマジ勘弁

  • 65:スレ主

    >>61 Meta Rayban Glassesがまさにそれやってるじゃん プライバシーが気になるならAIグラスは諦めるしかないけど、面白さ優先なら、 decentなネットワークとOpenAI APIがあれば今すぐ作れるぞ Big Corpから完全に安全に守るのは無理だけど、クールなのは間違いない

  • 72:名無しのA

    >>65 だから、不可能じゃないって言ってるじゃん 魂を売る覚悟があるならね

  • 75:以下、名無しがお送りします

    Quest 3Sにナイトビジョン機能欲しい

  • 84:スレ主

    >>75 Metaが赤外線カメラへのアクセスを許可しない限り、ナイトビジョンフィルターは無理 一応、フィルターっぽくすることはできるけど、赤外線カメラがないとクソ画質になるぞ

  • 85:以下、名無しがお送りします

    >>84 v72にアップデートしてから、ハンドトラッキングがオンでもIRライトが常に点灯しなくなった気がする

  • 86:スレ主

    >>85 バッテリー節約のためにケチってるのかもね Android XRみたいにオープンソースにしてくれたら、コミュニティが最適化してくれるのに 頼むから自由に作らせてくれ

  • 95:以下、名無しがお送りします

    数日後に色々実験してみるわ Passthrough Camera Accessの開発をUnityで始める人向けにチュートリアル作ったから、よかったら見てみて https://skarredghost.com

コメント(1件)

  • 1

    AIコンパニオンってSiriの進化版みたいな感じかな

    1