ミチトー1955 @micchito1955 株式会社やりたい放題の社員。土木業界出戻り組。帰ってきた三代目バカ息子。これからは好き勝手な事をしてやろうと決意した創業家出身の次期社長(多分)。営業、積算をメインに担当するも基本的には なんでも屋。1級土木施工管理技士、1級建設業経理士、2級舗装管理技士、測量士補、ビジネス法務エキスパート®取得済。
こんにちはiPhone3Dスキャンを日本中に普及させる男ことiwamaです。 2020年の10月にiPnone12Proシリーズに初めてLiDARセンサーが搭載され、現在では様々な業界でiPhoneの3Dスキャンが活躍し始めています。 そこで今回はiPhone3Dスキャンって何?でどういうアプリがあるの?などの初心者向けの解説を行っていこうと思います。 ※この記事は2024年5月11日に更新作業を行なっています。 3Dスキャンについて学ぼうそもそも3Dスキャンって何?現実にある物体や空間をデジタル3Dデータ化する技術の事を(このnote内では)3Dスキャンといいます。 3Dスキャン技術には様々なモノが存在していますが今回はその中でもiPhoneで行える3Dスキャン技術である2種をざっくり解説していきたいと思います。 フォトグラメトリをざっくり解説フォトグラメトリを簡単に説明してしまうと、様
タイトルの通りなんですが、適当に散歩しながら 3D スキャンをやりまくっていくのが 2020 年代最初に来る新たな遊びだという結論に至ったので、みなさん今すぐ iPhone 12 Pro か Pro Max を買ってやりましょう。やってない人はだれも理解していないと思いますが、最高に楽しいです。 そもそも iPhone で 3D スキャンって何だよって話ですが、今年でた iPad Pro から LiDAR が載るようになって、雑に言うと普通にカメラの情報に深度(カメラから物体への距離です)を乗せられるようになったんですよね。そもそもでいうと AR で使って現実世界にいい感じに物を乗っけるのが目的で Apple としても付けた物っぽいし、実際そういうアプリもいっぱい出ています。でも、正直 AR とか Apple Glasses が出るまでどうでもいいじゃないですか。そうなってくると LiDA
皆さん!3Dスキャンしてますかーーーーー!? どうもiPhone3Dスキャン大好きおじさんです。今回はiPhoneで始める3Dスキャンというお話をしていこうと思います。 iPad Pro(2020)にLiDARセンサーが搭載されたことで3Dスキャンが誰でも出来る時代が到来しました。 ただいきなりiPhoneやiPadで3Dスキャンができるよ!と言われてもピンとこない方が大半だと思うので、今回のnoteでは簡単な3Dスキャン技術の紹介からスキャンアプリ、スキャン方法などを説明していこうと思います。 3Dスキャンのざっくりとした区分まず3Dスキャンとは何なのかという話ですが、3Dスキャンとは現実にある物体を様々な手法でスキャンし、それをコンピュータ上で再現することだと個人的に思っています(もしかしたら違うかも) 3Dスキャンの方法としては、写真から3Dモデルを作成するフォトグラメトリとレーザー
Qiitaからのお引越し記事です。 目標 ステレオカメラ 概要 特徴 使用製品 パターンプロジェクションカメラ 概要 使用製品 iPhone ゾゾスーツ 工業製品(Ensenso, キーエンス) Time of Flight LiDAR Time of Flightの原理 特徴 スキャン型LiDAR フラッシュ型LiDAR 製品 Velodyne Series 追記 Livox Horizon iPhone iToF LiDAR 目標 通常のカメラは物体の明るさ、色を抽出するのに対し、距離センサは物体までの距離をセンシングします。そのため3DカメラやDepth Sensorなどと呼ばれたりします。 距離を知ることは多様なアプリケーションにおいて重要であり、例えば自動運転では前方車両までの正確な距離を知ることは必須です。またゲームなどのアプリケーションでは人の動作などを距離センサで抽出するK
本記事は初めてiPhoneで3Dスキャンを行う方や、実際に試して見たが上手く行かなかったとお困りの方に向けたiPhone3Dスキャンの撮影方法等を解説したものです。 その為3Dスキャンとは何か?等の全般的な内容はこちらの記事をご参照ください。 なお本記事は2023年の1月時点での情報をまとめており、最新の情報ではない可能性があります。 また筆者独自の調査や見解も入っており、事実とは異なる部分が存在する場合があります。 自分の記事を読んで為になったという方にお願いです。可能な限りで良いので令和6年能登半島地震の被災地支援のため募金活動をよろしくお願いします。 iPhone3DスキャンのタイプiPhone3Dスキャンにはいくつかのスキャンタイプが存在しています。 それぞれに特徴があるため用途に応じて使い分けると良いでしょう。 なお本記事はiPhoneのリアカメラ/LiDARの解説記事なので、フ
引っ越しに伴い、洗面所の空間活用について検討していました。ドラム式洗濯機の上の空間をうまく使いたいところですが、幅に余裕がなく既製のラックを導入できず困っていました。ないなら作ればいい、ということでDIYを画策。机や棚のようなモノとは違って空間を相手にするので、どう設計したものかと思い悩んだのち行き着いたのは「部屋の3Dスキャン」と「CADソフトによるレイアウト検討」でした。ググってみても事例が見つからなかったので、ここに残しておきます。 iPhone12 ProのLiDARスキャナで部屋を3D化 自分が保有している iPhone 12 Pro Max には『LiDARスキャナ』が搭載されているので、これを使えないかということで見つけたのが「3d Scanner App」。すぐに試したところ、期待した通り空間をスキャンでき、上の写真のテクスチャ付き3Dモデルを作り出すことができました。とり
Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米ミシガン大学、米フロリダ大学、電気通信大学による研究チームが発表した論文「You Can’t See Me: Physical Removal Attacks on LiDAR-based Autonomous Vehicles Driving Frameworks」は、自動運転車の周囲を検知するセンサーにレーザー光を物理的に照射して、選択的に障害物を見えなくする攻撃を提案した研究報告だ。偽の情報を注入するスプーフィング攻撃で自動運転車の物体検出モデルに影響を与え安全を脅かす。 自動運転車の知覚システムは、LiDARやカメラ、レーダーなどのセンサーを活用して、障害物回避やナビゲーション制
はじめまして、ティアフォー技術本部 Planning / Controlチームで開発を行っている堀部と申します。 今回は状態推定の王道技術「カルマンフィルター」が実際に自動運転で用いられるまでの道のりやノウハウなどを書いていこうと思います。 みなさんはカルマンフィルターという言葉を聞いたことがありますでしょうか。 カルマンフィルターとは「状態推定」と呼ばれる技術の一種であり、自動運転においては現在の走行状態、例えば車速や自分の位置を知るために用いられます。 非常に有名な手法で、簡単に使えて性能も高く、状態推定と言えばまずカルマンフィルターと言われるほど不動の地位を確立しており、幅広いアプリケーションで利用されています。 使い勝手に定評のあるカルマンフィルターですが、実際に自動運転のシステムとして実用レベルで動かすためには多くの地道な作業が必要になります。 この記事では、カルマンフィルターが
しっかりとした正しい知識を基礎から学び、長く電子工作を楽しむことができるようになることを目的とした今回の連載。分かりやすく解説してくれるのは、金沢大学電子情報通信学類教授の秋田純一先生です。記念すべき第1弾はセンサの仕組みを解説。 第1回となる今回は数あるセンサの中から、ToF距離センサについて解説をしていただきます。 目次 いろいろな距離の計測方法 ToFセンサと使い方 ToF距離センサの原理 カメラとToF距離センサ まとめ 1. いろいろな距離の計測方法 みなさん、こんにちは。金沢大学の秋田純一と申します。よろしくお願いいたします。 早速ですが、マイコンを使って何か作るとき、距離を測りたいことって、よくありますよね? 例えば障害物をよけて進むロボットとか、手を近づけたらアルコール消毒液を出す、といった場合です。こういうときは、いわゆる「距離センサ」を使うことになります。 対象物までの
It’s 2022, and Teslas still aren’t stopping for children. pic.twitter.com/GGBh6sAYZS — Taylor Ogan (@TaylorOgan) August 9, 2022 今年実施されたテスラの走行テストの様子がTwitterに投稿され、10万いいねを超えるほどの話題になっています。 動画内ではテスラ Model3が走行中に、車両前方に配置された子どもに見立てた人形を検知して停止することができるかというテストの模様が撮影されています。 映像右側で同時にテスト走行しているレクサス RXがしっかり停止しているのに対し、Model3は人形を豪快に吹き飛ばしてしまいました。 「LiDAR」を搭載していないのが原因? 明るく見通しも良い状況にもかかわらず、Model3が人形の前で停止できなかったのは「子ども人形のクオ
iPhoneに搭載された機能を使って、3Dデータを保存する動画が、約3万4000件のいいねを集めるほどの話題になっています。1分程度で、ホテルの部屋をスキャンできてしまうスピードに驚かされます。 ホテルの部屋を3Dデータ化する様子を公開 iPhoneの3Dスキャン情報を発信するiwama(@iwamah1)さんが投稿した動画。部屋の全方向にカメラを向けて、壁の形や、ベッドの位置を読み込んでいきます。物体のフチ部分が光輝いて読み込まれる様子が、SFのようでかっこいい……! 部屋の読み取りが完了すると、画面には部屋の3Dモデルが出現。しばらくしてデータが完成すると、壁やベッドの模様などテクスチャまで再現されています。 iwamaさんによると、動画は「ノーカットノー倍速」とのこと。長さは1分32秒なので、とても手軽に3Dデータが読み込めていることがわかります。 スキャンすると物体のフチが光ってか
iPhone13 ProシリーズのLiDARを使用した拡張現実(AR)の視覚効果(VFX)が公開され、話題になっています。 Githubでコードが公開 Unity Technologies Japanでエバンジェリストを務めるKeijiro Takahashi氏(@_kzr)は、“burnt-in barcode metadata”と呼ばれるアイデアの概念実証としてBibcamを公開し、サンプルプロジェクトとしてBibcamVfxを制作しました。渋谷の様子にSFの世界のようなフィルターがかけられています。 The world through iPhone 13 Pro Max sensors (Shibuya, 23rd Nov) pic.twitter.com/ClfvNXRE3L — Keijiro Takahashi (@_kzr) November 26, 2021 Takahas
皆さん!3Dスキャンしてますかーーーーー!? どうもiPhone3Dスキャン大好きおじさんです。今回はiPhone×フォトグラメトリについてお話をしていこうと思います。 (トップ画も2D写真じゃなくて3Dモデルになってますw) 3Dスキャン全般の説明に関してはこちら↓を参考にしていただけると幸いです。 ※記事内容はあくまで個人の意見なのでそこら辺を理解して貰えるとありがたいです フォトグラメトリの基礎知識フォトグラメトリって何?フォトグラメトリは日本語で写真測量と呼ばれており、普通のカメラなどで撮影された複数枚の写真から3Dモデルを作成する技術となっています。 フォトグラメトリ自体は結構長い歴史を持つ技術となっており、国土の地形を測る測量分野や考古学分野、事故・犯罪現場の状況保存、災害現場の状況把握、ゲーム分野など幅広く活用されている技術です。 下リンクは上から順に ・エジプトのピラミッド
3月に発売となったLiDARスキャナ搭載のiPad Proですが、本格的な3Dスキャナアプリが徐々に登場し始めているようです。Laan Labsが開発した無料アプリ「3d Scanner App」がすごいとTwitterで話題になっています。 ARモデルの共有も簡単 Laan Labs(@laanlabs)のiPad Pro用LiDAR 3Dスキャナアプリは、「クラウド、登録および課金なしでメッシュが作れるアプリが存在しなかった」のを理由に制作されました。テクスチャ付きのARモデルを、メッセージアプリとUSDZ、GLTF、OBJを使用しシェアすることができます。 Made a simple LIDAR 3d scanner for iPad Pro. Couldn't find any apps that don't require cloud / signup / $ to get a
自動運転車の開発競争には、数十億ドル規模の投資マネーが流入している。しかし、この業界からは、まだビリオネアがほとんど誕生していない。 LiDARメーカー「ルミナー(Luminar)」の創業者でCEOのオースティン・ラッセルは、数少ない例外の1人だ。光学の天才と評されるラッセルは、17歳でルミナーを設立した。 同社のナスダック市場への上場に伴い、ラッセルは世界で最も若いセルフメイドのビリオネア(遺産相続などではなく、自力で資産10億ドルを突破した者)となった。 「SPAC(特別買収目的会社)との合併により上場を果たし、さらにスケールアップする機会を得たことに大きなやりがいを感じる。私はまだ若いが、多くの血と汗と涙を流してきた。自分はとても幸運だ」と25歳のラッセルは、カリフォルニア州パロアルトにあるオフィスから参加したビデオインタビューで語った。 ラッセルは、ルミナーの発行済株式総数の3分の
2021年11月13日 15時00分更新 文● 鈴木ケンイチ 写真●鈴木ケンイチ、SIP試乗会事務局 編集●ASCII カメラをほぼ使わない自動運転が登場 レベル4相当とのことだがその実力は? すっかり秋めいた10月下旬、東京のお台場エリアにおいて「SIP自動運転 実証実験プロジェクト試乗会」が実施された。SIPとは「戦略的イノベーション創造プログラム」の英文からきた呼び名で、科学技術イノベーション実現のために2014年度からスタートしている国家プロジェクトだ。様々なジャンルの科学技術のイノベーションを目指すが、その中に自動運転技術も含まれている。今回は、そうした日本の最新自動運転技術を披露する場としての試乗会が開催されたのだ。参加したのは、トヨタやホンダ、日産といった自動車メーカーだけでなく、ヴァレオやコンチネンタルなどの国際的サプライヤー系もあって、それぞれの最新技術を搭載した車両が用
記事の目的 本記事ではdToFとiToF LiDARの基本や原理について説明します。 また込み入った理論ではなく、LiDARの大まかな種類や用途を理解するのが目標です。 LiDARセンサはLight Detection and Rangingの略で光を使った距離測定技術の総称です。 RADARが電磁波を使って距離を測るのに対して、光を使った距離センサを指します。 こちらは距離センサ全般の記事です。合わせてどうぞ。 aru47.hatenablog.com 記事の目的 LiDARには大きく2種類ある dToF LiDAR 原理 dToF LiDARの製品 dToF LiDARの種類について iPadのdToF LiDAR indirect Time of Flight 原理 iToF LiDARの製品 参考文献 最後に LiDARには大きく2種類ある LiDARには大きく2つ種類があります。
ミシガン大学の研究チームは、自動運転車に対するサイバー攻撃として、距離計測センサーのLiDAR(ライダー)に偽情報を送り込む手法を考案した。実在しない障害物が存在するかのように見せることで、自動運転車の動作を混乱させられる。 自動運転車は周囲の状況を把握するため、カメラやレーダー、ライダーなど複数のセンサーを搭載している。センサーにはそれぞれ得意、不得意があるため、自動運転車は各センサーで得た情報を組み合わせてどう動くか判断している。たとえば、可視光映像で情報を取得するカメラは、道路標識にステッカーが貼られるなどして改変されるとだまされてしまい、最終的に交通渋滞や事故を起こす可能性があるという。 研究チームは、LiDARに偽情報を送り込むため、あるパターンのレーザー光線をLiDARの受光部に照射。こうすることで、実際にはない障害物を、あたかも存在するように誤解させられた。
iPad Pro(第4世代)に搭載されたLiDARスキャナを使ってできることを紹介した動画が公開されました。著名アプリの開発者たちが語っています。 光を検出して測定するLiDARスキャナ 発表されたばかりのiPad Pro(第4世代)の外観上の最大の特徴は、デュアルカメラと一緒に設置されたLiDARスキャナです。 LiDARは、「Light Detection and Ranging」(光検出と測距)の略称で、光が対象物に到達してから反射して戻るまでの時間を測定して距離を割り出す技術です。 iPad ProのLiDARスキャナは、屋内でも屋外でも、最大5メートル先から反射する光を測定するダイレクト・タイムオブフライト(TOF)方式を利用しており、拡張現実(AR)での活用が期待されています。 著名アプリの開発者たちが解説 著名アプリの開発者たちが、自身の開発したアプリを使ってiPad Pro
Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 中国のZhejiang Labと米UCLA(University of California, Los Angeles)の研究チームが開発した「Compact light field photography towards versatile three-dimensional vision」は、虫の複眼とコウモリの超音波探知を組み合わせた新たなカメラシステムだ。曲がった先の物体や何かの背後にある隠れた物体も同時に観察できるという。 コウモリは暗闇の中で、エコーロケーションと呼ばれる音波探知機を使って、周囲の状況を鮮明に映し出す。コウモリの鳴き声は、高周波数で周囲に反射し、耳で拾われる。そ
Scaniverseってどんなアプリ?ScaniverseはポケモンGOで有名なNiantic社が提供しているiOS向け3Dスキャンアプリとなっています。完全無料で使える3Dスキャンアプリながら有料のアプリにも匹敵する性能を誇ります。 5cm程度の小さい置物からホテルの1室までの幅広いサイズを3Dスキャン可能となっています。 対応機種はLiDARスキャンを行う場合は、iPhone12/13/14Pro/MaxシリーズかiPad Pro(2020年モデル以上)が必要になりますが、NoLiDARスキャンを行う場合はiPhoneXS以降に発売された全てのiPhoneとA12プロセッサ以降が搭載されたiPadシリーズで3Dスキャンが可能となります。 さらに!2024年の3月に行われたVer3.0アップデートにより、今まではPC又はクラウド処理が必須だった3D Gaussian Splattingを
iOS16で利用可能になる「RoomPlan」APIを使って、iPhoneで3Dスキャンした室内にある家具を消すデモ映像が公開されました。全ての家具を一気に消すだけでなく、選択した家具だけを消すことも可能です。 iOS16では3Dスキャンが簡単に iOS16では、LiDARスキャナ付きiPhoneやiPad Proで室内をスキャンすることで、3D見取り図を簡単に作成できる「RoomPlan」APIが動作します。 Shopifyの拡張現実(AR)/仮想現実(VR)エンジニア、ルース・マシュマイヤー氏が、 RoomPlan APIを使ったデモンストレーションの動画を公開しています。 ディスプレイやスピーカーの乗った机、椅子、観葉植物が置かれ、窓にはカーテンのかかった部屋をスキャンします。 一瞬で、何もない部屋に変わってしまいました。壁に取り付けられていたエアコンも含めて、完全に消えています。ゼ
iPhoneに搭載のLiDARスキャナでどんなことができるの? おすすめの使い方やアプリを紹介 最新のiPhoneやiPadには「LiDARスキャナ」という機能が搭載されています。普段はなかなか起動することのない機能ですが、これを使えば手早くモノの大きさを測ったり、周囲のものを3Dスキャンしたりできます。 LiDARスキャナを活用したサービスも少なくありません。今回は「LiDARスキャナ」で具体的にどんなことができるのかを紹介します。 そもそもLiDARスキャナとは? (画像は「超幻実 – au 5G × 鬼滅の刃」) LiDARスキャナは、レーザー光の反射を利用して、モノや地形の「距離」を読み取る機能です。これにより、iPhoneのカメラの機能が向上したり、現実のモノの大きさが計測できたり、3Dスキャンアプリを活用できたりと、さまざまな用途に利用できます。 LiDARスキャナを搭載してい
TOP 特集 VFXチームがわかりやすく解説! 大河ドラマ『青天を衝け』で学ぶ、VFXのつくり方 <22> 撮影現場でのスマホLiDARの活用 2022/02/03 VFXチームがわかりやすく解説! 大河ドラマ『青天を衝け』で学ぶ、VFXのつくり方 <22> 撮影現場でのスマホLiDARの活用 Maya HoudiniTV NHKの大河ドラマ『青天を衝(つ)け』のVFX映像の制作過程や裏話、現場の様子などをご紹介するシリーズ企画。22回目となる今回は撮影現場におけるスマホLiDAR(Light Detection and Ranging)の活用について解説したいと思います。 (※本記事は2022年2月14日(月)をもって、公開終了いたします)
Innovative Tech: このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 米Google Researchとカナダ・トロント大学の研究チームが開発した「Urban Radiance Fields」は、Googleストリートビューなどのスキャンプラットフォームで取得できる情報を基に、複数の視点の画像から合成して作り出す新たな視点画像と3D再構成を自動作成する手法だ。 特定シーンの異なる角度から撮影した複数枚の画像を組み合わせる手法と違い、今回は常に動いているカメラから撮影する、スキャンプラットフォームの取得データ画像を入力に使う。そのため、常に変わるカメラ位置や太陽の位置、画像間の露出の変化、ほとんどの画像に映り込む空の画像の処理、同じ構造物でもカメラごとに色が異
Appleが拡張現実(AR)機能を強化した「iPad Pro」を発売してから数カ月が経過したが、このデバイスに新たに搭載されたLiDAR深度センサーを活用するARアプリは比較的少数に限られているのが現状だ。この背面のセンサーは「iPhone」の次期モデルに搭載される技術を予告するものなのかもしれない。つまり、一足早くリリースされたiPad Proアプリを見れば、Appleが次にどのような領域に進出するのかが分かる可能性がある。そして、強化された深度センサーを使った次世代アプリの方向性を最もはっきりと示しているのは、Occipitalの住宅スキャンアプリ「Canvas」の最新バージョンかもしれない。 コロラド州ボルダーに本社を置くOccipitalは、深度計測カメラのハードウェアやソフトウェアを長年にわたり開発してきた。同社のデバイス「Structure Sensor」をiPadに取り付けれ
この記事はTech KAYAC Advent Calendar 2020の19日目の記事です。 こんにちは。CL技術部の藤澤覚司です。 普段はUnityを使ったAR開発などを行っています。前回の記事では、可愛いキツネさんがsoft particleの中を走り回っていましたね。コンコン。 最近サイバーパンク2077が発売されましたね。職場の人間はみんなサイバーでパンクな物が大好きなので、僕もすぐ買いに行きました。 www.spike-chunsoft.co.jp サイバーパンク2077をプレイしていて感じましたが、やっぱりギラギラしているサイバーな街並みを見ていると、テンションが上がってきますね。僕の代わり映えしない日常もギラギラと発光していたらいいのに。だから僕はhololiveを見るための板になっていたiPadをおもむろに取り出しました。 作りたかったもの ARKit3.5から新しく追加
自動運転車向けLiDARの開発が過熱、新方式の提案が続々と:オートモーティブワールド2020(1/2 ページ) レベル4以上の自動運転システムにおいて重要だとされるLiDAR。本稿では「オートモーティブワールド2020」に出展したLiDARメーカーの最新技術を紹介する。 自動運転車に欠かせないセンシング技術。悪天候や夜間でも確実に周辺環境を認識するには、さまざまな検知方式のセンサーを組み合わせることが定石だ。その中で、ドライバーが関与しないレベル4以上の自動運転システムにおいて重要だとされるのがLiDAR(Light Detection and Ranging、ライダー)だ。可動部品をなくして信頼性を高め、小型化を図るのが各社のLiDAR開発に共通するトレンドだが、併せて求められる物体の検出精度向上に向けてはさまざまなアプローチがある。 そこで、本稿では「オートモーティブワールド2020」
iPhone12 ProやiPhone12 Pro Max、iPad Proに搭載されているLiDARスキャナを使って、人物などの立体映像を簡単に撮影・編集できる無料アプリ「Rememory(リメモリー)」が、6月30日に公開されました。 立体映像を手軽に撮影・編集 「Rememory」は、iPhone12 ProやiPad ProのLiDARスキャナを使って、現実の人物や場所を三次元デジタルデータ化して高画質で再現する立体映像「ボリュメトリックビデオ」を簡単に撮影・編集できるアプリです。 iPhone Maniaでは、2020年12月に「時空間レコーダー」として試作段階だった頃の同アプリを取り上げています。 ボリュメトリックビデオの撮影には、これまで大型の撮影設備が必要とされてきましたが、「Rememory」では、被写体の立体イメージを高精度に捉えられるLiDARスキャナにより、iPho
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く