AIが点群を"部品ごと"に見はじめた ―― スキャンの次は、"意味"が自動でつく

AIが点群を"部品ごと"に見はじめた ―― スキャンの次は、"意味"が自動でつく

3Dスキャンで現場をまるごと点の集まり(点群)にする、というのは、ずいぶん身近になってきました。ただ、撮れた点群を眺めていると、私はいつも同じことを思います。これ、見た目はちゃんと現場なのに、生の点群そのものには「ここが柱」「ここが配管」という意味までは入っていないんだよなあ、と。

最近、その「点群を部品ごとに理解する」という研究をいくつか見かけて、面白いなと思ったので、今日はその話を書きます。まだ研究の途中のものが多くて、私も全部を分かっているわけではないのですが。

点群そのものには、まだ"意味"は入っていない

以前の連載で、点群のことを「空間にまかれた砂つぶ」と書きました。粒が集まって、なんとなく形は見える。でも、その粒の一つひとつに「ここは扉」「ここは梁」という意味のラベルが、はじめから入っているわけではありません。

人間は、点群を画面で見れば「あ、これは配管だ」とすぐ分かります。長くやっている人ほど早い。機械のほうでも、点群から壁や柱を自動で分類する研究(セマンティックセグメンテーション)は、実はもうかなり進んでいます。ただ、実際のScan to BIMの現場では、その自動認識の結果を人が確認したり、部材を直したりする工程が、まだけっこう残っている。先日書いた下水道の点検の話やデジタルツインの入口の話でも触れたのですが、「形を取る」ことと「これは何だと意味を与える」ことは、今はやっぱり別の工程になっているんですね。

"丸ごと"は言えるのに、"部品"が言えなかった

ここ数年、3Dを扱えるAI(大規模モデル)は、ずいぶん賢くなりました。点群を見せて「これは椅子です」と物体を丸ごと言い当てる、くらいのことはできる。

でも、その椅子の「脚」や「背もたれ」を指して、ここはこう、と部品ごとに答えるのは苦手だったようです。全体はつかめるのに、中の部品を名前で呼べない。私が引っかかっていたのも、まさにそこでした。現場で本当に欲しいのは「建物です」ではなくて、「この部分が配管で、こっちがダクト」という部品単位の理解のほうなので。

各パーツに"名札"をつけるという発想

そこで見つけたのが、3D-PLOT-LLMという研究です(arXiv 2606.19828)。名前は難しそうですが、発想はわりとシンプルでした。

点群を、空間的にまとまりのある小さな領域にいったん区切る。そして、その領域ごとに専用の"名札"(トークン)を持たせて、AIがその部分を直接指して、名前をつけたり説明したりできるようにする。しかも、そのために足す仕組みは小さくて(追加は約0.8Mパラメータほど)、少ない追加で効かせようとしている、と説明されています。

ただ、これは建設現場の配管や柱を直接認識する研究ではなくて、椅子や机のような一般的な3D物体を中心にしたデータで検証された研究です。ほかにもPartFieldやFind3D、PAR3Dといった研究が、それぞれのやり方で「部品ごとの3D理解」に向かっているようです。

このあたり、私も論文を全部読み込めているわけではないので、細かい部分は自信がありません。ただ、"3Dの中の部分"を言葉で指せるようにする、という方向に、いくつも研究が出てきているのは、なんだか納得感がありました。

これができると、スキャンの"次"が変わるかもしれない

ここからは、この研究の結論というより、建設DXの現場から見た私の期待です。

さっき書いたように、点群から壁や柱を認識すること自体は、もう研究されています。そこに、今回のような"3Dの部分と言葉を結びつける"技術が重なってくると、どうなるか。連載の第9回で、BIMは"かたちに意味が宿る"段階だ、という話を書きましたが、その意味づけの部分が、もっと言葉で扱えるようになるかもしれない。今はまだ人の確認や修正が多く残る部材の分割やオブジェクト化が、もう一段、楽になっていく――そんな絵を、私は勝手に描いています。

ただ、まだ研究の途中です

とはいえ、期待しすぎるのもよくないと思っています。

今回扱われているのは、実際の建設現場で取れる生の点群とは、だいぶ条件の違うデータです。現場の点群は、欠けていたり、汚れていたり、その会社にしかない特殊な部材があったりします。そういう"きれいじゃない現実"で同じように動くかは、まだこれから。今回の研究が、そのまま建設現場のScan to BIMになるわけではありません。ただ、これまでの3Dのセグメンテーションに、言語と部品レベルの推論という新しい流れが重なってきた、という感じは受けています。

それでも、"撮る"ができるようになった次に、"意味が言葉で扱える"段階が来るとしたら、それはけっこう大きい話だなと思います。私はこの先を、楽しみに追いかけていくつもりです。今日も、目の前の点群を、面白がってデータに変えていきましょう。

WHAT A WONDERFUL DAY TODAY!

（参考）
・3D-PLOT-LLM: Part-Level Object Tokens for 3D Large Language Models（arXiv 2606.19828）：https://arxiv.org/abs/2606.19828
・PartField（arXiv 2504.11451）：https://arxiv.org/abs/2504.11451
・Find3D（arXiv 2411.13550）：https://arxiv.org/abs/2411.13550
・PAR3D（arXiv 2606.06485）：https://arxiv.org/abs/2606.06485

【お知らせ】ベトナム最大級の建設展示会「VIBE 2026」共同出展、募集を延長しました（9月10日まで）

ありがたいことに反響をいただき、日本企業の共同出展企画の募集を、9月10日まで延長しました。

- ベトナム最大級の建設展示会「VIBE 2026」

- 日本企業の共同出展企画（まとめて出展するので、初めての海外展示会でも安心）

- 中小企業から参加OK

- 1テーブル 116,000円から

「ベトナムに関心はあるけれど、単独出展はハードルが高い」――そんな中小企業さんこそ、ぜひ。現地のネットワークは、ベトナムのパートナーと一緒にご案内します。詳しくは onetech.jp まで、お気軽にどうぞ。

――――――――――
▶ はじめての方へ｜なぜ「熱と余白」なのか（自己紹介）
https://note.com/nkawam/n/n8c00e8f6d2bd

▶ 私たちの実例と、共創パートナー募集｜図面がない現場から、iPhoneで
https://note.com/nkawam/n/n52cd688f7cce

▶ ほぼ毎日更新｜3分でわかる ベトナム建設ニュース（マガジン）
https://note.com/nkawam/m/ma83f297fd0d1