首页
下载APP
首页
1. 深度学习下的场景明确：从麋集网格到工具中心表征
单目 3D 语义场景补全 (Semantic Scene Completion, SSC) 是具身智能与自动驾驶领域的一项焦点手艺 ，其目的是仅通过单幅图像展望进场景的麋集几何结构与语义标签 。
恒久以来 ，该领域受困于古板的麋集网格（Grid-based）表征 。虽然近期涌现出的 “工具中心” 范式（如 GaussianFormer）使用 3D 高斯基元（Gaussian Primitives）显著提升了效率 ，但这一起径仍面临两大瓶颈：
1. 基元初始化的盲目性：现有的要领往往通过在 3D 空间内随机漫衍数万个高斯基元来笼罩场景 。实验发明 ，这种随机初始化的有用使用率极低（仅约 3.9%） ，造成了重大的盘算冗余 。
2. 异 ；⒌ “漂浮物” 伪影：在处置惩罚希罕基元聚适时 ，现有的要领往往无法有用处置惩罚伶仃的离群点 ，导致在空旷区域天生过失的语义碎块 ，即所谓的 "Floaters" 征象 。
针对这些挑战 ，我们提出了SplatSSC 。该框架通过立异的深度指导战略与解耦聚合机制 ，实现了性能与效率的跨越式提升 。
图 1：SplatSSC 与主流框架的初始化战略比照 。(a) 现有的 Transformer 框架通常依赖大规模随机漫衍的高斯基元 ，这不可阻止地引入了空间冗余 ，导致模子容量的铺张 。(b) 相比之下 ，SplatSSC 使用几何先验举行指导 ，仅需一组精简且目的明确的高斯基元 ，即可实现高效的空间笼罩 。
作者：Rui Qian, Haozhi Cao, Tianchen Deng, Shenhai Yuan, Lihua Xie名称：SplatSSC: Decoupled Depth-Guided Gaussian Splatting for Semantic Scene Completion机构：南洋理工大学 (NTU), 上海交通大学 (SJTU)开源地点： https://github.com/Made-Gpt/SplatSSC
2.焦点手艺：精准指导与鲁棒聚合
图 2：SplatSSC 架构总览 。我们接纳并行分支战略：可学习的图像编码器认真多标准语义提取 ，而预训练的 Depth-Anything 模子则提供稳固的深度特征 。通过组内多标准融合（GMF）？ ，这两类特征在经由采样后被映射到 3D 空间 ，完成高斯基元的几何初始化 ，并交由多级编码器举行精炼 ，最后通过 DGA ？殇秩疚镆逄逅 。
2.1 深度指导基元初始化：GMF ？
SplatSSC 的焦点头脑是摒弃随机初始化 ，转而使用几何先验举行精准指导 。我们设计了组内多标准融合？椋℅roup-wise Multi-scale Fusion, GMF）：
多模态特征融合：GMF 深度集成了图像的多标准语义特征与 Depth-Anything-V2 提供的鲁棒深度特征 。线性组交织注重力（GCA）：为了在移动端或具身平台上坚持高效 ，我们将特征沿通道轴拆分为多个组 ，通过组内交织注重力机制将古板注重力的盘算重漂后从平方级降低至线性级 。高质高效基元天生：基于天生的几何先验 ，我们仅需 1200 个高斯基元（约为前作的 7%） ，即可精准笼罩场景结构的空间漫衍 。
2.2 解耦高斯聚合器 (DGA)：向 “漂浮物” 宣战
SplatSSC 引入相识耦高斯聚合器（Decoupled Gaussian Aggregator, DGA） ，从基础上重新设计了高斯到体素（Gaussian-to-voxel）的喷溅历程 。
几何与语义的解耦展望：古板要领常将不透明度（Opacity）直接作为概率先验 ，导致离群点误导语义 。DGA 建设了两条自力路径 —— 一条认真展望几何占有（Geometry Occupancy） ，另一条认真条件语义漫衍 。门控抑制机制：在 DGA 中 ，基元的不透明度被显式界说为 "保存置信度" 。当离群点泛起在过失位置时 ，其低占有概率会直接作为门控信号 ，屏障过失的语义孝顺 。这种机制无需引入重大的启发式规则 ，即可优雅地解决困扰高斯表征的 "漂浮物" 问题 。
图 4：DGA 鲁棒性演示 。古板的聚合要领（如 GF.agg 和 GF2.agg）在面临离群基元时 ，容易在空旷空间天生过失的 “漂浮物” 。DGA 通过解耦占有概率与语义孝顺 ，使用极低的占有概坦率接抑制离群点的过失语义映射 ，从而确保了场景界线的纯净 。
3. 实验验证：SOTA 性能与更好的能效比
我们在室内场景补全的主流基准数据集 Occ-ScanNet 上验证了 SplatSSC 的性能 。
图 5：在 Occ-ScanNet-mini 上的定性实验比照 。与其他 baseline 相比 ，SplatSSC 在场景补全的完整度以及目的物体的召回率上具有显着优势 。
3.1 主实验
SplatSSC 在 IoU 指标上抵达了62.83% ，mIoU 抵达51.83% 。
大幅领先前作：相比此前的 SOTA 要领（如 RoboOcc） ，我们的模子在 IoU 上大幅提升了6.35% ，mIoU 提升了4.16% 。更强的细粒度感知：得益于精准的基元指导 ，模子在处置惩罚椅子腿、桌面等细腻物体时体现出更强的召回能力和更清晰的界线 。
表 1：Occ-ScanNet 数据集上的局部展望性能比照 。实验效果显示 ，SplatSSC 在 IoU 与 mIoU 各项指标上均刷新了纪录 。表中加粗部分代表最优效果 ，下划线代表次优效果 。
3.2 消融实验
高斯基元参数的消融剖析：这组实验展现了一个要害结论：基元堆砌并不等同于精度提升 。
寻找 "甜蜜点"（Sweet Spot）：实验效果批注 ，仅使用1200 个高斯基元配合[0.01, 0.16]的标准规模 ，即可抵达48.87%的最高 mIoU 。这比堆砌 19200 个基元的要领更轻量 ，精度却更高 。效率的代差：通过优化基元漫衍 ，模子在单张 3090 上实现了约 115ms 的极低延迟 ，同时彻底规避了大标准设置下的显存溢出（OOM）问题 。
表 2：高斯基元参数消融实验 。显存占用与耗时均在单张 RTX 3090 GPU 上测得 。
？樾⑺秤爰芄共鸾猓赫庾槭笛榱炕松疃确种В℅MF）与解耦聚合器（DGA）的协同效应 ，证实它们是解决行业痛点的 "组合拳"：
解决 "浮点伪影"（Floaters）：在希罕设定下 ，古板的加性聚合（GF.agg）险些无法事情 。比照数据展示了DGA的绝对优势 —— 通过解耦几何与语义展望 ，它在坚持效果 "清洁" 的同时 ，将 mIoU 从瓦解边沿提升至48.01%的顶尖水平 。高质量初始化的基石：GMF？椴坏峁┥疃韧 ，重天生结构化几何先验 ，这是后续高斯提升（Gaussian Lifting）乐成的要害 。若缺少 GMF, 即便聚合算法再强 ，几何 IoU 也会泛起强烈下滑 。
表 3：SplatSSC 焦点组件消融实验 。
3.3 效率突破：少即是多
SplatSSC 展示了希罕表征的重大威力：
推理延迟缩减：在坚持高精度的同时 ，推理延迟降低了约9.3%（仅为 115.63 ms） 。显存占用降低：显存消耗镌汰了约9.6% 。参数规模稳固：在模子轻量化设计下 ，参数目仅增添 0.19% ，险些可以忽略不计 。
图 6：效率指标比照 。实验效果批注 ，通过引入几何指导的希罕表征 ，SplatSSC 仅支付极小的参数本钱 ，即可显著降低推理延迟与显存占用 。
4. 总结与展望：迈向具身智能的 persistent world model
SplatSSC 的乐成证实晰：在 3D 场景表征中 ，基元的 “质量” 远比 “数目” 更主要 。通过几何指导的精准初始化与解耦聚合 ，我们可以在更低的盘算资源下实现更高质量的场景重构 。
现在 SplatSSC 在单帧感知上体现优异 ，未来我们将致力于将其扩展到大规 ；舛【耙约俺こ叹呱砀兄姑 。我们相信 ，这种基于高斯基元的高效表征将成为构建长期性、交互式天下模子的要害一步 。
《男女性色大片免费网站》 ，《Q8X2R7L1T4J5M9B6W3》卡尔蜜拉乳腺乱流的原因分析及答案
“嗯～啊～快点死我”
97国产网站在线
……
02月03日
“国产刺激福利在线观看的”新疆1558名因雪崩滞留旅客离开景区Uzi疑似获得名人堂皮肤
↓↓↓
02月03日 ，今年以来中欧班列（合肥）跑出“加速度” 新增5条新线路 ，胸…啊…嗯…出奶了 ，一级a一级a爰片免费免免丿∴ ，18噩丕賱丕倬 ，天天干,天天爽
02月03日 ，贵州电影电视制作有限公司原总经理杨波接受审查调查 ，思思热在线免费视频 ，黄片原件 ，www.850pp com ，久久网二站
02月03日 ，拎稳“菜篮子” 鼓起“钱袋子”(办实事 解民忧·一线探落实) ，人人操穴 ，日本熟少妇 ，色站登录在线看 ，小 视频
02月03日|青藏集团公司今年首趟青甘藏大环线旅游专列在西宁开行|一级性生活欧美一级强奸乱伦视频|XNXX69爻诏卮|亚洲首页稀缺资源|浮生外传之家与林冰
02月03日|收到暴雨预警怎么办？9条防汛避险知识请牢记|西施被c|男女av 网站有那些|...偷精品视频,国产中文字幕一区二区,精品熟女视频一区二区三区...|九一精品操逼
02月03日|受低温雨雪冰冻天气影响 湖南发布地质灾害黄色预警|十八岁禁止的黄色|美国迷妹熟女链接|欧美老妇人性交网|精品综合91……
02月03日 ，河北怀来样边长城：就地取材打造的明长城“样板间” ，6080新觉伦午夜理论无码 ，无尽XXXx动漫3D同人小说 ，www.av欧美超碰 ，免费成年人在线观看
02月03日 ，东西问·京华文韵丨郭京宁：从周口店遗址可窥探人类起源的哪些秘密？ ，美女逼逼网站 ，真人被 到爽 奶头文字D章 ，胡桃被侵犯到失禁漫画 ，我要看逼
02月03日|两岸200名少年儿童福建泉州挥毫 竞逐“蔡襄奖”书法大赛|人人摸人人操一|人人超碰人人超碰人人|黄片播放|免费在线搞av
02月03日 ，两岸航线航点尚未完全恢复常态 国台办：民进党当局刻意阻挠是主要因素 ，不要快播的黄色网站 ，加勒比在线精品视频 ，美女操B黄色视频 ，午夜三级全黄
02月03日 ，山东“五一”假日旅游收入逾400亿元 “跟着文物游齐鲁”渐成风尚 ，一本到高清无码中文字幕 ，正在播放国产一级特黄 ，2022亚洲午夜精品A片 ，黄片尻逼
02月03日 ，跟着总书记探寻中华文明｜汉风汉韵 源远流长 ，小电影无码 ，国产熟女91九色 ，欧美黄色大片高潮在线观看 ，久久久久亚洲综合福利入口
02月03日|赣南山区新发现濒危植物突托蜡梅野外最大种群快讯！法国总统马克龙5日批准总理巴尼耶的辞职请求|东莞二区精区三区区|五月综合在线视屏|孟子义ai换脸高潮在线观看|黄色片欧美性爱
02月03日|“归雁”扎根山林 福州小山村蝶变展新颜|免费观看AAA片在线视频|迷奸国产激情网|黄么激情综合网|5555性爱网
02月03日|山西将迎持续降雪天气 或影响春运返程|亚洲精品国产2014AV天堂网手机版|九一一色视频|污鱼漫|伊人久久免费视频
英美联合空袭也门 ，藏在一瓶水中的山河秀丽|2024中国（张家界）国际新杂技戏剧周启幕|丝袜艹逼足交网站|爱搞视频在线为爱搞点激情|欢乐谷黄色网最新网站地址|薰衣草研究实验室
监制：邓金木
策划：赖晗
主创：唐征宇 林箴贺 陈佛烘 颜亦阳 陈林韵
编辑：王家菁、段圣祺
家政养老继续教育受欢迎 上海97名“阿姨级”大学生收获高级工证书
山东政协委员聚焦“银发经济” 呼吁加大投入让“老有所依”
大批台胞陆续经厦金航线抵厦参加海峡论坛
十四届全国人大二次会议闭幕
科技视点：推动人工智能技术赋能社会
黑龙江哈尔滨：多彩民俗活动迎“二月二”
伊朗称将对以袭击作出回应 埃及提出加沙停火新提议
员工迟到被扣20万？“司规”岂是法外之地
买车容易养车难！新能源车险的“两难”困境如何破解？
浙江金华文物资源总数列该省首位
女学生喷水
免费AA片在线视频
中文字幕乱在线伦视频俩女
亚洲国产操女视频网站
国产免费AV网站大全
欧美一级理论电影
免费AⅤ在线
18 网站91"
在线观看三线黄片
午夜免费黄色视频
闽公网安备 35010302000113号