MoDex: Towards Universal Multi-Object Dexterous Grasping(在新窗口打开)
提出数据高效框架 MoDex,以残差修正参考轨迹统一多物体灵巧抓取,未见物体成功率 61.24%。
- 将多物体抓取表述为对参考轨迹残差修正的单步决策
- 近距单次抓取与分离布局顺序交互的空间自适应双策略
- 跨本体泛化,纯仿真视觉策略零样本 sim-to-real
17 大方向 · 三级优先筛选 · 每日更新
最近更新:2026-10-20 18:44
返回聚合视图本页要点由 AI 根据论文摘要生成,以原文为准。
共 93 篇
提出数据高效框架 MoDex,以残差修正参考轨迹统一多物体灵巧抓取,未见物体成功率 61.24%。
提出 V2W,让 VLM 在显式 3D 世界上多轮主动采集空间证据,实现无训练的世界中心空间推理。
提出思维级偏好优化框架 ST,在切换点约束单路径延续,降 token 耗且保持推理准确率。
在 VLA 解码端用可学习 slot 压缩多帧视觉历史,提升操作成功率并控制计算开销。
提出因果链生成任务与 SODA-Embedding、Causal-QA 指标,GRPO 微调后 VLM 叙事因果理解显著提升。
在 VLA 内用视觉语言上下文估计力反馈相关性,调制 token 化力通路再生成动作。
分解 task/environment/trajectory 拟合 agentic RL 扩展律,环境轴优先,按 recipe 分配预算较主流 scale trajectory 算力效率约 1.7×。
用帧级时序场景变化与决策偏差刻画复杂度,预算条件层路由按场景选激活层,Bench2Drive 上推理算力约减 53.5% 且驾驶与语言能力损失可忽略。
提出 MVIP,用 meta-learning 学习跨时间 meta-prompt,实现高效视频逆提示与更高重建保真。
定义 goal displacement 并发布 GDB(230 场景、18 模型人类评分),量化共情话术替代实质帮助及 DPO 等缓解效果。
发布 20 万级开放世界具身导航规划数据,并用视频世界模型作环境代理做 RL 后训练以泛化分布外场景。
流式 keyframe selector 与帧-查询对比训练,在三个长视频 benchmark 与六种 VideoLLM 上 consistently SOTA。
定义建模漂移并提出 RLAWM:建模层与求解层物理 grounded reward,训练期惩罚推断公理世界与题设物理世界 divergence。
用因果中介与行为分析定位 SLM-ASR 幻觉来源,提出小模型框架 AudioSLM 显著减轻幻觉并优于部分 LLM-ASR。
先训 navigator 暴露微调配方所致漂移,用其与预训练模型分歧为合成样本打分并做效用-多样性选集蒸馏保通用能力。
融合 LiDAR/深度几何先验与全视频条件,沿新轨迹合成时序一致的驾驶视频并发布 Para4D。
用 ECS/PKS 行为探针量化 swarm 节点对外部上下文与参数知识的依赖,用于剪枝与推理路径搜索。
将 VLM 视觉 token 压缩建模为 UOT,统一重要性、冗余与覆盖,在 ViDoRe 上改善检索效率与效果。
发布 pan-Arab 文化偏好数据集 ArabPref 与多国文化选择题基准,系统评估后训练对阿拉伯 LLM 文化对齐的效果。
用前馈 4D 重建轨迹作 scaffold 引导预训练视频扩散,实现新相机轨迹下的单目视频重拍。
将 T2I 评测形式化为约束满足,LogicVal 结合检测与逻辑推理评估生成图。
高层扩散生成多模态避障全身运动,低层 RL 跟踪保平衡;hindsight 标注训练,测试采样可转向速度姿态等目标。
以物理时间序列辅助监督微调视频世界模型,多域上改进当前与未来状态预测。
将任务策略投影到冻结 BFM 可执行 latent 空间,离线训练统一 flow planner,仿真 128 变体平均成功率 42.0%,真机 G1 验证迁移与技能串联。
在冻结 AR 视频扩散基座上训练轻量 LoRA 校正器学习确定性漂移,长时文本生视频几乎不增推理成本。
构建覆盖 12 种东南亚语言、五类任务的 DeepSEA 基准,揭示前沿模型在低资源语上性能骤降及经英语 pivot 的依赖。
Stateful Harness 将规则驱动的世界状态演化与冻结视频模型渲染解耦,在 WorldState-Bench 上显著提升隐状态交互的规则遵从。
基于八种日常操作技能定义 36 项任务与可复现资产,评测显示纯视觉策略难以感知接触,视触策略提升有限。
指出 LeWM 用 ambient L2 作终端代价易陷伪低代价盆地,NGC 在训练 latent 的 mutual-NN 图上最短路径规划并显著提升成功率。
发现有害权重扰动分块单独作用弱、联合作用超加性;对齐阶段 JWP 训练模型在组合扰动下仍安全响应。
Ropedia W0 为跨人类与机器人具身的 egocentric loco-manipulation 世界基础模型,在五个跨具身基准上 SOTA。
在 LIBERO 上扩展 22 类静态扰动与 20 类运行时干预共 1648 shifted 任务,17 种策略在运行时分布偏移下平均性能约降 26.5 个百分点。
VQ-WM 离散 latent 搜索与连续视觉反馈控制结合,汉诺塔真机短数据 100% 成功,仿真操控/ locomotion 大幅领先既有世界模型。
发布约 2.83T token 的 22 语印度语合成预训练语料与 Indic-LLM-Eval-Suite,并分析数据规模与脚本覆盖影响。
可训练 Judge 学习查什么与何时停,冻结 Probe 在线执行,跨 OSWorld/MobileWorld/WebArena 奖励一致性与成本 Pareto 最优。
在预训练与后训练之间加入安全中期训练,显著降攻击成功率并改善通用能力。
PhysWord 用原子动作词对齐物理动力学 latent 表示,在 UniVTAC 与 LIBERO-Long 等任务达到 SOTA 成功率。
31 例工业 OR 端到端 benchmark,最强 coding-agent 配置 DAQ 0.87、严格可行率 88.39%。
3D latent diffusion 在压缩掩膜 latent 中合成全身 CT 分割掩膜,联合控制器官、肿瘤与人口统计条件。
仅用人类 GelSight 交互数据训练 ACTS,联合预测场景/腕部/触觉未来,接触动力学较视觉更易迁移机器人。
提出 LLT 四阶段数据管线合成 160 万条音频推理轨迹,SFT+DPO 后 Qwen2.5-Omni-7B 在 MMAU、MMAR、MMSU 上准确率明显提升。
异步 VLA 框架用 B-spline 轨迹融合与 execution-aware GRPO,机载推理时仍连续飞行,UAV-Flow 成功率 76.56%。
系统对比 SFT、RLVR 与 OPD 五种预训练模型,分析教师来源如何影响学习、遗忘与分布变化。
跨本体灵巧操作仿真平台与基准,多类策略在 Core-50 上成功率仍较低。
WildAWM 用开源模型合成可执行 GUI/MCP/CLI 环境与长程任务,在此训练的智能体在 8 个 OOD 基准上泛化提升。
在有限 rollout 预算下用无 reward 不确定性选部分解并估计 verifier 期望,重分配 GRPO 轨迹优势,多模型多 benchmark 多数优于 GRPO。
DreamCan 用预训练视频模型生成稀疏视觉子目标、低层 visuomotor 执行,在 LIBERO-Long 上报告 91.2% 成功率。
NCE 用特殊 token 文法让 Agent 原生编辑上下文,在四套长程 SWE/终端基准上提成功率并降 token 用量。
MCRA 与 FALA 极少参数高效适配 WavLM,冻结基线上 VoxCeleb1-O 与 CN-Celeb 相对 EER 明显下降。
分阶段去噪全身动作空间并跨阶段 KV-cache 条件,将 flow-matching VLA 适配到人形 loco-manipulation 六项真实任务。
无标签演化 agent harness,在 Terminal/SWE 等基准上同时提升通过率并降低执行成本。
Halcyon 在 GPIC 上从零 early-fusion 预训练,表明强 T2I 可不依赖互联网规模语言预训练。
七条模型谱系上 SFT/对齐后,可见更长历史时合作率下降更明显。
以元素级 HTML 机密性/完整性标注驱动标签传播,门控浏览器原语动作,在 MicroNet 上 0% 攻击成功率且保持高任务完成率。
系统对比 NVFP4 配方,8B 与 30B-A3B MoE 训练至 1T tokens,给出迄今该规模下相对 BF16 loss gap 较强的 FP4 训练结果。
离线强模型在仿真中编写并验收操纵技能后冻结为代码,RoboTwin 上低成本复用且跨模型执行。
微调小 VLM 做拉科塔档案 OCR 后校正,35 页数据 CER 17.1%→3.9%,强调分割噪声与真实流程评测。
双流同时预测 RGB 与速度场,注入仿真与野外流体先验,并用速度感知 DPO 改善烟雾火焰等流体视频。
RoboPhoto-VLA 统一建模感知、推理与相机控制,ADPO 对齐审美偏好,真实场景摄影更符合人类审美。
DRLM 用单去噪器并行修订草稿并以 cavity energy 筛选,在 Countdown、数独等复杂推理上优于自回归与离散扩散。
轻量 TokenGate 在 prefill 阶段可学习剪枝,显著加速首 token 并降峰值显存且不降精度。
OpenVLHarness 以能力层与持久多模态记忆组织视觉推理与异构工具,在 22 个基准上较无工具基线平均提升约 10 分。
用语言对齐 WAM 未来视觉中任务相关变化,HumanoidArena 平均成功率 79.17%,真机五任务由 53.33% 升至 71.33%。
多轮 RL 提升 VLM 智能体主要靠 LLM 层更关注视觉 token,而非改善视觉编码感知。
对 Gemma-4 12B 与 Inkling-Small 实证:早期层充当与专用 encoder 类似的隐式音频/视觉编码,且分模态独立编码可达联合编码同等精度。
指出 outcome reward 难以约束 silent fork 上的多余防御,ForkDPO 在行为分歧处对比学习以降低 disproportionate 行为。
CSPO 用近期训练统计自适应校准序列级 clipping,在数学推理与 ALFWorld 上优于 GSPO。
用 LLM 将自然语言转为目标条件、辅助部分可观测探索,并结合规则世界仿真与动作剪枝做搜索式规划。
模块化仿真平台 ForagerSim 聚焦需地图推理的具身任务,对比 RL 与工程栈显示复杂拓扑下地图推理是瓶颈。
提出主动物体级三维建图基准,评测显示前沿 VLM 在度量地图精度与覆盖上差距很大。
揭示线性 recurrence 与 softmax attention 在混合架构中竞争学习同一函数的现象,并提出分阶段预训练以改善检索与语言建模。
四层 L0–L3 代码数据管线,L2/L3 在 10B continual pre-training 下显著提升 EvalPlus 与 MultiPL-E pass@1。
Video-EMem 用时间锚定感知观测作可演化记忆,Writer/Reader 分工进化,存储约降 99.86% 且长视频 QA 优于直接输入 2048 帧。
揭示 MLLM 中层 Visual Backtracking,ReTrace 用 dormant token 与回溯窗口再激活,显著降 FLOPs 与 KV 并加速预填。
将导航视频生成为 BEV 地图到视频任务,建 10 万+序列基准与多信号统一框架。
提出 FSR 理论与推理时协议,在不微调 VLM 下改善计数、检测与 GUI grounding 等视觉报告一致性。
无训练两阶段框架:通过 tempo 对比路由识别快慢专家,按样本难度重分配 top-k 路由以自适应推理深度。
PhaseGuard+ 分别估计答案可靠性与 rescue 动作价值,Qwen3-VL-8B 可靠性 AUROC 74.8%,30% 路由大模型达 67.87% 准确率。
16 组数据上三范式无全面占优;诊断级联 leave-one-group-out 选胜者约 71.4%。
对已预训练非 loop LLM 做层内局部循环与 residual 门控,UpLoop 在 R=3 时二十项基准平均准确率提升 6.17%。
Resonance 通过蒸馏开放教师推理轨迹与自训练验证输出,将小模型 bootstrap 为正向反应预测器,并指出准确性与推理鲁棒性可分离。
TREK 套件归因检索后推理瓶颈,显示前沿模型常被冲突证据误导而非检索不足。
预注册实验显示上下文截断在事实不可重观测时成功率跌至随机,ARC-AGI-3 上 harness 组件分解解释 Provider 差距。
推理期自动发现 VLM 检索中未预设的虚假关联,四数据集识别强关联 query 平均 AUROC 0.93。
提出 AVTime-50K 数据集、BiTSA 奖励与 AVTime-Bench,优化密集时序音视频 caption 的语义与时间双向一致。
LLM 规划、VLM 评估迭代适配运动,再作 I2V 条件实现与场景物理兼容的高保真迁移。
分支 rollout 显示开启 thinking 后注入后果更少在读取时定死,需多次运行评测。
提出 MAP 层次语义表示,在统一词汇下比较人机计算机使用轨迹的差异与模式。
将 draft/target 联合为跨模型编译,LLM agent 在编译与 GPU 执行中搜索计划,单卡推测解码几何平均约 1.37× 每轮加速。
依据采样轨迹低维与跨轨迹一致性,局部最小二乘线性跳跃近似未来状态,粗步长下优于通用 ODE 求解并可即插即用。
VLM 从 IMU、gaze 与手部信号识别 PVA 事件并定位伪标定目标,10 人脚本研究中设备扰动下中位 gaze 误差较显式标定降 44.1%。
在 ESM-2 上评估预训练过滤病毒蛋白对能力与可微调恢复的影响及随规模变化。
将递归预训练用于 masked pLM,参数量更少却在多项任务上优于 AMPLIFY-350M。
没有符合条件的论文。