自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(522)
  • 收藏
  • 关注

原创 IEEE TRO 一种受蝗虫启发的机器人,可通过优化的过渡控制实现连续爬行-跳跃-滑行运动

摘要:本文提出了一种仿蝗虫多模态机器人LocustBot,实现了爬行-跳跃-滑翔的连续运动。该机器人采用协调驱动机构,通过单个电机控制跳跃与滑翔动作,结合强化学习优化运动控制策略,显著提升了能量利用效率与过渡稳定性。实验表明,LocustBot跳跃滑翔距离达5.39米,其创新性体现在:1)首次集成三种运动模态;2)通过弹性被动关节与螺旋桨协同抑制起飞翻滚;3)可折叠机翼设计解决了跳跃与滑翔的动作冲突。相比现有跳跃滑翔机器人,LocustBot无需高平台即可实现水平面连续运动,展现出更优的环境适应性。未来将探

2025-07-28 10:15:29 250

原创 清华大学徐静教授团队IEEE TRO 通过构建显式世界模型实现精准铰接物体灵巧操作的框架DexSim2Real2

清华大学团队提出DexSim2Real²框架,突破了机器人操作铰接物体的技术瓶颈。该框架通过主动交互构建显式世界模型,结合3D AIGC技术重建物体几何与运动学结构,并利用模型预测控制规划轨迹,支持多种末端执行器操作。实验表明,该方法在橱柜、抽屉等物体上操作精度达20%-25%,优于传统强化学习方法。创新性地采用真实交互视频学习功能可见性,解决了仿真环境不足的问题。该研究为复杂铰接物体的精准操作提供了新思路,相关成果发表于IEEE Transactions on Robotics。

2025-07-27 11:25:50 672

原创 Nature Communications:复杂光下多维视觉信息处理,利用时间演变的环境极化敏感神经突触器件

《自然·通讯》发表北京理工大学团队研究成果:开发出基于PEA2SnI4微丝阵列的偏振敏感光电突触器件。该器件通过各向异性特性实现1.38的二色性比,不对称电极设计实现低功耗高效电荷存储。在50%椒盐噪声下仍能进行边缘提取,复杂光环境下鱼类轨迹识别准确率达100%。研究突破传统视觉系统局限,集成偏振感知与时间演化信息处理能力,为智能传感与多维视觉系统开发奠定基础。沈国震教授、李营副教授为论文共同通讯作者。

2025-07-25 16:29:53 892

原创 IEEE TRO 利用双向循环神经网络实现多段软体机械臂的复杂多功能位姿与形状控制

本文提出了一种基于双向循环神经网络(biLSTM)的多段软体机械臂(MSCA)控制策略。针对MSCA各段耦合带来的控制难题,该方法利用biLSTM构建正向运动学模型,通过优化目标函数实现构型规划与控制。实验表明,该方法能有效完成末端位姿控制、位置限定、避障与追踪等复杂任务,性能优于传统常曲率模型。未来工作将结合物理模型进行工作空间分析,并引入更多传感器提升控制精度。该研究为软体机器人控制提供了新思路,在医疗、维修等领域具有应用潜力。

2025-07-24 09:49:55 364

原创 Science Robotics 基础模型推动了自主手术机器人技术发展

摘要:基础模型在语言和视觉理解领域的突破为机器人自主性提供了新机遇,但手术机器人面临数据稀缺和隐私限制的挑战。尽管手术数据难以大规模获取,但通过结合基础模型的通用能力与中间层领域模型(如物理模拟器),可提升手术场景的上下文理解与决策能力。例如,Segment Anything和CoTracker等模型结合几何优化,能实现自主缝合等任务。此外,通用机器人模型(如RT-X)的迁移应用仍需克服手术器械形态差异。文章建议手术机器人采用工业机械臂设计以缩小领域差距,从而直接利用现有机器人数据集和基础模型,推动手术自主

2025-07-23 09:52:52 881

原创 Science Robotics 机器人成功自主完成猪胆囊切除手术

AI机器人首次在无人干预下成功完成猪胆囊切除手术,8例手术成功率100%。这项由约翰斯·霍普金斯大学主导的研究发表于《科学-机器人》,标志着自动化手术迈向临床应用的重要里程碑。手术机器人动作更平稳精准,能自主纠错并适应个体差异,但操作速度略慢于人类。专家认为该技术有望十年内进入人体试验,未来或实现顶级外科医生技能的规模化复制。不过,研究者强调仍需验证机器人对活体出血、呼吸等真实情况的应对能力,确保患者安全始终优先。英国NHS计划在未来十年将机器人手术比例从20%提升至90%。

2025-07-22 10:18:59 682

原创 DiffSR:一种基于条件扩散模型的失真表面肌电信号恢复技术

武汉科技大学李公法教授团队在《Biomedical Signal Processing and Control》发表研究成果,提出基于条件扩散模型(DiffSR)的肌电信号修复技术。该技术通过相邻通道重叠采样和噪声估计更新机制,有效解决电极接触不良导致的信号失真问题。实验表明,DiffSR在三种数据集上平均识别准确率较传统方法提升10.9%-23.1%,尤其在高信号损失率(80%)下仍能准确定位并修复缺失信号。该技术无需大规模标注数据,具有良好泛化能力,为人机交互系统的可靠性提供了创新解决方案。

2025-07-21 10:23:25 566

原创 我的创作纪念日

再接再厉,一起向未来。

2025-07-18 09:04:18 114

原创 Nature Communications:人工有机传入神经为智能机器人提供闭环触觉反馈

本文报道了一种基于有机电化学突触晶体管(OEST)和人工机械感受器的低电压(-0.6V)人工有机传入神经(AOAN)系统。该系统可感知物体运动方向,通过分布式并行网络降低控制复杂度。结合闭环反馈程序,智能机器人能快速识别物体滑动并采取预防措施。深度学习处理触觉信号后,时空特征识别精度显著提高。该研究突破了突触行为模拟技术,为下一代智能神经机器人和低功耗仿生电子学奠定基础。新加坡南洋理工大学团队在《Nature Communications》发表相关成果,展示了AOAN在触觉感知、信息处理和运动控制方面的优异

2025-07-18 09:02:39 743

原创 Science正刊:麻省理工学院Hugh Herr 教授成为仿生时代领导者!

麻省理工学院团队开发新型仿生膝盖假肢,通过骨整合技术和肌内电极实现精准运动控制。该假肢采用三层架构:中枢神经信号经肌肉电信号传导至控制算法,骨整合植体提供稳定连接通道。研究发现重建拮抗肌肉结构可增强本体感觉反馈,使受试者在多项测试中表现优于传统假肢用户,甚至能超越生理运动极限。两名截肢者测试显示,该技术不仅恢复基本行走能力,还能完成复杂动态任务,并显著提升使用者对假肢的"身体归属感"。研究成果发表于《Science》,为假肢技术带来突破性进展。

2025-07-14 09:58:10 325

原创 首个三系统VLA架构!复旦&上海创智学院:世界知识+世界模型+动作模型协同框架

复旦大学与上海创智学院联合研发的TriVLA模型开创性地提出首个三系统VLA架构,突破现有双系统模型局限。该模型通过视觉语言模块(世界知识)、动态感知模块(世界模型)与策略学习模块(动作控制)的协同配合,实现了机器人对动态环境的实时适应能力。实验表明,TriVLA在仅10%训练数据下即可完成3.46步长任务链,在60项异构任务测试中全面超越现有方法,并以36Hz频率实现精准控制。这一创新架构为具身智能领域提供了世界知识与动态预测融合的新范式,显著提升了机器人在复杂场景中的任务连贯性与环境适应性。

2025-07-12 11:15:17 568

原创 UC 伯克利、北京大学、Sharpa 等提成ViTacFormer实现人形机器人熟练制作汉堡

UC伯克利等机构研发的ViTacFormer框架突破机器人灵巧操控难题,通过跨模态注意力机制融合视觉与触觉信息,并创新性地引入未来触觉预测功能。该系统在短程任务中成功率提升50%以上,并能稳定完成长达2.5分钟的汉堡制作等复杂操作流程。搭载SharpaWave灵巧手的双臂机器人展示了出色的多指协调和持续控制能力,标志着视触觉融合技术在精细操作领域取得重大进展。该研究由Pieter Abbeel等知名学者参与,获业界广泛关注。

2025-07-11 08:45:12 643

原创 让AI自主设计并执行生物实验,机器人生物学家开启实验室自动化新时代

中国科学技术大学研究团队开发的BioMARS系统首次将大语言模型与视觉语言模型深度集成,实现了生物实验全自动化。该系统通过三大智能代理分工协作:生物学家代理生成可执行实验方案,技术员代理转化为机器人指令(准确率96.4%),监察员代理实时检测实验错误(精确率95.7%)。在细胞培养实验中,其操作效率提升90%,细胞存活率超92%;在干细胞分化优化任务中,性能超越传统算法。该系统支持自然语言交互和模块化扩展,标志着实验室自动化进入智能时代。论文和Demo已公开。

2025-07-10 09:34:02 770

原创 Science Robotics 耶鲁大学开源视触觉新范式,看出机器人柔性手的力感知

耶鲁大学提出"Forces for Free"(F3)视触觉传感新范式,仅需标准RGB摄像头和优化设计的柔性手爪(F3 Gripper),就能实现高精度力感知。该系统通过降低摩擦、优化构型等硬件改进,结合CNN-Transformer时序模型和SAM视觉分割,在零额外硬件成本下达到0.2-0.4N的力估算精度,成功完成插销、擦拭、书法等精细力控任务。这一开源方案为低成本机器人力感知提供了新思路,重新定义了视触觉传感的成本效益边界。

2025-07-08 09:16:35 643

原创 【Science advances】高分辨率多任务成像的人工智能辅助生物仿生方法先进感知

摘要:本研究开发了一款基于节肢动物复眼的生物仿生视觉系统,采用3D打印技术构建含127个小眼的半球形复眼结构,集成430万像素CMOS传感器,实现165°广视角和40μm分辨率。通过融合YOLOv5s与残差神经网络,系统可实现多目标3D追踪(精度95%)、全景图像重建等功能。该技术突破传统复眼低分辨率限制,为工业检测和医疗内窥镜提供新方案,但存在边缘畸变和计算延迟等问题,未来需优化光学结构及算法。研究成果发表于《Science Advances》。 (字数:147)

2025-07-07 08:38:20 204

原创 Science Robotics 全球卫星在轨服务和太空碎片修复刚需亟待机器人解决方案

现代太空经济面临严峻的轨道碎片威胁:全球监测网络追踪到约3万个太空物体,包括废弃火箭和失效卫星,实际数量更多。这些碎片可能引发凯斯勒综合征——连锁碰撞导致近地轨道不可用的灾难性场景。解决方案包括机器人航天器进行在轨维修、碎片清除(通过减速脱轨或推送至墓地轨道)以及非接触式操作技术(如磁感应、羽流冲击)。该问题涉及机器人自主操作、计算机视觉和机器学习等关键技术,需要全球机器人学界与航天界协同攻关,以维护太空可持续发展。

2025-07-06 18:12:41 707

原创 机器人操作大模型的技术发展与未来前景

同时,参与上海张江机器人创新比赛的经历,使我得以实地考察国内顶尖科技公司(如宇树科技、灵心巧手、加速进化)在赛场上展示的最新具身智能应用,包括结合大型语言模型的自主决策系统和多模态交互设计,这不仅拓宽了我对国内前沿技术力量如产业链协同创新和政策支持的理解,也为我的认知带来了宝贵且深远的启示——激发了对人机协作和智能化普及的浓厚兴趣——在此谈谈对于机器人操作大模型的技术发展与未来前景的看法。感官革命的核心,是为机器人赋予超人类的感知能力,这不仅提升了操作精度,更重塑了人机交互的本质。

2025-07-04 09:57:52 371

原创 从LLM到WM:大语言模型如何进化成具身世界模型?

摘要:本文探讨了大语言模型(LLM)与世界模型(WM)在具身智能中的关系。作者通过课程实践和学术会议认识到具身智能的重要性,发现LLM虽在语言处理上表现优异,但缺乏物理世界感知能力。世界模型作为具身智能的核心,能模拟环境变化并支持决策。研究指出LLM向WM演化的可能路径,包括多模态数据融合(如PaLM-E模型)和虚拟环境训练,但也面临物理推理不足、因果理解有限等挑战。这一演化过程将推动AI从语言处理向物理世界交互的跨越,为通用人工智能发展提供重要方向。(150字)

2025-07-03 08:43:23 709

原创 具身多模态大模型在感知与交互方面的综述

《具身多模态大模型的技术原理与发展趋势》摘要 本文系统梳理了具身多模态大模型的技术框架与发展现状。在感知层面,模型需整合视觉(图像/点云/视频)、语音(ASR/情感识别)和触觉(力反馈/纹理识别)等多模态输入;融合机制从早期手工设计转向基于Transformer的跨模态注意力,典型代表如CLIP、PaLM-E等模型。交互层面强调"感知-决策-行动"闭环,需解决语言-视觉对齐、动作规划等挑战。当前技术瓶颈包括CLIP编码器的视觉细节缺失、多模态注意力不稳定等问题。前沿改进方向涉及视觉特征融

2025-07-01 10:09:46 654

原创 Science!仿生鱿鱼

摘要:加州大学团队揭秘鱿鱼动态变色机制,发现其虹彩细胞通过正弦波折射率剖面实现透明-彩色转换,光谱偏移达200纳米。受此启发,研究者开发出新型多光谱复合材料,兼具可见光和红外动态调控能力,响应时间300毫秒,可循环2.5万次。该材料在水陆环境均表现出优异伪装性能,为自适应伪装、智能热管理等领域提供新思路。研究成果发表于《Science》,为仿生光学材料设计开辟新途径。(149字)

2025-06-30 08:32:07 340

原创 机器人“拿捏橡皮泥”

图5软接触仿真结果训练结果:本文在仿真中完成了对应模型的训练,基于专家演示的强化学习系统能够在先验知识的基础上进行探索,从而获得更高的奖励。相较于刚性物体,可变性物体具复杂的变形特性(包括弹性变形、塑性变形和弹塑性变形),大量的自由度 (DOF) 需要复杂的建模方法,这使该问题更加复杂。为此,本文开发了一款可变形物体与基于视觉的触觉传感器之间的软接触模拟器,该模拟器能够模拟视触觉传感器与弹性、塑性以及弹塑性物体之间的接触变形。MLS-MPM利用粒子来表示物体,粒子的运动可以模拟弹性体和物体的接触变形。

2025-06-29 16:51:06 393

原创 ADVANCED INTELLIGENT SYSTEMS 东京大学仿生人类手指机器人,实现“皮肤”补水!

东京大学团队开发出一种新型生物混合机器人手指,采用双层可渗透皮下支撑系统解决皮肤覆盖机器人的脱水难题。该系统包含3D打印穿孔骨骼层和海绵状PVA水凝胶层,前者提供结构强度并允许液体流动,后者实现营养输送和机械缓冲。实验证明该设计能有效维持皮肤组织水分,显著提升机器人在空气中的运行稳定性。这一突破为生物混合机器人的实用化提供了关键技术支撑,在医疗等领域具有重要应用前景。研究成果发表于《ADVANCED INTELLIGENT SYSTEMS》期刊。

2025-06-28 10:56:32 409

原创 IEEE T-ASE|基于视触觉传感器的柔性接触仿真与操作学习

为此,本文开发了一款可变形物体与基于视觉的触觉传感器之间的软接触模拟器,该模拟器能够模拟视触觉传感器与弹性、塑性以及弹塑性物体之间的接触变形。在此模拟器的基础上,本文提出了基于视触觉传感器的可变形物体操控基准,包括可迁移的观测值、任务和专家演示系统。最后,本文搭建了相应的实验平台,完成了相关任务的Sim-to-real实验和鲁棒性实验,实现了对可变性物体的操控。图5软接触仿真结果训练结果:本文在仿真中完成了对应模型的训练,基于专家演示的强化学习系统能够在先验知识的基础上进行探索,从而获得更高的奖励。

2025-06-27 09:24:54 289

原创 Science Robotics:利用软机器人技术对多种植物进行原位叶面扩增,用于光学表型分析和生物工程

本文提出了一种新型软体机器人叶片夹持器和冲压注射方法,用于改善植物纳米探针和基因的叶面输送。该方法采用优化的沙漏形设计,注射成功率超过91%,在向日葵和棉花上实现比传统方法12倍的渗透面积增长,同时显著减少损伤。研究验证了水凝胶纳米颗粒(AquaDust)用于监测叶水势,以及农杆菌介导的RUBY基因传递系统。结果表明,气孔导度是影响注射效率的关键因素。该技术为精准农业提供了非破坏性、多物种适用的新型叶面给药方案,有望推动植物表型分析和基因工程的发展。

2025-06-25 09:17:41 778

原创 Meta-华盛顿大学-CMU联合研究多感官触觉表征在机器人操作中的新范式

机器人触觉感知技术取得突破性进展,Sparsh-X框架通过融合视觉、听觉、运动和压力四种触觉模态,结合自监督学习,构建了首个通用多模态触觉表征系统。该技术解决了传统单模态触觉感知的局限性,在物体识别准确率(提升32%)、力估计精度(误差降低17%)和复杂操作任务成功率(提升63%)等关键指标上表现优异。实验证明,多模态融合显著增强了机器人在非结构化环境中的灵巧操作能力和鲁棒性,为工业装配、医疗手术等应用场景提供了创新解决方案,为机器人实现类人的物理交互能力开辟了新途径。

2025-06-23 11:42:44 1139

原创 Nature Materials 仿生人工机械感受器,内置突触功能,用于智能触觉皮肤

本研究提出了一种受人类触觉传入系统启发的人工突触机械感受器(ASMR)阵列,通过将突触晶体管与还原氧化石墨烯通道、离子凝胶栅极介质和弹性指纹层垂直集成,实现了慢适应(SA)和快适应(FA)的触觉信号预处理。该平台利用摩擦电-电容门控机制调控突触后电流,模拟了生物机械感受器的适应性和记忆功能。实验表明,该阵列通过融合SA和FA特征的机器学习算法,能够高效识别笔迹、表面图案和纹理,且数据效率显著优于传统方法。这一创新设计为开发高能效的智能触觉皮肤提供了新思路,在神经机器人和自主系统等边缘AI应用中具有重要潜力。

2025-06-22 12:41:31 448

原创 Science Advances:皮肤附着触觉贴片,实现多功能和增强的触觉交互

摘要:研究人员开发了一种基于平锥介电弹性体致动器(FCDEA)阵列的新型可穿戴触觉贴片,可实现沉浸式虚拟/增强现实体验。这种薄(1.1mm)、柔软的设备能在宽频带(0.1-280Hz)产生大力度(最高2.2N)和位移(849μm)的触觉反馈,远超人类感知阈值。集成显微传感器阵列后,贴片支持双向无线触觉通信,能再现3D结构拓扑和虚拟物体纹理。该技术解决了现有触觉界面输出力不足、与皮肤共形接触困难等问题,为VR/AR应用、远程触觉交互等领域提供了创新解决方案。研究成果发表于《Science Advances》。

2025-06-21 12:19:19 390

原创 香港中文大学任洪亮/胡国华教授最新Adv. Robotics Res. | 具身触觉智能的气球机器人

为了解决这一问题,我们提出了一种创新的设计策略,通过优化柔性传感器的几何形状和布局,增强软气球系统的接触感知能力。这些进展为未来柔性传感器的设计提供了新的视角,助力开发安全、用户友好的交互式机器人。(c)将墨水转移到设计好的耐热模具中,热固化墨水,然后脱模柔性传感器将柔性传感器安装到弹性可变形表面上时的两种拉伸布局类型条形和欧米茄形传感器在气球充气过程中的三个平面、半球和半球拉伸阶段的示意图图 (a)和(b)描述了由天然橡胶、丁腈橡胶和乳胶三种不同材料制成的气球型机器人的输出性能特征示意图。

2025-06-20 08:53:28 838 3

原创 Science Robotics期刊论文:腿式机械臂学习羽毛球技能

摘要:苏黎世联邦理工学院研究团队开发了一套基于强化学习的控制系统,使腿式移动机械臂(ANYmal-D+DynaArm)能够自主进行羽毛球运动。该系统通过非对称Actor-Critic架构,在仅使用单目视觉(60Hz)的条件下,实现了最高12.06m/s的挥拍速度和平均0.654秒的反应时间,中心区域击球成功率高达98.7%。研究突破了传统机器人控制方法的局限,展现了自发战术行为(如自动回位)和自适应步态调整能力。尽管存在高弧线球处理(成功率<65%)和光照敏感等局限,该技术为动态环境下的机器人控制提供

2025-06-19 08:45:10 591

原创 浙大控制学院熊蓉团队在IJRR上发表最新研究成果

浙江大学熊蓉教授团队在连续体机器人控制领域取得重要突破,提出驱动器空间最优路径跟踪框架。该研究针对连续体机器人运动学建模困难、规划算法不完善等问题,开发了高效逆运动学求解器和驱动空间轨迹规划器,实现了执行距离和时间分配双优化。实验表明,新方法将求解效率提升80%,跟踪误差降低50-80%。研究成果发表于机器人领域顶刊IJRR,为连续体机器人在医疗、抓取等场景的应用提供了更安全高效的控制方案。

2025-06-18 10:34:29 644

原创 TRO 2025 | 伦敦国王学院罗山教授团队发布触觉操作机器人RoTipBot:机器人也能翻书!

伦敦国王学院罗山团队联合北京理工大学与莫纳什大学,研发了全球首个基于可旋转触觉传感器的机器人平台RoTipBot,实现了多层薄柔物体的智能计数与高效抓取。该研究针对薄柔物体易弯曲、叠层难检测等挑战,创新设计了全向感知结合主动旋转的RoTip传感器,通过双指同步滚动将多层物体卷入指间,成功率超越现有方法3倍,并在300人公开演示中验证了可靠性。论文发表于IEEE TRO期刊,通讯作者罗山教授是触觉机器人领域国际权威,第一作者江佳齐现为北京理工大学助理教授,团队招生博士后与研究生。

2025-06-17 08:58:20 353

原创 IEEE TRO 刚柔耦合结构 + 捏吸混合机制,赋能多模态抓手实现通用性抓取

机器人抓手的通用性抓取能力研究取得新突破。中山大学与华中科技大学团队研发的混合多模式抓手(HMG)通过融合捏-吸混合抓取机制与刚-柔耦合结构,实现了对0.2g羽毛至10kg哑铃、0.46mm茶叶至0.55m瑜伽球的广泛抓取范围。该抓手具备四种操作模式,能适应易碎物品、不规则形状物体及动态环境,并展示了在水下作业、流水线操作等场景的应用潜力。相关成果发表于机器人领域顶刊IEEE Transactions on Robotics,为高性能机器人抓手设计提供了新思路。

2025-06-16 06:04:06 867

原创 Science 正刊:脊髓损伤患者的复杂触觉离现实又近了一步

脊髓损伤患者迈向复杂触觉感知新突破。《科学》杂志最新研究显示,美国皮质仿生学研究团队通过大脑植入电极的微刺激技术,首次实现让瘫痪患者用仿生手感知物体的边缘、形状和运动。该技术结合脑机接口(BCI),使参与者不仅能控制仿生肢体,还能获得接近自然手的触觉反馈,显著提升操作精度。研究负责人Giacomo Valle指出,这种高维度触觉体验是迈向灵巧操控的关键突破。虽然现有技术仍需改进传感器和刺激系统,但该成果为神经义肢发展开辟了新方向。该研究部分系统正由美国公司商业化开发,同时欧洲也正筹建相关研究中心。

2025-06-15 12:26:53 558

原创 Nature Machine Intelligence 北京通研院朱松纯团队开发视触觉传感仿人灵巧手,实现类人自适应抓取

朱松纯教授团队研发的F-TAC Hand仿生机械手取得突破性进展。该机械手通过创新性设计实现了70%表面积的高分辨率触觉覆盖(0.1毫米空间分辨率),集成了17个基于视觉的触觉传感器。研究采用生成算法模拟人类手部动作,结合触觉反馈实现精准抓取控制。600次实验验证其在动态环境中明显优于传统方案(P<0.0001)。该成果发表于Nature Machine Intelligence,为具身智能发展提供了新思路,展现了触觉反馈在机器人智能中的关键作用。

2025-06-14 20:51:49 456

原创 斯坦福大学和哥伦比亚大学联合开发的以人手为灵巧操作通用接口的突破性研究——DexUMI

《DexUMI:以人手为通用接口实现灵巧操作》研究摘要 斯坦福大学等机构联合开发的DexUMI框架实现了机器人从人类手部动作中学习复杂操作技能的突破。该研究通过硬件(可定制手部外骨骼)和软件(视觉适配管道)双重适配,有效缩小了人类与机器人手之间的动作差异。实验证明,在6自由度和12自由度机械手上,该方法数据收集效率达传统远程操作的3.2倍,平均任务成功率86%,尤其擅长多指接触的复杂操作。DexUMI为机器人灵巧操作提供了一种高效、可扩展的学习框架,开辟了超越传统远程操作的新途径。

2025-06-13 09:19:10 367

原创 港中文最新!FiS:突破机器人操控瓶颈,让机器人兼具快速执行与深度推理能力

摘要:***中文大学、北京大学等机构联合提出Fast-in-Slow(FiS)双系统机器人控制模型,创新性地将高频执行系统(System 1)嵌入慢速推理系统(System 2)中。该模型基于视觉语言模型(VLM)构建,System 2负责语义推理(1/4频率),System 1复用其参数实现117.7Hz的高频动作生成。通过异步协同机制和扩散模型训练,FiS在RLBench测试中成功率提升8-14%,控制频率达21.9Hz,并在真实机器人任务中展现优异的泛化能力。这一突破解决了机器人操控中速度与精度的平衡

2025-06-12 09:16:37 586

原创 IEEE TRO 普渡大学--未知杂乱环境中的机器人主动神经传感与规划

我们的框架主动从给定的视点收集视觉RGBD观察结果,将其注册到场景表示中,并从其部分观察结果中推断出未知的物体形状,以避免在场景重建过程中机器人与给定环境的不必要交互。6) 一个统一的快速主动传感框架,结合了视点生成和机器人控制方法,用于场景构建,其结果在复杂的模拟和现实世界的橱柜式环境中使用带有手持RGBD相机的6自由度机械手进行了演示。1)基于3DCNN的评分函数,该函数基于过去的观察和视点候选进行场景表示,以预测可能的场景覆盖范围,从而指导视点规划,防止与给定环境的不必要的机器人交互。

2025-06-11 09:11:42 750

原创 Information Fusion期刊发表:Touch100k用语言解锁触觉感知新维度

基于视觉的触觉传感数据通常以触觉图像和视觉图像的形式呈现,相关研究主要聚焦于触觉与视觉模态的融合,而对语言模态的探索往往仅限于为传感数据附加类别标签。北京交通大学计算机学院联合北京邮电大学人工智能学院方斌教授团队、腾讯微信AI团队发布了首个大规模触觉、多粒度语言、视觉三模态数据集Touch100k,并提出TLV-Link预训练方法,为材料属性识别和抓取预测任务提供了高效的触觉表示能力,特别是在零样本触觉理解方面取得显著进展,为触觉领域注入了新的活力。图 3 触觉表征的多模态联合学习方法TLV-Link。

2025-06-10 08:43:21 944

原创 RSS 2025|从说明书学习复杂机器人操作任务:NUS邵林团队提出全新机器人装配技能学习框架Manual2Skill

我们在 102 本真实宜家家具说明书上测试了我们提出的层级化装配图生成方法的表现,可以看出,对于简单和中等复杂程度的家具(部件数 ≤ 6),我们的方法能比较准确地生成装配图,同时在所有复杂程度的家具上,我们的方法表现均显著优于基线方法。位姿回归器(R):从融合特征预测各部件的 SE(3) 位姿。与过往方法通常一次预测整个装配过程中所有零件的位姿不同,这里我们对每个装配步骤,预测这一步中涉及到的所有部件/子组件的位姿,这一设置既更贴合真实世界中的拼装过程,也能使模型避免单次输入部件数量过多引起的性能下降。

2025-06-09 09:15:02 1142

原创 Science Robotics:UCLA 贺曦敏团队综述自主软体机器人

这些策略展示了在不依赖复杂电子控制的条件下,通过材料-结构-环境的耦合设计实现类生命体的持续运动能力。此外,文章进一步总结了基于 API实现的自持续运动在多种环境中的表现形式,包括陆地运动(如行走、爬行、翻转、滚动、跳跃)水中运动(如波动、振荡、漂浮、脉动)、潜在的空中运动(如拍翼旋转、飘浮)、以及多环境下多模态运动。作者还指出,为实现真正的系统级自主软体机器人,未来需重点发展若干关键方向,包括:扩大尺寸以突破微型尺寸的限制、能量获取与利用、群体行为、多功能集成,以及建模与仿真。

2025-06-06 16:26:16 1255

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除