叠衣服、收拾家务……这些看似简朴的一样平常使命,对于呆板人而言倒是巨年夜的技能挑战。怎样让呆板人快速学会叠衣服?广及通具身智能开发平台Fibot以坚实的硬件基础、高效易上手的开发框架及精准的算法能力,仅需3小时即教会呆板人这项本事。
多模态感知到计谋进修:快速实现家务节制 Fibot基在多模态感知与流匹配(Flow Matching)计谋进修的家务场景节制框架。以叠衣服为例,Fibot畴前、左腕、右腕等3个要害视角收罗图象,并提取高维视觉特性。同时,语言指令(如 “fold shirt”)作为文本模态输入至视觉语言模子(VLM),与视觉特性举行跨模态交融,构建使命语义与场景几何的接洽。交融后的多模态输入至基在 Flow Matching 的节制模子,从而实现更不变、更可控的动作天生,驱念头器人履行邃密的双腕折衣计谋。整个体系使用视觉、文本等多模态感知,实现了语义理解—动态轨迹天生的端到端呆板人节制流程。 开发效率:从“一键部署”到高效练习的革命 广及通经由过程技能立异,极年夜降低了具身智能的开发门坎。Fibot具有完美、友爱的采训推代码,撑持一键部署,开发者只需一行指令便可实现数据收罗、练习及推理的全流程,无需繁杂情况配置及底层调试。 Fibot构建的 “示教-复现”数据闭环,使其可以或许高乐成率实现繁杂使命。这一机制答应呆板人经由过程模拟进修快速把握操作技术,缩短了从演示到现实履行的路径,为繁杂场景下的使命履行奠基了基础。 精准迁徙:从云端到真机的无缝跟尾 算法从云端到真机情况的迁徙,一直是呆板人范畴的难点。Fibot经由过程底层通讯与节制硬件的深度优化,实现了这一历程的精准、不变过渡。Fibot还有集成为了多种深度进修AI算法,联合高效的感知体系与智能决议计划框架。这套体系保障了全向挪动不变性,RTOS低时延相应支撑精准操作节制,并依托端侧AI算力实现当地化模子推理。从而构建了感知-挪动-操作-算力一体化的硬件底座。 实战验证:繁杂使命场景的高效冲破 于现实家务场景中,Fibot揭示了惊人的进修效率。以叠衣服为例,Fibot只需要3个小时的数据举行微调,就能到达使人满足的效果。这类高效进修能力源在框架的优化及算法的立异。同时,Fibot还有具有自立纠错和顺应差别情况光芒的能力,使其可以或许于动态变化的真实情况中不变事情,再也不局限在精心节制的试验室前提。 将来,Fibot将运用在具身智能企业研发、高校科研、开发者调测等场景,帮忙客户高效构建与验证端到端模拟进修算法,并收罗模拟动作数据集。跟着Fibot于具身智能范畴的不停深耕,广及通正连续鞭策智能呆板人于繁杂实际情况中进修及履行使命的能力界限。 广及通始创在1999年,是中国首家A+H股上市的无线通讯模组企业(300638.SZ|0638.HK)。广及通以无线通讯与人工智能为技能底座,提供软硬件一体、赋能行业运用的全栈式解决方案,加快千行百业从“万物互联”到“万物智联”。广及通全栈式解决方案笼罩蜂窝通讯、AI、车载、GNSS模组和AI东西链,撑持行业端侧及主流年夜模子接入,提供智能体、全世界资费与云办事,助力智能呆板人、消费电子、低空经济、智能驾驶、聪明零售和聪明能源等行业数智化进级。原文标题:广及通Fibot怎样3小时教会双臂呆板人叠衣服?
文章来由:【微旌旗灯号:Fibocom,微信公家号:广及通FIBOCOM】接待添加存眷!文章转载请注明来由。
具身智能年夜算力开发平台S600重磅表态,地瓜呆板人引领端云一体呆板人进化新范式 ,公布全链路开发基础举措措施全新进级,前瞻揭晓具身智能呆板人年夜算力开发 发表在 11-21 22:21 •1161次浏览 广及通斩获具身智能家务呆板人黑客松竞赛二等奖 近日,广及通受邀到场由 Hugging Face、NVIDIA 与 Seeed Studio 结合举办的“具身智能家务呆板人黑客松”竞赛。于



