李·鲁(Li Rui):通过视觉触摸和Hand-Ojo协作平台

日期:2025-08-09 11:34 浏览:

2025年世界机器人会议于8月8日至12日在北京经济技术发展区开幕。 以下是演讲的转录。 您好,亲爱的领导者和客人!我是上海Weiti Technology Co.,Ltd的创始人兼首席执行官Li Rui。 想象一下,有一天,机器人可以在家中进入许多场景和生产。例如,在家庭场景中,机器人可以帮助您完成家庭任务,例如洗衣服,烹饪和清洁地板。例如,在工厂生产线中,机器人生产各种产品以实现类似于人类的操作。为了实现这些操作,可以用四个词来总结基础基础:“思维和熟练”。头脑代表着一个聪明的大脑。可以将几种大型模型推广到提供智能大脑的机器人,这提供了更多的可能性。这是快速发展的STAGE。 Guapas技能也是非常中心的联系。一方面,我们需要更多的自由,但最重要的是,我们需要能够接触反馈的能力。触摸是一个非常中心的链接,它允许人类和机器人识别环境并执行封闭的操作循环。当我们谈论化身智力时,为什么要谈论化身的身体?因为我们需要与现实世界和双手互动。您的手的重要部分是触摸。 您可以得到什么样的触摸信息?一方面,您可以获得对象本身的属性,例如纹理,大小,形状,柔软度,硬度和表面重量。另一方面,他正在联系。有关与该对象交互期间产生的力的一些信息,例如正常力,力量性,相对幻灯片和对象的对象。 如果人们执行超过90%或超过95%的业务,则需要在同一Tim上团结双手和眼睛E合作。调节手和眼睛的调整。在这里,触摸与视觉之间的关系是互补和必不可少的。一方面,触摸是视觉的扩展。另一方面,可以实现更复杂的闭路电路,但是可以使用视觉信息。重新释放并获得真实的时间评论。触摸本身也是我国35个“瓶颈”技术之一。 当前,有几种触觉技术路线,例如阻力,电容,房间效果和视觉触觉感觉。其中,视觉触动是更加注重学术界的流行领导,也是行业中最先进的触觉实验路线。全球主要大学和研究机构进行了与外国麻省理工学院,斯坦福大学,CMU,伯克利,廷格亚大学,北京大学,北京大学,上海北海大学和中国科学技术大学有关的研究基础案件。《科学》杂志2024机器人子问题的封面的照片实际上是一种视觉触摸。十多年前,当我在美国麻省理工学院的一所大学的博士学位学习时,我与主管一起开始了这条技术路线。同时,我是第一个创建世界上第一个具有超越人类手指的视觉触觉传感器的人。当时,它被称为Gelsish手指Punta的传感器,还发表了一系列基本文章。 时间飞逝,现在这条技术路线已成为学术界研究最广泛的技术路线。从2009年到2024年,视觉触摸开发经历了三个阶段。 第一阶段是茶点开始周刊 第二阶段是发展期。 第三阶段是发生的时期。 2024年,我正式创立了Weititanium机器人,从学术到工业阶段完成了该技术,这使营销和I在更多情况下,将其更快地摄入。 迄今为止,我们的实验室已在全球IA会议上发表了70多种相关文章。这包括最佳角色的五个以上奖项和十年以上的共同alleggi Howe。世界人工智能大会的最后两个星期介绍了与视觉触摸和手工合作以及进行的产品展览有关的作品。总理给出了宝贵的方向,并鼓励将产品和智慧的应用到数千个行业中。 为什么视觉触摸如此受欢迎?实际上,它与其属性和收益密切相关。 10年前,2014年可以实现多少视觉触动?我可以给你简短的介绍。这是世界上第一个视觉触觉传感器,其分辨率超过了人类手指的分辨率,被称为Gelsh手指的传感器。右侧是正常功率信息。这个亮度repre刻有压力的大小,分辨率可以从10微米或微米中有所不同,这代表可以呈现多维力信息的信息。我的手指转动并按下它。对于我们来说,收集鸡蛋超过十年相对容易。您不仅可以收集鸡蛋,而且可以抓住罐头,炸薯条,草莓甚至树叶,并且可以水平切下叶子。更重要的是,在执行操作时,它不会显示要使用的力量,而是取决于传感器本身以适应。这就像人类有许多手术时,例如能够接受各种养育,玩具,乐高的能力。 这项技术比其他触觉技术路线具有许多优势,例如传统的矩阵电阻器,电容器和Hall效果的触觉传感器。可以在四个方面进行总结: 首先,它是第一个具有很高分辨率的触摸传感器,并且可以超越人的手指。而传统的触摸传感器每平方厘米只有几十或数十个触觉信息点,视觉触觉传感器可以达到数万或数十万个点。 其次,当它测量多维力时,当它说出压力和触摸时,实际上会有很大的差异。压力通常是指特定方向的力,但触摸是多维信息力,实际上,当机器人和人类进行许多操作时,只有正常力,切向力,DSLIDING的信息等。它们通常比正常力具有更大的切向强度。正常力垂直于物体表面,而切向力是与接触表面的平行力。例如,摩擦或滑动力并不意味着当一个人摄入一瓶水时,您应该使用一两头公牛的力量来提前收集一瓶水。相反,他持有它,切向力或成熟在实际蒂姆e通过认识到摩擦和适应法官。因此,在这里,切向力非常重要。 第三个方面是它可以操纵柔软的物体,例如衣服,电缆,鞋子等。 第四,它不容易受到环境的影响,例如温度,湿度或电磁场。 这是调查结果的一部分,可以适应各种不同的事物。当GoingBeyond时,它不仅可以理解它,还可以执行复杂的闭路控制操作。例如,当它连接USB以断开连接时,实际上人们很难将其连接和断开连接,它仅取决于其视觉能力。当人们这样做时,他们的眼睛通常会突然看着USB孔。下一步是在用手触摸它时带来循环控制。人的手可以感觉到它是否已被插入。如果没有,请进行一些调整。 那时,我们实现了手工使用视觉触觉传感器与外部视觉结合使用,我们进行了这样的插头操作。实际上,它也可以应用于许多不同的领域。许多闭路控件需要同时调整手和眼睛之间的调整。眼睛通常或多或少地放置,触摸是一个更精致和闭合的电路。可以说,触摸是最后一个厘米的人类或机器人操纵。 我们的视觉触摸不仅可以做出以前的操纵,而且可以进行物质识别。按下不同的物体,不同的面料等以识别材料。当然,我们需要做的不仅是视觉触摸,而且仅仅是一个fulcro。通过视觉接触和眼睛协作平台,我们希望创建真正聪明和人类的智能机器人。它分为三个阶段。 在第一阶段,视觉触摸和触觉手被用作入口点。 在第二阶段,您可以将机器人臂结合起来以实现垂直场景局域网丁。 第三阶段是结合大型模型以实现更广泛的操作。 这是视觉触摸传感器的两个手指,在25 x 25毫米的区域内具有近60,000个触觉感觉。它可以达到报告要点。我们产品的扩展结合了触觉下巴和智能触觉与机器人臂,该机器人可以在几种情况下在几种情况下实施当前的合作武器。无需等到通用人形机器人的成熟手臂和手的手臂,这些机会已经可以实现土地。 让我们看一下效果屏幕。您可以转动并按两个手指版本以验证整个力场的分布。当将其压在表面上时,整个反应是非常真实的和多维的。这是另一个视频可视化函数,它使其具有更完整的视图。 第一个视觉触觉传感器表明它们固定了非常锋利的针并将地球推动。这是一个Y具有挑战性的任务。传感器可以感觉到非常温和的力,超灵敏的切向力,并且不会推动地球。 这表明了高分辨率特征,同时允许自适应跟踪。几个任务包括纸碗,锅和鹌鹑蛋。可以使设置变得完美和自适应。这里不需要在这里使用很高的精度摄像头,但它只是一个近似位置的位置,具有低精度的外部腔室。您也可以连接USB。您也可以自己调整位置。 同时,握住水杯时,可以根据水量自动调整夹紧力。我看到的两个指尖是两个指尖,有五个指尖。目前正在内部测试。今天,我会给你一个示范。这与商业手一起使用。例如,气球可以提供基于武力的评论。这是一个生鸡蛋,薯条实际上比鸡蛋更困难。我们公司买了很多F雷,不是为了自己,而是为机器人。有些叶子也表现出极其敏感的力,甚至可以认为伯德与叶子略微接触,从而感知到多维力。即使柔软柔软的豆腐也可以适应。 这是一杯非常普通的透明水。五个指尖比两个指尖小得多,并且与人的手大致相同。可以对许多制造商的合格手进行调整,但在各个方面的一般绩效都非常相似。这适用于哪种情况?我们正在谈论熟练的操纵。为什么机器人现在不能这样做?在工厂中,有许多机器人手臂实际上正在重复多个轨迹。一旦更改操作的任务或环境,就无法立即对其进行调整。实际上,这是每个人都想实现灵活生产的问题,但现在尚未实现。结合视觉触摸算法和H和协作,使您可以在许多方案中实现和了解混乱的适应能力,了解所有内容,了解选择,分类,加载,下载方案等等。 您不仅可以抓住它,而且还可以准确地放置。例如,孩子们可以拿一块乐高积木,然后将其精确地放在另一个乐高积木中。这是确切的位置。它还包括插件,汇编,加载和下载等应用程序。同时,它非常适合操纵柔性物体,例如服装,鞋子,电缆,食物等。 它们还与许多重要的制造客户建立了详细的合作,并创建需要输入触觉信息的数据集。实际上,当人们谈论VLA大型模型时,缺乏非常重要的模式正在移动。如果这个机器人想与世界互动,那么触摸绝对是密不可分的。我们目前正在创建一个VTLA大型模型并结合了此t(t与他一起表演。这使机器人可以执行更常见,更常见和更成功的操作。 我们的历史股东拥有来自行业和上部的许多资金,如果您对微信的官方帐户感兴趣,可以遵循。相关信息将定期发布。谢谢大家! 官方NINA Finance帐户 24-最新信息和财务视频的流离失所,以及扫描QR码以关注更多粉丝(Sinafinance)

0
首页
电话
短信
联系