当越疆机器人+ ChatGPT,会碰撞出什么火花?

#公司新闻 · 2023-06-14

ChatGPT 无疑是今年最出圈的科技热点,和之前我们认知中的 AI 不太一样,它拥有更为强大的语言理解和文本生成能力,更能“听懂”人话,做到与真正人类几乎无异的交流,甚至可以写论文、脚本、代码。如此强大的人工智能,只让它活在屏幕里未免有点大材小用,所以越疆工程师们在一番研究后,将 ChatGPT 与越疆协作机器人结合,在物理世界做出了应用实践。

 

 

机器人调酒师

 

一名优秀的调酒师应该具备什么样的特质?出色的调酒技能只是基础,他还应该善于沟通,在适当的时候给予客人一定的心灵慰藉。在越疆机器人调酒项目中,工程师们将 ChatGPT 巧妙融入其中,一下让冷冰冰的机器人,成为了一名懂酒懂心的优秀调酒师。

 

 

我们前期对 ChatGPT 进行了训练,详细告知它应该扮演的角色(调酒师),各式鸡尾酒的配方、口感等内容。

 

经过训练后,机器人调酒师变得可靠又贴心,拥有更多自主判断能力。比如顾客提出不合理要求,故意要求在长岛冰茶鸡尾酒中放茶时,ChatGPT 会反馈长岛冰茶里并没有茶,其实是各种烈酒和可口可乐混合而成。

 

 

当顾客没有明确的酒类需求,只提出推荐一杯能让心情好起来的鸡尾酒时,ChatGPT 则会根据对话者的当下情绪状况自行分析判断,推荐【蓝色夏威夷】鸡尾酒,理由是酸酸甜甜的口感,有助于恢复心情。

 

当顾客表示口味比较酸,却没有提任何要求时,ChatGPT 会根据语境推测对话者需求是进行口味调节,并且知道用现有材料椰奶来中和酸味,而普通 AI 大概率会因为这种模糊需求不知所措,发出”我不明白您在说什么“的感叹。

 

更重要的是,在被授予越疆协作机器人控制接口信息后,ChatGPT 会根据不同鸡尾酒的特点,为机器人生成摇酒轨迹和代码。然后机器人调酒师就能帅气地制作各式各样的鸡尾酒。

 

 

智能物品分拣

 

调试机器人需要不低的技术门槛,以往工程师需要输入大量代码来引导机器人运作,操控不同的机器人可能还会涉及不同的编程语言。而在 ChatGPT 的帮助下,工程师可以直接用口语描述想做什么,由 ChatGPT 自动编译成机器语言,充分调动机器人的手、眼、脑指挥机器人行动。

 

 

简单的抓取和任务步骤描述自然难不倒机器人和 ChatGPT,为了提升难度,我们要求它在各式物品中抓取一斤橘子,这时 ChatGPT 会多线并行,自动完成水果识别、水果抓取、重量计算等一系列工作并完成任务。

 

 

当要求它对桌面物品进行分类时,无需告知细节和步骤,ChatGPT 会自行借助相机识别桌面物品,并自动做出类别判断,完成分类任务,相比以往依靠人工标注分类的机器人而言,运作更为聪明。

 

从两个方案实践的情况来看,ChatGPT 确实能通过理解和学习人类的语言,结合实际来进行互动,还能快速生成符合不同场景的机器人代码,匹配用户需求,大大减少了开发时间和成本。

 

从技术层面分析,ChatGPT 大模型学习人类先验知识,融入各类物理感知,以协作机器人为载体,增强了人机交互、人机协作的体验感,让机器人更加智能化、人性化。在此基础上,越疆形成了自己的机器人大规模模型技术框架。

 

 

总体技术框架:人类通过自然语言交互下达任务指令,通过语音识别技术转换为文本输入给 ChatGPT,ChatGPT 大规模语言模型根据从海量数据中学习的大量人类先验知识(包括语言类知识和世界知识等),以及前期 Prompt 指令的微调训练后(使得 ChatGPT 更有效适应下游任务),理解人类任务指示,可融合视觉、力觉等物理感知信息,做出最终任务决策,并控制机器人执行完成指定任务。

 

未来,越疆将在“AI+机器人”领域不断创新突破,与更多前沿技术融合碰撞,让协作机器人真正具有自主感知、智能决策、精细操作等特性,并推动大规模模型在机器人先进制造和商业服务业的落地应用。

越疆机器人期待与你携手共赢

申请代理合作

400-800-7266

免费样机申请

首页

返回顶部

样机申请

我们提供免费机器人试用,如果您想体验越疆协作机器人,请填写以下信息,我们将第一时间与您联系!您也可以致电400-800-7266联系客服申请样机。

联系信息

申请产品

虚拟控制器申请

我们提供免费机器人云端虚拟控制器试用申请,填写下述信息,我们将为您发放12小时的使用许可。

联系信息

申请产品

文件发送

我们已经将文件发送到你的邮箱,请查收

加入 Dobot+ 生态圈,与上下游生态伙伴深度合作

诚邀您加入生态合作,共同在硬件+软件上,兼容适配、整体方案上相互配合,打造用户所需的产业生态。请如实填写以下信息,我们将第一时间与您联系!您也可以致电400 800 7266联系客服进行生态合作。

联系信息

留言