越疆机器人+ ChatGPT会碰撞出什么火花?

2023-06-07142工业机器人

ChatGPT 无疑是今年最出圈的科技热点,和之前我们认知中的 AI 不太一样,它拥有更为强大的语言理解和文本生成能力,更能“听懂”人话,做到与真正人类几乎无异的交流,甚至可以写论文、脚本、代码。如此强大的人工智能,只让它活在屏幕里未免有点大材小用,机器人大讲堂获悉,近日,越疆工程师们在一番研究后,将 ChatGPT 与越疆协作机器人结合,在物理世界做出了应用实践。

 

机器人调酒师


在越疆机器人调酒项目中,工程师们将 ChatGPT 巧妙融入其中,一下让冷冰冰的机器人,成为了一名懂酒懂心的优秀调酒师。


越疆前期对 ChatGPT 进行了训练,详细告知它应该扮演的角色(调酒师),各式鸡尾酒的配方、口感等内容。


经过训练后,机器人调酒师变得可靠又贴心,拥有更多自主判断能力。比如顾客提出不合理要求,故意要求在长岛冰茶鸡尾酒中放茶时,ChatGPT 会反馈长岛冰茶里并没有茶,其实是各种烈酒和可口可乐混合而成。

 


当顾客没有明确的酒类需求,只提出推荐一杯能让心情好起来的鸡尾酒时,ChatGPT 则会根据对话者的当下情绪状况自行分析判断,推荐【蓝色夏威夷】鸡尾酒,理由是酸酸甜甜的口感,有助于恢复心情。


当顾客表示口味比较酸,却没有提任何要求时,ChatGPT 会根据语境推测对话者需求是进行口味调节,并且知道用现有材料椰奶来中和酸味,而普通 AI 大概率会因为这种模糊需求不知所措,发出”我不明白您在说什么“的感叹。


更重要的是,在被授予越疆协作机器人控制接口信息后,ChatGPT 会根据不同鸡尾酒的特点,为机器人生成摇酒轨迹和代码。


然后机器人调酒师就能帅气地制作各式各样的鸡尾酒。


调试机器人需要不低的技术门槛,以往工程师需要输入大量代码来引导机器人运作,操控不同的机器人可能还会涉及不同的编程语言。而在 ChatGPT 的帮助下,工程师可以直接用口语描述想做什么,由 ChatGPT 自动编译成机器语言,充分调动机器人的手、眼、脑指挥机器人行动。


智能物品分拣


简单的抓取和任务步骤描述自然难不倒机器人和 ChatGPT,为了提升难度,我们要求它在各式物品中抓取一斤橘子,这时 ChatGPT 会多线并行,自动完成水果识别、水果抓取、重量计算等一系列工作并完成任务。


当要求它对桌面物品进行分类时,无需告知细节和步骤,ChatGPT 会自行借助相机识别桌面物品,并自动做出类别判断,完成分类任务,相比以往依靠人工标注分类的机器人而言,运作更为聪明。

 


从两个方案实践的情况来看,ChatGPT 确实能通过理解和学习人类的语言,结合实际来进行互动,还能快速生成符合不同场景的机器人代码,匹配用户需求,大大减少了开发时间和成本。


从技术层面分析,ChatGPT 大模型学习人类先验知识,融入各类物理感知,以协作机器人为载体,增强了人机交互、人机协作的体验感,让机器人更加智能化、人性化。在此基础上,越疆形成了自己的机器人大规模模型技术框架。


总体技术框架:人类通过自然语言交互下达任务指令,通过语音识别技术转换为文本输入给ChatGPT,ChatGPT 大规模语言模型根据从海量数据中学习的大量人类先验知识(包括语言类知识和世界知识等),以及前期 Prompt 指令的微调训练后(使得 ChatGPT 更有效适应下游任务),理解人类任务指示,可融合视觉、力觉等物理感知信息,做出最终任务决策,并控制机器人执行完成指定任务。
 

 

 

获取更多机器人行业资讯,敬请关注机器人大讲堂官网:https://www.leaderobot.com/

 

更多精彩

*新品在即!这家正向开发L4级自动驾驶的企业,将展示最新成果

*普渡科技再获C4轮融资,1个季度融2轮,服务机器人赛道成2023年顶牛?

*稳准狠! 斯坦福无人机空中捕猎,12毫秒精准捕获,猎鹰附身一抓一个准

*业界首款全向超广角4D激光雷达来了!

*南航等高校团队研发新型壁虎机器人中枢神经控制策略

*劳动的机器人,该交税了吗?

*尺寸不到一毫米!西北工业大学开发运动速度超快的无线微型机器人

*像鸭子一样的高尔夫机器人球童,正展现出移动机器人的新可能?

*河北发展机器人产业,这次决心有点大

*手也太巧了!腾讯首次展示自研灵巧手与机械臂,可像人手一样灵活操作

*走向半室外,VSLAM助力服务机器人再进化

*北理工团队用机器学习分析大鼠在跑步机上“遮目”双足行走

*国产自研,首个髋膝一体机器人获批亮相,机器人技术本土化再度注入新动能

*IP68防尘防水,性能“狂飙”,协作机器人筑牢制造业守护“结界”

*爆发前夕 | 工人缺失与老龄化正在倒逼环卫行业走向无人化

*重磅!高动态仿人机器人又添一员猛将,关键技术取得重大突破!

*AI“入侵”CG?制作全流程一键搞定,随时随地生成高品质吸睛大片

*效率更高、更安全可靠?大负载为何成为协作机器人必争之路?

*“神”回复!ChatGPT“化身”佛祖解答尘世烦恼

*一场属于机器鱼的“奇幻漂流”,可在细小血管中“逆流而上”!