AI大模型为工业机器人注入“灵魂”

小鱼儿 2024-05-05 22:14 157阅读 0赞

![60a17196f6999387da63b523e80a56e9.jpeg][]

**编者按**：以大模型为代表的人工智能引发的新一轮科技革命和产业变革正向纵深发展，千行百业将面临巨大的机遇和颠覆性的挑战。在工业领域，人工智能是推进新型工业化的关键变量，工业大模型的落地生根将为制造企业探索新型工业化提供全新路径。中国电子报开设“人工智能赋能新型工业化”专栏，走进一线、走进工厂、走进企业，全方位报道以大模型为代表的人工智能技术在工业领域的生动实践。

工人师傅在屏幕上轻轻一点，工业机器人便被注入了“灵魂”，开始自动搬运货物。在短短几分钟内，一堆杂乱无序的货箱就被摆放至合理的位置，组合出特定的“垛型”。  
4月10日，《中国电子报》记者走进广东拓斯达科技股份有限公司（以下简称“拓斯达”）。在这里，被誉为“制造业明珠”的工业机器人正借助AI大模型完成新一轮蝶变。

**码垛在三步之内即可完成**

对大多数工业搬运场景而言，码垛是一个避不开、绕不过的难题。想象中的码垛只是将货物整齐放置在一个空托盘上方便后续搬运即可，然而通过此次采访，记者才了解到这个看似简单的工序背后还有那么多“门道儿”。

“码垛其实是一项非常复杂的任务，它有点儿类似于拼乐高，内核是结构工程相关的科学知识。”拓斯达总工程师张晓辉对记者说道。常见的垛型有上千种，在堆叠过程中不仅要考虑到货箱的重量、体积、尺寸、形状等特征，还要根据货箱内的物品类型判断其易破损程度、承压极限，甚至是保鲜期长短等信息，同时还要考虑每一个货箱放置的位置对整体垛型结构稳定性、安全性的影响，这需要更多的设计思维和技术能力。

现在有了AI大模型，这项工作只需要三步即可完成：首先是行业专家创建场景描述、SOP工艺流程、机器人API文档及参考代码等场景知识库，让大模型可以自动获取对应场景的知识；随后工作人员通过自然语言提出任务需求，大模型自动生成执行代码，只需微调即可使用；最后现场的工人师傅只需要点击“开始启动”按键，大模型就能自动计算出不同货箱的位置，工业机器人即可自动完成码垛。

![3eab84d4e351e77af06eb3b1661a84ce.png][]

拓斯达机器人常规测试区

据拓斯达首席技术专家陈金民介绍，以前在工业机器人使用过程中，数据散布在各个环节，机器人在物理世界中的状态和运动轨迹的改变需要产线工人基于自己的经验去判断。现在只需要把数据导入以阿里云通义千问大模型为底座开发的专用模型之中，大模型就能对人类的意图进行分析并向工业机器人下达指令，产线工人可以通过自然语言与工业机器人实现交互，这在很大程度上也降低了工业机器人的使用门槛。

“通用大模型就像一个优秀的工作助理，它基于庞大的互联网公开数据训练，已经能解决日常场景中80%的常规问题。但具体到某一个特定的行业，比如工业机器人行业，由于数据零散分布在各个环节中，且有它独特的工艺流程，只有在垂直领域进行专门的训练，才能让AI大模型更好地去解决剩下20%的专业问题。”陈金民表示。

他认为，AI大模型的核心价值是能够让人与设备实现自然语言层面的交互。未来随着AI大模型向多模态方向进化发展，还可能实现语音、视频等层面的交互，甚至是设备与环境之间的交互，届时将打破工业机器人的应用边界，让其走进更多的工业场景。

**工程师不用再为机器人编程“头疼”**

走进拓斯达连平生产基地，一排排形态各异、功能多样的工业机器人正在忙碌着，它们或在模拟组装零件、或在模拟棋盘对弈、或在模拟分拣货物，灵活的动作彰显着科技的力量。据拓斯达机器人工程师曾逸介绍，这些工业机器人在生产完成后，还需经过通电测试、振动测试、系统设定、原点校准等多项测试与检验，才能正式走上产线。

![1ee4eae6738c2a280c1ca68cb7d62f63.png][]

工程师通过AI大模型驱动工业机器人执行蛋糕裱花任务

在测试区，一个正在为蛋糕模具裱花的工业机器人吸引到了记者的注意。机器人工程师在电脑桌面上的对话框中输入“蝴蝶”一词，短短30秒，AI大模型便给出了4种不同风格的设计方案，还能生成预览样图。工程师点击“确认”后，被AI大模型驱动的工业机器人便开始往蛋糕模具上裱花。

曾逸表示，这类六轴机器人原本主要应用于3C、锂电、光伏等行业，现在有了AI大模型的加持，它也有了更大的应用空间，未来将逐渐走进一些定制化、个性化需求较高的行业场景中。像在蛋糕裱花这样的应用场景中，AI大模型不只在用户交互、图案设计等方面找到了“用武之地”，还把工程师从机器人代码编写的基础型工作中“解脱”了出来，让他们得以去做价值更高的工作。

“原本工程师需要用20分钟左右的时间去写代码，还需花费大量时间和精力根据现场情况做调试，现在只需要向大模型提出代码需求，再做些简单修改，5分钟之内就能将机器人的程序调试好，既省时又省力，还能缩短工期。”曾逸感慨道。

用AI大模型来为工业机器人编程看似简单，实际上并不容易。“一开始我们不了解通用大模型的能力范围，通过一段时间的研究与实验才发现，通用大模型对行业的渗透度不够。涉及一些具体的问题，比如某款工业机器人产品的参数、工艺知识、编程要求等，其预训练数据并没有涉及这些内容，所以大模型也无法有效解决问题，后来选择了与阿里云团队合作，训练出了一个专用于我们工业机器人产品的模型。”陈金民回忆道。

AI大模型让工业机器人的使用和学习成本得到了显著降低。曾逸向记者介绍说：“以往工程师编写程序时需要一页一页地翻看技术手册、指令集和一些相关文档，现在只需要通过自然语言与大模型对话，提出自己的需求，大模型就能给出相应的答案。这让原本需要一两个小时的学习任务，现在只需要半个小时即可完成。”

陈金民认为，传统AI技术与AI大模型并非相互对立的关系，而是一种进化、演进的关系。在这一轮生成式AI浪潮之前，工业机器人行业就已经采用了大量的人工智能技术，直至当前在来料检测、故障检测、产品质检等多个环节中依然使用的是计算机视觉等传统AI技术。不过，传统AI应用只是受限于数据、算力等方面的局限性而产生的临时性的、成本相对较低的一种解决方案。未来随着AI大模型的不断进化，其将在工业生产的各个环节得到更为广泛的应用。

**AI大模型或成本土工业机器人破局关键**

据国际机器人联合会统计，中国2017—2022年工业机器人安装量年均增速达到13%。中国已然成为世界上最大的工业机器人市场。然而，与欣欣向荣的市场盛况形成鲜明对比的是，根据国家统计局数据，2022年、2023年中国规模以上企业工业机器人产量增速分别为-4.8%和-2.2%。工业机器人四大家族（瑞士ABB、德国库卡、日本发那科、日本安川电机）市场销量依然居前，企业份额占比分别为13.3%、7.4%、6.4%和6.0%。

![bed02554e50d82c6fe275cf81707888a.png][]拓斯达机器人连平生产基地

受限于成本高昂、灵活性不足、安全难保障、专业人才少等问题，本土工业机器人的应用空间尚未被完全释放。AI大模型的出现或将成为本土工业机器人破局的关键。

从曾经以10万元起家、名不见经传的一家小公司，到如今营收超过45亿元，产品及服务覆盖亚、美、欧、非等50多个国家和地区的上市企业，拓斯达的成功或许很大一部分正是取决于其对市场趋势的超前洞察和对自主创新技术破釜沉舟式的探索。

拓斯达财报数据显示，过去三年，其研发投入金额已超过4亿元，研发人员占比接近总人数的一半。目前，拓斯达正在与阿里云合作，积极探索工业机器人与AI大模型的融合应用空间。“今天，在新型工业化的时代背景下，如果本土厂商能够抓住这一轮生成式人工智能浪潮带来的机遇，就有机会在特定行业、特定领域找到弯道超车的机会。”张晓辉坦言道。

一方面，以大模型为代表的生成式AI技术将大幅提高工业机器人的自主能力和认知能力，使其能解决复杂场景的应用难题；另一方面，它将极大地降低工业机器人的使用门槛，让更多人有机会用上工业机器人，同时也将吸引更多高端人才涌入这个创新赛道，激发产业发展。此外，AI大模型的加持，还将提升本土工业机器人厂商在全球市场的核心竞争力，在产业未来发展上争夺更多话语权。

“我认为，反而是在工业场景中，AI大模型会率先落地。”张晓辉表示。对于工业企业而言，由于行业整体利润率较低，AI基础模型训练所需的算力成本、人才储备太大，要拥抱大模型光靠自己是不够的；而对于IT企业而言，它们缺乏对工业场景、工艺流程的深层次理解，很难把垂直领域的大模型做深、做实，因此双方协同合作是必然选择。

阿里研究院副院长安筱鹏同样认为，制造业应该是AI大模型应用的主战场。他指出，AI大模型是重塑全球制造业竞争格局的新起点。未来所有的智能硬件都会被AI大模型所驱动。无论是何种形态的机器人、无论是何种形态的终端，其核心竞争力就在于它是被什么样智力水平的大模型所驱动。

“大模型生成代码的价值，将远远超过生成文字、图片、视频的价值，但是这个价值被远远低估了。”安筱鹏说道，“未来，中国完全有机会依托统一的消费大市场、算力服务大市场和AI服务大市场，像当年发展移动互联网产业一样，再次实现产业的繁荣和全球领先。”

**-END-**

--------------------

##### ?AI大模型学习路线汇总? #####

大模型学习路线图，整体分为7个大的阶段：**（全套教程文末领取哈）**  
![448cfbab7a724a27bfaebe0bc5bdf791.png_pic_center][]  
**第一阶段：** 从大模型系统设计入手，讲解大模型的主要方法；

**第二阶段：** 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用；

**第三阶段：** 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统；

**第四阶段：** 大模型知识库应用开发以LangChain框架为例，构建物流行业咨询智能问答系统；

**第五阶段：** 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型；

**第六阶段：** 以SD多模态大模型为主，搭建了文生图小程序案例；

**第七阶段：** 以大模型平台应用与开发为主，通过星火大模型，文心大模型等成熟大模型构建大模型行业应用。

#### ?大模型实战案例? ####

光学理论是没用的，要学会跟着一起做，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

![在这里插入图片描述][4b0fdd83a09b4b90aab93db1c99eadb4.jpeg_pic_center]

#### ?大模型视频和PDF合集? ####

观看零基础学习书籍和视频，看书籍和视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。  
![在这里插入图片描述][fe8993b5c87b4577860ff02c0542e2b6.png_pic_center]  
![在这里插入图片描述][7977122a35ff4635a1b15565b4181435.png_pic_center]

#### ?学会后的收获：? ####

**• 基于大模型全栈工程实现**（前端、后端、产品经理、设计、数据分析等），通过这门课可获得不同能力；

**• 能够利用大模型解决相关实际项目需求：** 大数据时代，越来越多的企业和机构需要处理海量数据，利用大模型技术可以更好地处理这些数据，提高数据分析和决策的准确性。因此，掌握大模型应用开发技能，可以让程序员更好地应对实际项目需求；

• 基于大模型和企业数据AI应用开发，**实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能，** 学会Fine-tuning垂直训练大模型（数据准备、数据蒸馏、大模型部署）一站式掌握；

**• 能够完成时下热门大模型垂直领域模型训练能力，提高程序员的编码能力：** 大模型应用开发需要掌握机器学习算法、深度学习框架等技术，这些技术的掌握可以提高程序员的编码能力和分析能力，让程序员更加熟练地编写高质量的代码。

#### ?获取方式： ####

?有需要的小伙伴，可以保存图片到**wx扫描二v码**免费领取【`保证100%免费`】?  
![234a36150ed901b26f264a281a41c0b1.png][]

[60a17196f6999387da63b523e80a56e9.jpeg]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/fa287bb55f944ffcbc940c877a74bfb4.jpeg
[3eab84d4e351e77af06eb3b1661a84ce.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/a87d4ebb01ab47a7be7aabd86e3e44d4.png
[1ee4eae6738c2a280c1ca68cb7d62f63.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/561d11402c314581ad490474de9758e7.png
[bed02554e50d82c6fe275cf81707888a.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/600afa1f75414837b922ae6b4402b7ea.png
[448cfbab7a724a27bfaebe0bc5bdf791.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/5137650bb17b425dbbb6cb15f1494ed3.png
[4b0fdd83a09b4b90aab93db1c99eadb4.jpeg_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/a84201fba55c49d588830059fdd995c5.jpeg
[fe8993b5c87b4577860ff02c0542e2b6.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/14733034a93a4682af6d6b92d7e2151a.png
[7977122a35ff4635a1b15565b4181435.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/5b42d21341fb4bdf8be02a52f4ad47ac.png
[234a36150ed901b26f264a281a41c0b1.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/05/05/87a81beee1ff4487bca0d90dbe24c517.png