智能制造与机器视觉课题组长期聚焦于工业具身智能的研究,尤其是面向智能制造的深度学习方法、工业垂域基础大模型、具身智能机器人、手绘草图CAD建模。
在具身智能机器人领域,主要研究室内复杂动态环境下移动机器人的类人感知与类人决策技术,包括移动机器人学习平台、语义SLAM、具身智能等,主要应用在送餐机器人、清洁机器人等。目前已与深圳市配送机器人领域独角兽企业普渡科技建立了“智能服务机器人技术联合研究中心”,投入上千万元拟就智能服务机器人相关核心技术展开重点攻关和工程应用研究。
在智能制造领域,针对产品个性化时代多品种小批量产品装配的重大需求和行业痛点,课题组提出了跨品类的可重构柔性装配产线变形设计理论与技术体系,广泛采用知识图谱、深度学习、虚拟调试、数字孪生等方法,实现产品装配产线的柔性化、数控化和智能化。目前,该技术已成功产业化给广州市富唯智能科技股份有限公司,并在大型国有企业得到成功应用。
在CAD工业软件领域,针对概念设计与详细设计之间的鸿沟,提出了手绘草图工程产品组装建模技术,具体包括基于深度学习、数据挖掘等方法的手绘草图理解、零件创建、和复杂产品装配等研究任务。本团队经过国自然青年、面上项目的持续支持,自主开发了3D建模内核iDesignCAD。目前在国家重点研发计划“工业软件”重点项目的支持下,计划研发大规模的手绘草图多模态数据集,为面向手绘草图的深度学习方法奠定数据基础,并开发手绘草图CAD工业软件,为手绘草图CAD工业软件的产业化应用奠定基础。