发明

一种基于二维—深度信息融合的焊缝识别方法2024

2024-06-01 08:07:27 发布于四川 18
  • 申请专利号:CN202410471587.8
  • 公开(公告)日:2024-09-03
  • 公开(公告)号:CN118096729A
  • 申请人:南京理工大学
摘要:本发明公开了一种基于二维—深度信息融合的焊缝识别方法,包括步骤:利用焊缝识别系统对测量工件进行三维扫描,得到测量工件的三维点云;将点云图像转化为深度图像;对深度图像进行标注获得训练数据集;用训练数据集训练多模态分割模型,多模态分割模型包括深度图像处理模块、跨界整合模块CFM和可跨领域融合感知模块CISM;利用所述多模态分割模型对工件焊缝进行识别。本发明可以规避单一模态下焊缝识别带来的不稳定性,将图像中多模态的信息特征嵌入到端到端的RGB和深度图训练中提高焊缝识别准确率。

专利内容

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 118096729 A (43)申请公布日 2024.05.28 (21)申请号 202410471587.8 G06N 3/08 (2023.01) (22)申请日 2024.04.19 (71)申请人 南京理工大学 地址 210000 江苏省南京市玄武区孝陵卫 街道孝陵卫街200号 (72)发明人 张毅 刘乃炀 赵壮 陆骏 韩静  吴梓剑  (74)专利代理机构 南京苏创专利代理事务所 (普通合伙) 32273 专利代理师 张学彪 (51)Int.Cl. G06T 7/00 (2017.01) G06V 10/80 (2022.01) G06V 10/82 (2022.01) G06N 3/0464 (2023.01) 权利要求书2页 说明书7页 附图4页 (54)发明名称 一种基于二维—深度信息融合的焊缝识别 方法 (57)摘要 本发明公开了一种基于二维—深度信息融 合的焊缝识别方法,包括步骤:利用焊缝识别系 统对测量工件进行三维扫描,得到测量工件的三 维点云;将点云图像转化为深度图像;对深度图 像进行标注获得训练数据集;用训练数据集训练 多模态分割模型,多模态分割模型包括深度图像 处理模块、跨界整合模块CFM和可跨领域融合感 知模块CISM;利用所述多模态分割模型对工件焊 缝进行识别。本发明可以规避单

最新专利