跳至内容
千亿参数的Vision Transformer大模型

Self-developed neural network framework

数据集构建与训练策略

Dataset construction and training strategy

应用场景展示

Application scenario demonstration

网格焊点识别平面拼接焊缝识别圆管和钢板拼接焊缝识别角焊缝识别 圆弧焊缝识别  

网格焊点识别


精确识别挑战

面对密集网格焊点，传统视觉算法方法易混淆邻近焊点，导致识别率低。  

深度学习突破

 大模型，精准定位每个焊点，显著提升识别准确性。


智能优化策略

大模型的泛化能力，可有效应对不同光照和背景干扰，确保稳定表现。  

平面拼接焊缝识别


技术核心

利用大模型深度学习精确捕捉平面焊缝特征，实现高精度识别。   

性能对比

 相较于传统方法，识别速度提升3倍，准确率高达98%


智能优化策略

大模型的泛化能力，可有效应对不同光照和背景干扰，确保稳定表现。  

圆管和钢板拼接焊缝识别


特定优化策略

针对复杂几何结构，大模型进行特征提取，确保焊缝识别的准确性与鲁棒性。    

实际操作验证

 通过现场操作视频，证明了其在圆管和钢板拼接焊缝识别上的高效与精确。


系统有效性

系统能够快速适应不同直径的圆管与厚度的钢板，同时不受光照、纹理影响。


性能对比

与传统方法相比，提高了识别速度与精度，降低了误报率，提升了焊接质量控制水平。

角焊缝识别


大模型高精度识别

实现了对角焊缝的高精度识别，准确率达到99+%。     

深度学习优化

采用深度学习算法优化特征提取过程，提高了识别的准确性和效率。


角焊缝几何复杂

系统能够快速适应不同直径的圆管与厚度的钢板，同时不受光照、纹理影响。

圆弧焊缝识别  


难点解析

圆弧焊缝识别需精确捕捉曲线特征，传统方法难以应对连续变化的曲率，导致识别率低。      


性能对比

弧线识别率99+%，精度±1mm。  

MultiVisionModels大模型性能参数指标

MultiVisionModels performance parameter indicators for large models

​ ​ ​ ​网格焊点

​ ​​ ​ ​识别精度 ​ ​​​定位精度 ​ ​​识别速度    ​支持焊缝类型 ​ ​图像分辨率 ​支持环境光干扰  ​误检率 ​    漏检率

​ ​ ​ ​（mAP） ​​（mm） ​    ​（FPS） ​ ​ ​ ​ ​ ​ ​ ​ ​ ​  ​ ​ ​（FPR）    （FNP）


​ ​​​ ≥99.3% ​​   ≤1.0 ​    ​≥35FPS ​ ​  点/缝/凸焊 ​ ​  480P-4K​ ​   ​强/弱光自适应 ​      ​   <0.2% ​     <0.5%

​ ​ ​ ​平面拼接焊缝

​ ​​ ​ ​识别精度 ​ ​​​定位精度 ​ ​​识别速度    ​支持焊缝类型 ​ ​图像分辨率 ​支持环境光干扰  ​误检率 ​    漏检率

​ ​ ​ ​（mAP） ​​（mm） ​    ​（FPS） ​ ​ ​ ​ ​ ​ ​ ​ ​ ​  ​ ​ ​（FPR）    （FNP）


​ ​​​ ≥99.0% ​​   ≤1.0 ​    ​≥40FPS ​ ​  对接/搭接焊 ​  ​   480P-4K​ ​  ​支持抗反光处理 ​   <0.8% ​     <0.2%

​ ​ ​ ​角焊缝

​ ​​ ​ ​识别精度 ​ ​​​定位精度 ​ ​​识别速度    ​支持焊缝类型 ​ ​图像分辨率 ​支持环境光干扰  ​误检率 ​    漏检率

​ ​ ​ ​（mAP） ​​（mm） ​    ​（FPS） ​ ​ ​ ​ ​ ​ ​ ​ ​ ​  ​ ​ ​（FPR）    （FNP）


​ ​​​ ≥99.5% ​​   ≤1.0 ​    ​≥32FPS ​ ​  T型/角接焊 ​         480P-4K​ ​  ​   ​强/弱光自适应 ​      ​   <0.2% ​     <0.3%

​ ​ ​ ​管板拼接焊缝

​ ​​ ​ ​识别精度 ​ ​​​定位精度 ​ ​​识别速度    ​支持焊缝类型 ​ ​图像分辨率 ​支持环境光干扰  ​误检率 ​    漏检率

​ ​ ​ ​（mAP） ​​（mm） ​    ​（FPS） ​ ​ ​ ​ ​ ​ ​ ​ ​ ​  ​ ​ ​（FPR）    （FNP）


​ ​​​ ≥99.5% ​​   ≤1.0 ​    ​≥28FPS ​ ​  插入式/环绕焊 ​     480P-4K​ ​   ​强/弱光自适应 ​      ​   <0.3% ​     <0.2%

​ ​ ​ ​圆弧焊缝

​ ​​ ​ ​识别精度 ​ ​​​定位精度 ​ ​​识别速度    ​支持焊缝类型 ​ ​图像分辨率 ​支持环境光干扰  ​误检率 ​    漏检率

​ ​ ​ ​（mAP） ​​（mm） ​    ​（FPS） ​ ​ ​ ​ ​ ​ ​ ​ ​ ​  ​ ​ ​（FPR）    （FNP）


​ ​​​ ≥99.0% ​​   ≤1.0 ​    ​≥25FPS ​ ​  圆周/曲线焊 ​        480P-4K​ ​            ​强/弱光自适应 ​      ​   <0.5% ​     <0.5%