高级检索

基于MS-FCM算法的船体板熔池图像处理技术

徐远钊, 罗玖田, 方乃文, 冯志强, 武鹏博, 黎泉

徐远钊, 罗玖田, 方乃文, 冯志强, 武鹏博, 黎泉. 基于MS-FCM算法的船体板熔池图像处理技术[J]. 焊接学报, 2024, 45(3): 82-90. DOI: 10.12073/j.hjxb.20231010001
引用本文: 徐远钊, 罗玖田, 方乃文, 冯志强, 武鹏博, 黎泉. 基于MS-FCM算法的船体板熔池图像处理技术[J]. 焊接学报, 2024, 45(3): 82-90. DOI: 10.12073/j.hjxb.20231010001
XU Yuanzhao, LUO Jiutian, FANG Naiwen, FENG Zhiqiang, WU Pengbo, LI Quan. Image processing technology for ship plate melt pool based on MS-FCM algorithm[J]. TRANSACTIONS OF THE CHINA WELDING INSTITUTION, 2024, 45(3): 82-90. DOI: 10.12073/j.hjxb.20231010001
Citation: XU Yuanzhao, LUO Jiutian, FANG Naiwen, FENG Zhiqiang, WU Pengbo, LI Quan. Image processing technology for ship plate melt pool based on MS-FCM algorithm[J]. TRANSACTIONS OF THE CHINA WELDING INSTITUTION, 2024, 45(3): 82-90. DOI: 10.12073/j.hjxb.20231010001

基于MS-FCM算法的船体板熔池图像处理技术

基金项目: 国家自然科学基金资助项目(51969001,52261044);国家重点研发计划资助项目(2021YFB3401100);新型钎焊材料与技术国家重点实验室开放课题(SKLABFMT202005);黑龙江省头雁行动计划−能源装备先进焊接技术创新团队资助项目(201916120).
详细信息
    作者简介:

    徐远钊,硕士研究生;主要研究方向为熔池图像处理;Email: 2102021109@stu.bbgu.edu.cn

    通讯作者:

    罗玖田,硕士研究生导师,正高级工程师;Email: luojtian@139.com

  • 中图分类号: TG 409

Image processing technology for ship plate melt pool based on MS-FCM algorithm

  • 摘要:

    熔池的图像处理与特征提取技术是船舶熔化极气体保护焊(gas metal arc welding, GMAW)智能化焊接质量监控的重要内容,针对船体板GMAW焊接过程中的烟雾大、飞溅多等不稳定特性导致熔池图像采集模糊、边缘提取困难等问题,提出一种基于均值漂移(mean shift, MS)优化模糊C均值聚类(fuzzy c-means, FCM)的图像处理算法. 在优化设计焊接动态视觉传感系统中,以最大化保证图像信息采集清晰度的基础上,利用MS算法获取超像素图像以解决FCM算法对噪声的敏感性,同时在FCM算法上引入加权邻域窗口,以增强MS-FCM算法的鲁棒性,来克服烟雾、飞溅、弧光等噪声影响,进而完成图像分割与边缘提取. 最后,设计出关于FCM、空间约束模糊C均值聚类 (fuzzy c-means with spatial constraints, FCM_S)、加强型模糊聚类(enhanced fuzzy c-means, ENFCM)和模糊局部信息C均值聚类(fuzzy local information c-means clustering, FLICM)算法的4种不同图像处理方法,并与MS-FCM优化模型进行边缘分割效果对比,获取几种方法所提取的熔宽,验证熔池几何特征的提取精度. 结果表明,MS-FCM算法在船舶焊接熔池图像处理方面能有效抑制噪声干扰,平滑信息,达到较高的提取精度.

    Abstract:

    The image processing and feature extraction technology of molten pool is an important part of intelligent welding quality monitoring for gas metal arc welding (GMAW) on ships. To address the unstable characteristics of large smoke and spatter during GMAW welding of ship hull plates, such as blurred image acquisition and difficult edge extraction, a fuzzy c-means clustering (FCM) based on mean shift (MS) optimization is proposed The image processing algorithm for In the optimization design of the welding dynamic visual sensing system, on the basis of maximizing the clarity of image information acquisition, the MS algorithm is used to obtain superpixel images to solve the sensitivity of the FCM algorithm to noise. At the same time, a weighted neighborhood window is introduced on the FCM algorithm to enhance the robustness of the MS-FCM algorithm, overcome the effects of smoke, spatter, arc light, noise, etc., and complete image segmentation and edge extraction Finally, four different image processing methods were designed for FCM, fuzzy c-means with spatial constraints (FCM-S), enhanced fuzzy c-means (ENFCM), and fuzzy local information c-means clustering (FLICM) algorithms. The edge segmentation effects were compared with the MS-FCM optimization model to obtain the extracted fusion widths from these methods, Verify the accuracy of extracting geometric features of the molten pool The results show that the MS-FCM algorithm can effectively suppress noise interference, smooth information, and achieve high extraction accuracy in ship welding pool image processing.

  • 以材料设计与模拟为理论基石的材料基因工程,在新材料研发过程中占有及其重要的地位. 材料基因工程中的高通量方法,在短时间内高效完成大批量样品制备与表征,包括高通量制备、高通量计算、高通量表征、高通量数据库与数据传输,其核心是将传统材料研究中的顺序迭代方法改为并行处理,以量变引起材料研究效率的质变[1-2].

    作为“材料基因组技术”三大要素之一,高通量方法在材料成分设计、组织分析、性能优化、过程模拟等方面起着关键性作用[1]. 需要与“材料计算模拟”和“材料信息学/数据库”有机融合、协同发展、互相补充,方可充分发挥其加速材料研发与应用的效能,最终使材料科学走向“按需设计”的终极目标[3-5]. 钎焊是现代制造业中材料连接的重要方法之一,借助材料基因组理念[6],高通量方法是否在钎焊性能数值模拟[7]、钎料高效可控制备、钎缝微观组织分析、钎焊材料物性数据库建立等方面起到举足轻重的关键作用,值得思考与探索.

    钎焊技术作为三大焊接技术的重要分支之一,是在狭窄半封闭空间内瞬间实现熔化、润湿、铺展、填充、溶解、扩散、凝固和界面反应过程[6],使得钎焊过程异常复杂、影响因素多、随机性强,国内外学者对钎焊界面状态变化、冶金反应及钎缝缺欠形成机理的研究仅限于个例,尚未形成涵盖全部因素的表征模型,在很大程度上凭经验判定,难以确保接头的使用可靠性[6, 8-9]. 利用材料基因工程中的高通量方法[10],也许可解决上述难题,故有必要开展钎焊基因工程及高通量制备的深入研究.

    目前有关钎焊与高通量方法组合研究的报道较为零散,缺乏综述性报道给以详细梳理,因此文中全面阐述有关高通量方法在钎焊领域的应用研究,对于未来实现钎焊基因工程、智能钎焊工厂提供理论依据和参考信息.

    高通量方法在钎焊领域的应用以高通量制备钎料、钎料及钎焊接头的高通量计算模拟分析为主,目前国内外学者发表的学术论文20余篇(包括期刊论文、会议论文、学位论文)、公开发明专利21项,主要有哈尔滨工业大学何鹏教授、北京科技大学黄继华教授、上海交通大学陈捷狮博士、太原理工大学丁敏博士、上海大学贾延东及德国Hartz教授、乔治亚理工学院Gao Feng教授等研究组,但目前国内外有关钎焊材料与工艺方面,还未涉及高通量表征、高通量数据库与数据传输方面的研究. 上述代表性的研究成果归纳、总结如表1所示.

    表  1  高通量方法在钎焊领域的代表性研究
    Table  1.  Representative study of high-throughput methods in the field of brazing
    研究钎料类别研究内容作者单位文献
    贵金属钎料钎焊基因工程、智能钎焊理念提出何鹏哈尔滨工业大学[6, 8]
    AgCuNi定向凝固高通量制备装置、楔形轧制谢明贵研铂业股份有限公司[11-12]
    AgCuTi第一性原理研究钎料在SiC表面的润湿性黄继华北京科技大学[13]
    Ag72Cu第一性原理计算 Ag 元素在 Ti2AlC 中
    元素取代倾向性和可行性
    王国超哈尔滨工业大学[14]
    Ag72Cu分子动力学方法模拟钎料在铁基板的润湿特性Hartz德国多特蒙德大学[15]
    NiCrBSi第一性原理分析B、Si元素对金刚石钎缝
    界面结合强度的影响
    Zhang Jian长沙理工大学[16]
    CuNiTiCuTi二元体系的电子轨道杂化黄继华北京科技大学[17]
    AlSi梯度梯度钎料高通量制备装置贾延东上海大学[18]
    Al12Si、Sn基与SiC界面的原子活性韩雨彤哈尔滨工业大学[19]
    SnZnCu两靶磁控溅射共沉积制备软钎料王刚上海大学[20]
    Sn-3.5Ag基于密度泛函理论的第一原理探索Cu6Sn5晶体结构中
    掺杂剂最有利的占据位置
    Gao F乔治亚理工学院[21]
    SnCu密度泛函理论的第一性原理对Cu/Cu3Sn(010)
    界面Bi的偏析进行了研究
    Liu Z Q中科院金属所[22]
    SnZn第一性原理计算Al2O3/Sn9Zn、Sn9Zn-1Al2O3 -xCu
    钎料界面电子性能
    丁敏太原理工大学[23-24]
    SnCu基于密度泛函分子动力学方法,计算母材原子在Sn轴方向的
    最优迁移路径、最小能量及相应的电子结构
    陈捷狮上海交通大学[25-26]
    下载: 导出CSV 
    | 显示表格

    高端装备制造对高性能材料的需求迫切,尤其是对缩短研发时间与降低成本的需求,但是新材料研发有其固有的规律和时间要求[4]. 借助高通量制备可以解决加快新材料的研发速度,降低合金的研发成本等问题. 高通量制备作为高通量试验技术的重要组成部分,是材料基因组技术能否有效进行的关键. 目前国内外有关高通量制备技术在钎焊技术领域的应用研究现状,按照软、硬钎焊技术类别,可归纳为AgCuNi钎料、AlSi梯度钎料、SnZnCu钎料的高通量制备研究,具体如下.

    昆明贵金属研究所谢明课题组开发出钎料高通量定向凝固制备装置(图1),可单次完成不同成分、工艺下钎料高通量制备[11]. 在熔体温度1 150 ℃、冷却水温度及水量25 ~ 35 ℃,400 L/h,拉坯速度0.5 mm/s,氩气保护条件下,定向凝固制备直径25 mm的AgCuNi棒材,Ni含量0.5% ~ 2% (质量分数) 经系列测试,钎料性能参数如下:抗拉强度320 ~ 411 MPa,断后伸长率5.3% ~ 10.2%,固相线温度区间558 ~ 617 ℃,液相线温度区间549 ~ 586 ℃. 对AgCuNi楔形试样[12]轧制后发现:高通量样品变形量从33% ~ 80%连续变化. 该方法不足之处是拉坯过程中容易产生裂纹、夹杂等缺陷,成为制约钎料性能提升的瓶颈.

    图  1  AgCuNi钎料高通量定向凝固制备装置
    Figure  1.  High-throughput preparation equipment of AgCuNi brazing alloys with directional solidification

    一种封装用高硅铝合金结构梯度材料高通量制备装置及方法[18],主要用于制备AlSi梯度合金钎料,钎料抗拉强度180 ~ 260 MPa,热导率139 ~ 170 W/(m·℃),热膨胀系数(12.1 ~ 17.4) × 106(25 ~ 200 ℃),制备的合金致密度更高,组织更加细化,合金具有优异的综合性能,该方法仅适用小批量制备,与工业实际规模化生产还有一定差距.

    上海大学王刚课题组[20]发明了两靶共溅射沉积方法制备Sn-Zn-Cu钎料(图2),一次性可制备10种不同组分的钎料,靶材为Sn-9Zn合金和纯Cu金属,钎料成分为Cu含量20.2% ~ 20.3%,Sn含量74.38% ~ 92.77%,Zn含量4.5% ~ 7.5%. 钎料熔化温度区间:204 ~ 218.5 ℃,但制备的钎料中存在微量Cu2O和ZnO氧化物.

    图  2  SnZnCu钎料两靶磁控溅射方法
    Figure  2.  Two-target magnetron sputtering method of SnZnCu solders

    对于材料性质的研究,理论计算与模拟具有极强的理论指导性及预见性,能够较好的解释试验结果,并对试验中的不足提出改进,进一步指导试验[3, 27-28]. 理论模拟计算研究材料性能最常用的方法主要有密度泛函理论、分子动力学、第一性原理. 将上述三种高通量计算方法应用到钎焊领域,可获得预想不到的研究结果.

    硬钎焊作为钎焊领域一个重要分支,国内外学者采用第一性原理、分子动力学等高通量计算方法对银钎料、镍钎料、铜钎料中的二元电子结构、电荷密度、原子置换等进行了系统研究,但有关钎料整体电子结构、钎焊性能方面的数值模拟、三维钎焊过程,目前还鲜有涉及,有待后续进行深入研究.

    王国超[14]使用BAg-8钎料钎焊Ti2AlC和铜,利用第一性原理,从热力学角度揭示了Ag在Ti2AlC中是通过Al空位优先成片的置换,形成 Ti2(Al, Ag)C固溶体,从而保持了Ti2AlC陶瓷结构的稳定性;Ti-Ag键取代Ti-Al键,键合强度的减弱降低了体系稳定性;从原子尺度发现Ag在Ti2AlC中形成圆盘状的富Ag固溶体,证实了第一性原理计算结果. 但是有关Ti-Ag-Al之间的键合强度未涉及.

    Yang等人[13]借助第一性原理计算研究Ag(111)/SiC(111)界面和Ag(111)/TiC(111)界面的界面特性,研究Ag-Cu-Ti钎料在SiC陶瓷表面的优异反应润湿性,如图3所示. 结果表明,Ag(111)/SiC(111)界面和Ag(111)/TiC(111)界面具有C端基结构和TL堆叠序列,显示出最高的界面稳定性.Ag(111)/SiC(111)界面和Ag(111)/TiC(111)界面的化学键主要通过SiC(或TiC)板中第一层C原子之间的相互作用和Ag板中的第一层Ag原子形成. Ag(111)/SiC(111)界面的界面能远大于Ag(111)/TiC(111)界面的界面能,这表明AgCuTi钎料与SiC母材之间形成TiC反应层,对提高AgCuTi钎料在SiC陶瓷上的润湿性起到积极作用. 但是有关Ti-Ag-Cu-Si之间的界面能未涉及,可能是计算软件本身的缺陷.

    图  3  Ag(111)/SiC(111)界面和Ag(111)/TiC(111)界面的电荷密度差分分布
    Figure  3.  Charge density differences of Ag (111)/SiC (111) and Ag (111)/TiC (111) interface.(a) Ag (111)/SiC (111); (b) Ag (111)/TiC (111)

    Hartz-Behrend等人[15]采用分子动力学模拟方法对钎焊过程固/液界面的润湿及铺展行为进行了定量分析. 分子动力学模拟能够定量反映纯铜、纯银、AgCu28钎料在铁基板上的润湿情况,与试验结果较为吻合. 但是该研究没有考虑钎料与基体之间复杂的界面传质和反应行为.

    Zhang等人[16]通过第一性原理研究了Cr,B,Si对Ni-Cr-B-Si钎料钎焊金刚石界面结合强度和粘着转移的影响规律. 研究发现,Cr对镍金刚石界面具有较强的包覆能力,相对于B和Si,Cr对镍/金刚石界面具有较强的包覆能力. Cr有效地提高了界面结合强度,镍/金刚石界面的拉伸模拟试验进一步验证了Cr对镍/金刚石界面性能具有强化作用,镍/金刚石界面Cr和C原子之间强烈的离子键决定了镍基钎料钎焊金刚石界面具有高结合能. 有关Cr,B,Si对钎焊金刚石界面的耦合作用机理还有待深入研究.

    Yang等人[17]采用超软赝势密度泛函的第一性原理系统研究Ag-Cu-Ti和Cu-Ni-Ti钎料中Cu-Ti体系金属间化合物的电子结构(电子轨道杂化、电子分布情况),如图4所示. 对于Cu-Ti金属间化合物,负信息焓表明它们从降解到纯金属在热力学上是稳定的,建立了Cu含量和信息焓之间的定量表达式. Cu-Ti金属间化合物的力学性能与共价键强度正相关,而热物理性能同时受离子特性和共价特性的影响,其中离子特性起主导作用. 但有关Ag-Cu-Ti和Cu-Ni-Ti三元体系的电子结构,目前还未涉及.

    图  4  CuTi二元体系金属间化合物的电荷密度差分图
    Figure  4.  Calculated difference charge density for Cu-Ti binary system intermetallic compounds

    软钎焊领域,钎焊学术界运用密度泛函理论的第一性原理和分子动力学方法研究母材与钎料的界面结合机制、元素偏析、原子最佳占据位置及颗粒/钎料的界面特性、原子的最小能量,均取得了一些重要的理论结果,对于调控无铅焊点界面组织、提高焊点可靠性具有重要的指导意义.

    韩雨彤[19]运用第一性原理研究Al/SiC,Al-12Si/SiC,Sn/SiC,Sn-1.0Al/SiC的界面结合机制. 探究Al钎料与SiC界面的结合,模拟计算Sn基钎料与SiC陶瓷界面结合. 界面的结合主要是Al-C离子共价键和Si-C共价离子键的作用,界面上Al原子活性被抑制,Al-C原子间仍成键,但不形成化合物Al4C3,界面的结合主要来自于Si-C间的相互作用. 结合模拟计算设计试验实现了SiC陶瓷的低温钎焊,并验证理论计算的可靠性. 有关Si元素在Al-12Si/SiC,Al元素在Sn-1.0Al/SiC中的影响还未解析清楚,有待研究.

    通常在Cu基板和Sn基焊料之间的界面处形成含有一定量Co或Ni的Cu6Sn5金属间化合物,发现Co或Ni添加剂占据Cu6Sn5晶体结构中的Cu原子亚晶格. Gao等人[21]研究发现:对于浓度高达27.3%(原子分数)的Ni和Co原子均倾向于取代Cu6Sn5结构中的Cu,并形成热力学更稳定的(Cu, Ni)6Sn5和(Cu, Co)6Sn5相. 相比之下,Ni在稳定Cu6Sn5相方面比Co更有效. 在较低浓度条件(9.1%)下,Ni或Co原子优选占据4e Cu亚晶格;在较高浓度(27.3.%)下,Ni原子可能位于4e+ 8f2Cu亚晶格上;但有关Co,Ni复合添加对Cu原子亚晶格的行为还未阐明.

    Pang等人[22]使用密度泛函理论的第一性原理对Cu/Cu3Sn(010)界面Bi的偏析进行了研究,如图5所示. 分析表明,Bi偏析使Cu/Cu3Sn(010)界面的附着能降低了约一半,由于Bi原子半径大,导致界面键合从Cu-Cu和Cu-Sn转移到Cu-Bi和Sn-Bi. 采用粘附能量标准引入了五种初始结构. 其中Cu板界面Cu原子沿Cu3Sn中Cu-Cu键方向定位的所谓“Cu-Cu”结构被认为最佳能量结构,此时粘附能量为1.96 J/m2时;当粘附能量低至1.06 J/m2时,被确定是最可能的分离位点;同时发现尺寸效应在脆化中起决定性作用.

    图  5  Bi元素偏析前后体系电荷密度在不同方向的分布
    Figure  5.  Projected charge density distributions before and after Bi segregation at different.(a) xz plane; (b) yz plane

    太原理工大学丁敏课题组采用第一性原理计算研究了Sn-9Zn-xAl2O3(x = 0-1)界面结构和电子性能[23]. Al2O3/Sn9Zn界面能的数值相对稳定在−1.15 ~ −0.23 J/m2之间. 与普通的Sn-9Zn焊料相比,掺入Al2O3纳米颗粒可抑制Sn-Zn共晶中粗枝晶的生长,并在合金凝固过程中细化焊料的晶粒. 随着Al2O3纳米粒子含量增加,复合焊料的显微硬度和拉伸强度升高. 其次添加Cu元素,分析Sn9Zn-1Al2O3-xCu (x=0, 1.5%, 4.5%, 6%)无铅焊料中Cu和Al2O3颗粒对焊接6061铝合金的影响规律[24],基于密度泛函理第一性原理的Materials Studio软件,计算Al2O3/Sn9Zn界面的界面结构、界面能、接触角和电子结构,如图6所示.

    图  6  不同结构的电荷密度差分的轮廓图
    Figure  6.  Contours plane of charge density difference for different structures. (a) Sn9Zn- 1Al2O3; (b) Sn9Zn- Al2O3-4.5Cu

    计算表明,Sn9Zn-1Al2O3-4.5Cu 和 Sn9Zn1Al2O3-6Cu呈现稳定的结构;当Cu元素含量为4.5%时,焊缝中出现大量细小Cu5Zn8相,Al4Cu3Zn固溶体层最薄、最平坦. 与Sn9Zn-1Al2O3焊料相比,采用Sn9Zn-1Al2O3-4.5Cu焊料时,润湿面积和抗剪强度分别提高了27.12%和75.6%,归因于Cu5Zn8第二相的强化机制. 该方法建议后续可进行大范围推广,应用至硬钎焊领域.

    Chen等人[25-26]采用基于密度泛函理论分子动力学方法,计算母材M(M= Cu, Ni, Ag, Au, In)原子在Sn轴方向的最优迁移路径、最小能量及相应电子结构,确定无铅焊点中母材溶解的原因. 研究认为,吸附阶段,M原子倾向吸附在Sn表面空位处,容易吸附在Sn(001)(c方向)的空位处;真正决定M原子的迁移速率的是渗透阶段,在3个步骤中拥有最高的能量势垒;电场引起迁移能减低的原因是电流密度增加,加剧了M与Sn体间的电荷转移和再分配,扩宽原子扩散通道,有利于原子迁移. 但有关上述Cu,Ni,Ag,Au,In原子的二元及以上复合作用机制还未阐明.

    有关高通量方法在钎焊领域应用的研究还存在以下问题.

    (1)硬钎焊领域,采用高通量计算中的第一性原理方法对钎料中某一金属元素与母材、金属间化合物的电子结构(电子轨道杂化、电子分布情况)及热力学性能进行了分析,同时借助分子动力学方法定量分析钎焊过程固/液界面的润湿及铺展行为,但研究仅限于单金属、二元体系金属间化合物,对于钎料整体与母材、三元及以上合金体系的电子结构及热力学特性还未涉及,有待进一步研究.

    (2)软钎焊领域,运用密度泛函理论的第一性原理或分子动力学方法研究母材与钎料的界面结合机制、界面元素偏析、晶体结构中原子最佳占据位置及纳米颗粒/钎料的界面特性、母材原子在钎料原子轴方向的最小能量及电子结构,但仅计算了某一金属原子的位置替代、界面结合、成键、最小能量及相应的电子结构及颗粒界面能,有关整个钎料在钎焊过程中的模拟仿真、三维电子结构等还未研究.

    (3)由于钎焊过程复杂、影响因素繁多,高通量制备钎料的方法、工艺还不统一,无法实现整个钎料体系的高效、快速制造,缺乏通用的钎料高通量制造平台或装备.

    鉴于上述存在的系列问题,未来有关高通量方法在钎焊领域的应用可重点关注以下几个方向.

    (1)由于高通量制备方法和装备不统一,呈现多种钎料对应多种不同的高通量制备方法工艺、装备,需构建适用于所有钎料体系的高通量制备方法和装备,同时制定相应的国家、行业标准,规范钎料的高通量制造生产.

    (2)高通量计算需要弄明白三元及以上钎料整体的电子结构、三维钎焊过程,为实际钎焊工艺提供理论基础和技术支撑.

    (3)亟需将钎料实验数据进行整合、梳理、归类,建立含有多种软、硬钎料热力学性能、钎焊性能的高通量数据库和软件,实现各数据之间的耦合传输、高效验证,为高通量计算钎料、钎焊接头的组织性能提供科学依据.

    (4)将高通量制备、高通量计算、数据库和软件有机整合,未来可开展钎焊4.0的研究,如钎料过程手机App或电脑远程控制、智能钎焊工厂等卡脖子热点课题的研究.

  • 图  1   GMAW试验平台

    Figure  1.   GMAW experimental platform

    图  2   MS-FCM计算流程

    Figure  2.   MS-FCM calculation process

    图  3   熔池原图

    Figure  3.   Original image of the melt pool. (a) smoke melt pool; (b) splashing melt pool

    图  4   二值化和Otsu算法熔池处理结果

    Figure  4.   Binarization and otsu algorithm for processing molten pool images. (a) binarization;(b) otsu algorithm

    图  5   熔池图像分割结果

    Figure  5.   Image segmentation result of molten pool

    图  6   边缘提取结果

    Figure  6.   Edge extraction results

    图  7   各算法提取结果对比

    Figure  7.   Comparision of various methods. (a) original;(b) FCM; (c) FCM_S; (d) ENFCM; (e) FLICM; (f) MS-FCM

    图  8   图像处理过程

    Figure  8.   Image processing process. (a) original image; (b) median filtering; (c) segmentation result; (d) edge extraction result; (e) Hough transform analysis; (f) edge coverage of the original image

    图  9   测量像素宽度与实际像素宽度比较

    Figure  9.   Comparison between measured pixel width and actual pixel width

    表  1   CCD相机的主要性能参数

    Table  1   Main performance parameters of CCD

    像素尺寸
    /μm
    机械尺寸
    /mm
    帧率
    F/(帧·s−1)
    分辨率相机重量
    G1/g
    镜头外形尺寸
    /mm
    镜头重量
    G2/g
    滤镜螺纹光感范围
    螺纹直径d1/mm 螺路L1/mm
    5.86×5.8638.3×29×29411920×120042Φ33.5 × 28.262.630.50.5F1.4 ~ F16
    下载: 导出CSV

    表  2   焊接工艺参数

    Table  2   Parameters of the welding experiment

    焊接电源试件尺寸/mm焊丝材料气体流量Q/(L·min−1)焊接速度v/(cm·min−1)电弧电压
    U/V
    焊接电流
    I/A
    焊丝伸出长度L2/mm焊丝直径d2/mm起弧距离D/mm
    Pulse MIG-RP300×150×8H08Mn2SiA152321170151.21.0
    下载: 导出CSV

    表  3   实际像素宽度与各算法像素宽度

    Table  3   Actual pixel width and algorithm pixel width

    图像编码误差率A(%)
    FCMFCM-SENFCMFLIFCMMS-FCM
    烟雾134.533.83.514.82.8
    烟雾224.224.22.311.51.5
    烟雾3
    飞溅1
    飞溅2
    飞溅3
    42.3
    9.0
    16.9
    3.9
    43.8
    2.3
    4.4
    10.3
    27.7
    3.8
    8.1
    1.6
    4.6
    57.6
    23.5
    9.9
    3.8
    0.7
    2.2
    1.5
    下载: 导出CSV

    表  4   不同算法的宽度误差

    Table  4   Width error of different algorithms

    图像编码误差率A(%)
    FCMFCM-SENFCMFLIFCMMS-FCM
    烟雾134.533.83.514.82.8
    烟雾224.224.22.311.51.5
    烟雾3
    飞溅1
    飞溅2
    飞溅3
    42.3
    9.0
    16.9
    3.9
    43.8
    2.3
    4.4
    10.3
    27.7
    3.8
    8.1
    1.6
    4.6
    57.6
    23.5
    9.9
    3.8
    0.7
    2.2
    1.5
    下载: 导出CSV
  • [1] 方乃文, 郭二军, 徐锴, 等. 钛合金激光填丝焊缝晶粒生长及相变原位观察[J]. 中国有色金属学报, 2022, 32(6): 1655 − 1672.

    Fang Naiwen, Guo Erjun, Xu Kai, et al. In-situ observation of grain growth and phase transformation in laser welding of titanium alloy with filler wire[J]. The Chinese Journal of Nonferrous Metals, 2022, 32(6): 1655 − 1672.

    [2] 蒋宝, 徐冬至, 黄瑞生, 等. 基于视觉传感的焊接机器人焊缝识别跟踪技术研究现状[J]. 金属加工 (热加工), 2022(1): 10-17.

    Jiang Bao, Xu Dongzhi, Huang Ruisheng, et al. Research status of welding robot seam recognition and tracking technology based on visual sensing [J] MW Metal Forming, 2022(1): 10-17.

    [3] 林少铎. 激光视觉传感的焊缝跟踪方法研究[D]. 广州: 广东工业大学, 2019.

    Lin Shaoduo. Research on seam tracking based on laser vision sensing[D]. Guangzhou: Guangdong University of Technology, 2019.

    [4] 李翼, 吕建军, 周陶然, 等. 船舶智能制造关键共性技术体系探究[J]. 船舶工程, 2021, 43(6): 24 − 30.

    Li Yi, Lü Jianjun, Zhou Taoran, et al. Research on key common technology system of ship intelligent manufacturing[J]. Ship Engineering, 2021, 43(6): 24 − 30.

    [5] 王树强, 周游, 陈昊雷, 等. 基于激光视觉的钢结构焊缝图像处理系统[J]. 焊接学报, 2022, 43(2): 101 − 105. doi: 10.12073/j.hjxb.20210603001

    Wang Shuqiang, Zhou You, Chen Haolei, et al. A steel structure weld image processing system based on laser vision[J]. Transaction of the China Welding Institution, 2022, 43(2): 101 − 105. doi: 10.12073/j.hjxb.20210603001

    [6] 洪宇翔, 杨明轩, 都东, 等. 铝合金爬坡 TIG 焊熔池失稳状态的视觉检测[J]. 焊接学报, 2021, 42(10): 8 − 13.

    Hong Yuxiang, Yang Mingxuan, Du Dong, et al. Unstable state vision detection of molten pool during aluminum alloy climbing-TIG welding[J]. Transaction of the China Welding Institution, 2021, 42(10): 8 − 13.

    [7]

    Nomura K, Fukushima K, Matsumura T, et al. Burn-through prediction and weld depth estimation by deep learning model monitoring the molten pool in gas metal arc welding with gap fluctuation[J]. Journal of Manufacturing Processes, 2021, 61: 590 − 600. doi: 10.1016/j.jmapro.2020.10.019

    [8] 杨嘉佳, 王克鸿, 吴统立, 等. 铝合金双丝脉冲 MIG 焊双向熔池同步视觉传感及图像处理[J]. 机械工程学报, 2014, 50(12): 44 − 50. doi: 10.3901/JME.2014.12.044

    Yang Jiajia, Wang Kehong, Wu Tongli, et al. Two-directional synchronous visual sensing and image processing of weld pool in aluminum alloy twin arc pulsed MIG welding[J]. Journal of Mechanical Engineering, 2014, 50(12): 44 − 50. doi: 10.3901/JME.2014.12.044

    [9] 王煜, 高向东, 陈子琴, 等. 激光-MAG 复合焊接过程金属蒸气和背部熔池图像分析[J]. 机械工程学报, 2020, 55(19): 167 − 173.

    Wang Yu, Gao Xiangdong, Chen Ziqin, et al. Analysis of the images of metal vapor and bottom-molten pool in laser-MAG hybrid welding process[J]. Journal of Mechanical Engineering, 2020, 55(19): 167 − 173.

    [10] 杨家林, 高进强, 秦国梁, 等. 基于视觉的激光深熔焊熔池检测及图像处理[J]. 焊接学报, 2011, 32(11): 21 − 24.

    Yang Jialin, Gao Jinqiang, Qin Guoliang, et al. Vision-based checking and image processing for melt pool of laser deep penetration welding[J]. Transaction of the China Welding Institution, 2011, 32(11): 21 − 24.

    [11] 崔勇, 马国红, 马少龙. 双弧焊熔池图像处理[J]. 热加工工艺, 2013, 42(23): 160 − 162.

    Cui Yong, Ma Guohong, Ma Shaolong. Weld pool image processing in double arc welding[J]. Hot Working Technology, 2013, 42(23): 160 − 162.

    [12] 薛家祥, 贾林, 李海宝. CO2 焊熔池图像的 Bubble 小波零交叉边缘检测[J]. 焊接学报, 2004, 25(1): 87-89.

    Xue Jiaxing, Jia Lin, Li Haibao. Edge detection of CO2 arc welding pool image based Bubble wavelet and zero crossing[J] Transaction of the China Welding Institution, 2004, 25(1): 87-89.

    [13]

    Chen C, Lü N, Chen S. Welding penetration monitoring for pulsed GTAW using visual sensor based on AAM and random forests[J]. Journal of Manufacturing Processes, 2021, 63: 152 − 162. doi: 10.1016/j.jmapro.2020.04.005

    [14] 刘坚, 向超前, 王方华, 等. 基于相位一致性的激光熔覆熔池边缘提取方法[J]. 机械工程学报, 2018, 54(5): 166-172.

    Liu Jian, Xiang Chaoqian, Wang Fanghua, et al. New method based on phase congruency for weld pool edge extraction in laser cladding[J] Journal of Manufacturing Processes, 2018, 54(5): 166-172.

    [15]

    Qiao N, Zou B. A segmentation method for noisy photoelectric image[J]. Optik, 2013, 124(20): 4092 − 4094.

    [16]

    Zhang Y, Bai X, Fan R, et al. Deviation-sparse fuzzy c-means with neighbor information constraint[J]. IEEE Transactions on Fuzzy Systems. A Pubilcation of the IEEE Neural Networks Council, 2018, 27(1): 185 − 199.

    [17]

    Fan J, Wang J. A two-phase fuzzy clustering algorithm based on neurodynamic optimization with its application for PolSAR image segmentation[J]. IEEE Transactions on Fuzzy Systems:A Pubilcation of the IEEE Neural Networks Council, 2016, 26(1): 72 − 83.

    [18]

    Shang R, Tian P, Jiao L, et al. A spatial fuzzy clustering algorithm with kernel metric based on immune clone for SAR image segmentation[J]. IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing, 2016, 9(4): 1640 − 1652. doi: 10.1109/JSTARS.2016.2516014

    [19]

    Fang J, Wang K. Weld pool image segmentation of hump formation based on Fuzzy C-means and Chan-Vese model[J]. Journal of Materials Engineering and Performance, 2019, 28: 4467 − 4476. doi: 10.1007/s11665-019-04168-y

    [20] 兰蓉, 林洋. 抑制式非局部空间直觉模糊 C-均值图像分割算法[J]. 电子与信息学报, 2019, 41(6): 1472 − 1479.

    Lan Rong, Lin Yang. Suppressed non-local spatial intuitionistic fuzzy c-means image segmentation algorithm[J]. Journal of Electronics & Information Technology, 2019, 41(6): 1472 − 1479.

    [21]

    Gao Y, Wang Z, Xie J, et al. A new robust fuzzy c-means clustering method based on adaptive elastic distance[J]. Knowledge-Based Systems, 2022, 237: 107769. doi: 10.1016/j.knosys.2021.107769

  • 期刊类型引用(1)

    1. 杨义成,冷冰,黄瑞生,聂鑫,马一鸣,武鹏博. 基于高通量测试方法的高功率激光焊接工艺特性分析. 焊接学报. 2021(11): 77-82+101-102 . 本站查看

    其他类型引用(1)

图(9)  /  表(4)
计量
  • 文章访问数:  161
  • HTML全文浏览量:  11
  • PDF下载量:  27
  • 被引次数: 2
出版历程
  • 收稿日期:  2023-10-09
  • 网络出版日期:  2024-03-07
  • 刊出日期:  2024-03-24

目录

/

返回文章
返回