基于多模态AI的油基岩屑陶粒生球制备管控方法及系统与流程
本发明属于油气田压裂支撑剂制备技术与人工智能算法交叉领域,具体是基于多模态ai的油基岩屑陶粒生球制备管控方法及系统。
背景技术:
1、油基岩屑作为油气开采过程中产生的危险固体废弃物,其资源化利用制备陶粒压裂支撑剂是实现环保与能源开发协同发展的重要方向。在陶粒支撑剂的制备工艺中,生球制备阶段的质量直接决定了最终产品的强度、球度及导流能力等关键性能指标。
2、目前,工业生产中对生球制备过程的质量监控主要依赖人工目视检测和简单的二维视觉观测。人工检测通常由操作人员定期取样、肉眼观察并凭借经验判断母球直径是否达标、生球表面是否光滑、是否存在粘连,这种方式不仅主观性强、一致性差,而且存在明显的检测滞后——往往当操作人员发现质量异常时,已有大量不合格生球进入后续烧结工序,造成原材料和能源的浪费。另一方面,部分产线尝试采用工业相机进行在线监测,但受限于单一的二维成像技术,只能获取球体投影轮廓,无法精准测量直径仅为0.2毫米级的母球三维尺寸,难以量化生球的真实球度、椭球度及粘连体积比;同时,油基岩屑制备过程中产生的大量粉尘和高速运动的球体常导致图像模糊、点云噪声严重,传统图像处理算法在此类恶劣工况下的检测准确率大幅下降。
3、近年来,虽有研究尝试引入人工智能算法对单一模态数据进行特征提取,但缺乏对多模态信息的融合利用,无法建立二维表面纹理特征与三维形貌特征之间的关联,导致对表面裂纹、局部过湿、不均匀成核等复杂缺陷的识别能力依然有限。此外,现有方法大多停留在“检测-报警”的开环模式,即仅输出质量判定结果或异常预警信号,工艺参数的调节仍需人工根据经验手动执行,未能形成从感知到决策再到控制的闭环智能管控,使得质量波动难以被及时抑制,制约了生球质量的稳定提升和产线的自动化水平。因此,亟需一种能够适应恶劣工况、融合多模态感知数据、实现全流程闭环智能管控的生球制备监控方法。
技术实现思路
1、本技术提供基于多模态ai的油基岩屑陶粒生球制备管控方法及系统,解决了现有技术中生球制备过程依赖人工经验或单一视觉感知导致的质量特征检测精度低、三维形貌无法量化、动态演化趋势无法捕捉、工艺状态判定滞后且无法实现闭环智能管控的技术问题。
2、为达到上述目的,本技术采用如下技术方案:
3、第一方面,提供基于多模态ai的油基岩屑陶粒生球制备管控方法,包括:
4、采集生球制备过程中母球和生球的二维图像数据和三维点云数据,并进行数据预处理;
5、从预处理后的二维数据中提取二维特征,从预处理后的三维数据中提取三维特征,并将所述二维特征与所述三维特征进行融合,得到融合特征向量;
6、基于所述融合特征向量,分别提取母球阶段和生球阶段的质量特征,并将连续时间序列的质量特征数据输入时序神经网络模型,根据模型的输出结果判定当前工艺状态并输出判定信号。
7、基于上述技术方案,在本技术提供的基于多模态ai的油基岩屑陶粒生球制备管控方法中,通过融合高速摄影二维图像与激光雷达三维点云数据,充分利用了二维纹理信息对表面缺陷的敏感性与三维几何信息对形貌尺寸的精确量化能力,克服了传统单一视觉检测无法准确测量毫米级母球直径、无法量化生球三维球度及粘连体积的技术缺陷;通过提取母球阶段和生球阶段的质量特征并输入时序神经网络模型,实现了对生球制备全流程动态演化规律的学习与建模,使工艺状态判定不再依赖人工经验或静态阈值,而是基于连续时间序列的演化趋势进行智能决策,从而提升了判定的准确性、实时性和抗干扰能力;同时,该方法适配油基岩屑制备过程中粉尘多、运动快等恶劣工况,能够实现从多模态感知到工艺状态判定的端到端自动化监控,为生球质量的稳定控制和后续工艺参数的闭环调节提供了可靠的数据基础。
8、进一步地,所述数据预处理包括:
9、对采集的二维图像数据采用wiener滤波算法进行去运动模糊处理,得到第一预处理图像;
10、利用u-net语义分割网络对所述第一预处理图像进行主体区域与背景区域的语义分割,得到预处理后的二维数据;
11、对采集的三维点云数据采用统计滤波算法剔除噪声点,得到第一预处理三维点云;
12、利用ransac算法对所述第一预处理三维点云进行拟合处理,得到预处理后的三维数据;
13、采用张正友标定法建立二维图像像素坐标与三维点云空间坐标的映射关系,将所述预处理后的二维数据与所述预处理后的三维数据进行时空同步对齐。
14、进一步地,所述将所述二维特征与所述三维特征进行融合,包括:
15、从预处理后的二维数据中,通过灰度共生矩阵提取对比度、相关性和熵值,得到二维特征向量;
16、从预处理后的三维数据中,对每个球体点云簇采用最小二乘球面拟合法,计算拟合球心坐标、拟合半径以及拟合残差,同时计算点云密度以及球度系数,得到三维特征向量;
17、将所述二维特征与所述三维特征拼接成多维特征向量,并采用注意力机制计算跨模态相关性矩阵,识别二维特征与三维特征之间的对应关系,再通过双线性池化将注意力计算后的二维特征与三维特征进行交叉融合,得到融合特征向量。
18、进一步地,所述得到融合特征向量之后,还包括利用transformer编码器进行时序增强,具体包括:
19、将连续时间窗口内的融合特征向量按时间顺序排列,输入一个时序上下文编码器,所述时序上下文编码器采用位置编码与transformer编码器层,对每个时刻的融合特征向量注入时间位置信息,输出时序增强的融合特征序列。
20、进一步地,所述母球阶段的质量特征提取过程包括:
21、基于所述时序增强的融合特征向量,采用mask r-cnn实例分割模型识别单个母球个体;
22、利用所述时序增强的融合特征向量作为编码特征,对每个母球个体对应的区域,通过一个回归头预测当前帧内所有母球个体的直径列表;
23、统计不同预设时间段内的直径分布特征,所述直径分布特征包括所有母球的直径数据、直径中位数、直径分布标准差、以及直径分布相对于目标直径的偏度系数,并计算直径随时间的变化率与加速度;所述偏度系数用于识别成核不均匀现象,所述变化率与加速度用于判断成核阶段;
24、将所述直径分布特征进行拼接,得到母球阶段的质量特征。
25、进一步地,所述生球阶段的质量特征提取过程包括:
26、从所述时序增强的融合特征序列中解码出每个生球的球度系数,并计算球度随时间的变化率及二阶导数,同时计算球面拟合残差的均方根,得到球度演化特征;
27、对生球点云簇进行连通域分析,计算连通域数量及每个连通域的体积与工艺目标直径对应的理想标准球体体积之比,得到粘连体积比;
28、基于所述连通域数量和所述粘连体积比计算粘连概率特征,并记录最大粘连体积比,得到粘连检测特征;
29、从二维特征中提取对比度的时间序列,计算对比度的波动方差,并提取熵值的波动幅值,得到表面质量特征;
30、将所述球度演化特征、所述粘连检测特征与所述表面质量特征进行拼接,得到生球质量特征。
31、进一步地,所述时序神经网络模型为基于物理信息嵌入的门控递归单元网络,所述时序神经网络模型的网络结构包括:物理信息嵌入层、门控递归单元、注意力交叉模块以及状态输出模块;其中,
32、所述物理信息嵌入层,用于将预设时间窗口内的母球质量特征、生球质量特征组成的原始特征向量和外部工艺参数向量进行融合编码,通过线性变换将当前时间步的原始特征向量映射为中间特征,同时通过预构建的物理耦合矩阵将外部工艺参数向量映射为物理偏置项,将所述中间特征与所述物理偏置项相加后经relu激活函数输出物理嵌入向量;
33、所述门控递归单元,用于通过多层门控递归单元将所述物理嵌入向量进行时序状态演化,得到隐状态序列;
34、所述注意力交叉模块,用于将所述隐状态序列和所述物理嵌入向量进行跨时间步的交互加权,得到增强上下文特征向量;
35、所述状态输出模块,用于通过线性全连接层和softplus激活函数将所述增强上下文特征向量映射为连续工艺状态变量;所述连续工艺状态变量包括核完成度、球度成熟度、表面质量合格度和粘连风险度。
36、进一步地,所述根据模型的输出结果判定当前工艺状态并输出判定信号,包括:
37、在预设时间长度的历史状态变量缓冲区内,计算输出结果中每一状态分量的四分位距,并基于所述四分位距计算动态阈值的上下界;
38、当每一状态分量在预设时间范围内的值,位于所述动态阈值边界内时,判定当前工艺状态处于稳定阶段;
39、基于所述核完成度、所述粘连风险度和所述偏度系数,与各自预设阈值进行比较,判定是否母球成熟;
40、基于所述球度成熟度、所述表面质量合格度、所述粘连风险度以及球度变化率和球度加速度,与各自的预设阈值进行比较,判断是否整形完成;
41、基于所述粘连风险度、所述表面质量合格度以及所述偏度系数,与各自的预设风险阈值进行比较,判断是否存在粘连风险、表面劣质风险以及成核不均匀风险。
42、进一步地,所述方法还包括基于模型预测控制方法:
43、构建工艺预测模型,基于当前工艺状态变量和当前工艺参数向量,预测未来预设步数的状态变量序列;其中,所述工艺预测模型基于深度学习算法构建得到;
44、根据模型预测控制原理,在每个控制周期,基于所述状态变量序列构建有限时域优化问题,并采用梯度投影法求解方法进行求解,生成未来预设步数的最优控制序列;
45、将当前工艺状态变量以及一阶差分的离散化编码作为当前工况特征,输入预构建的工艺知识库,得到推荐控制动作序列,并与所述最优控制序列进行加权融合,得到融合后的控制指令;其中,所述工艺知识库基于历史工艺案例中提取的规则构成,每条规则包含工况特征向量和对应的推荐控制动作序列;
46、将所述融合后的控制质量通过工业现场总线下发至对应的现场执行器,实现生球制备全过程的管控;所述现场执行器包括强混机的加水泵变频器、包衣机的变频电机及包衣机的电动推杆,分别用于调节加水流量、圆盘转速和圆盘倾角。
47、进一步的,所述工艺预测模型的构建过程包括:
48、采集历史生产运行数据,并将所述历史生产运行数据整理成包含连续工艺状态变量序列和对应的工艺参数向量序列;
49、将采集的数据进行归一化处理和按比例划分,得到模型的训练集和验证集;
50、构建单层门控递归单元网络作为预测模型,利用训练集训练模型训练所述预测模型至收敛,并在验证集上评估模型性能,选取验证损失最小的模型参数作为工艺预测模型。
51、进一步的,所述有限时域优化问题的目标函数为:
52、。
53、其中,n为预测步数,分别为第k步预测的成核完成度、球度成熟度、表面质量合格度和粘连风险度,为各目标的权重系数,为控制量变化惩罚系数,为相邻控制量的差分,表示取正值部分;约束条件包括:加水流量 l/min,圆盘转速 r/min,圆盘倾角,变化率约束,,,以及安全约束。
54、进一步的,所述推荐控制动作序列与所述最优控制序列进行加权融合,得到融合后的控制指令,包括:
55、将当前工况特征向量进行等频离散化编码,得到离散化后的工况索引;
56、在工艺知识库中检索与当前离散化工况索引相同的所有规则,对于检索到的每条规则i,计算规则i对应的工况特征向量与当前工况特征向量的余弦相似度,并作为规则i的权重;
57、计算加权平均推荐控制动作:;其中,为加权平均推荐控制动作向量,为第i条规则与当前工况的预先相似度,为第i条规则中存储的推荐控制动作向量;
58、获取模型预测控制器求解得到的最优控制序列的第一组控制动作;
59、获取工艺预测模型在最近m个采样点上的平均预测误差,若,则动态融合系数;若;否则进行线性插值;
60、根据所述平均推荐控制动作、所述第一组控制动作以及所述动态融合系数计算融合后的控制指令:。
61、第二方面,本技术提供基于多模态ai的油基岩屑陶粒生球制备管控系统,包括:数据预处理模块、特征融合模块、质量判定模块;其中,
62、所述数据预处理模块,用于采集生球制备过程中母球和生球的二维图像数据和三维点云数据,并进行数据预处理;
63、所述特征融合模块,用于从预处理后的二维数据中提取二维特征,从预处理后的三维数据中提取三维特征,并将所述二维特征与所述三维特征进行融合,得到融合特征向量;
64、所述质量判定模块,用于基于所述融合特征向量,分别提取母球阶段和生球阶段的质量特征,并将连续时间序列的质量特征数据输入时序神经网络模型,根据模型的输出结果判定当前工艺状态并输出判定信号。
65、与现有技术相比,本技术的有益效果是:
66、第一,本技术通过多维度数据预处理与多模态特征融合,提升了恶劣工况下的抗干扰能力和特征表达精度。通过灰度共生矩阵提取二维纹理特征、最小二乘球面拟合提取三维几何特征,并利用注意力机制和双线性池化进行跨模态交叉融合,使二维纹理与三维形貌相互印证,克服了单一模态对微小尺寸测量不准、表面缺陷难以量化的问题。再经transformer编码器对连续时间窗口内的融合特征注入位置信息,实现时序增强,捕捉球体运动演化规律,为质量特征提取和状态判定奠定数据基础。
67、第二,本技术在母球和生球阶段提取全面动态的质量特征,并设计物理信息嵌入的门控递归单元网络,实现工艺状态的高精度连续量化与智能判定。其中,时序神经预测模型将外部工艺参数作为物理偏置项嵌入网络,融入先验物理约束,提升球度变化率等关键状态的预测准确性;同时引入注意力交叉模块,自适应聚焦关键时刻模式。输出的连续工艺状态变量为0到1的连续量化值,结合动态阈值自适应判定,实现对母球成熟、整形终点及多级异常的精准、鲁棒、可解释的实时判定,避免传统固定阈值在不同工况下的误报或漏报。
68、第三,本技术融合模型预测控制与动态工艺知识库,实现从“感知判定”到“主动管控”的闭环智能控制,提升生球制备过程的稳定性与经济效益。基于门控递归单元构建轻量化工艺预测模型,超前预测未来多个时刻的状态变量,构建有限时域优化问题,在满足工艺约束下求解最优控制序列,实现对加水流量、圆盘转速和倾角的前瞻性调节,将事后纠正转为事前预防。同时引入基于历史优秀案例的动态工艺知识库,通过工况匹配获得经验推荐动作,与模型预测控制输出加权融合,融合系数根据预测误差动态调整,兼顾数据驱动的精确性与工艺经验的安全性。最终指令下发至强混机加水泵、包衣机电机及推杆,形成实时闭环管控,解决了人工调控响应慢、多目标冲突、极端工况失控等问题,显著提高生球质量的稳定性和一致性,降低废品率,为油基岩屑资源化利用提供了智能化、高可靠的完整解决方案。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com