一种基于强化学习动态调度的仓配物流一体化平台的制作方法

本发明涉及人工智能物流调度，尤其涉及一种基于强化学习动态调度的仓配物流一体化平台。

背景技术：

1、人工智能物流调度技术领域包含以计算机决策机制为核心的物流资源配置与运行控制体系，涉及订单分配运输路径规划和仓储作业协同库存状态更新以及配送执行过程中的动态调整等内容。该技术领域的核心在于以状态感知数据为基础，通过对订单需求运输节点车辆位置和仓储容量以及时间约束等要素进行统一建模，形成面向多节点多约束的调度体系，并结合连续时间序列数据实现调度策略的持续更新，从而构建覆盖仓储分拣运输配送全过程的一体化运行框架。

2、其中，基于强化学习动态调度的仓配物流一体平台是指以交互式决策过程为基础，通过状态输入动作选择和反馈更新的方式对仓储与配送环节进行统一调度的平台，主要围绕订单到达时间序列和仓库库存状态和运输车辆当前位置配送任务优先级以及时间窗口限制等具体要素进行构建，通过设定状态变量包括库存数量车辆载重路径节点顺序以及订单完成进度，定义调度动作为订单分配至指定仓库车辆路径节点选择装载顺序调整以及配送顺序排列，并依据任务完成情况与时间消耗构建反馈评价规则，从而形成在连续决策过程中不断更新的调度策略，实现仓储与运输环节在同一决策流程中的协同运行。

3、现有技术采用统一状态建模与连续反馈更新方式开展调度决策，决策结果更多体现整体运行状态变化，对于订单之间的相对时序变化趋势缺少细粒度刻画，当订单履约压力呈现阶段性差异时，相关差异难以转化为明确排序依据，同时不同作业资源之间形成的局部关联特征难以持续保留至后续调度环节，例如部分订单存在空间归属接近但时效状态变化不同的情形，仍可能被纳入相近调度位置，导致执行过程中频繁产生顺序修正需求，造成任务组织关系波动，并影响后续调度安排的连续性与执行稳定性。

技术实现思路

1、本发明的目的是解决现有技术中存在的缺点，而提出的一种基于强化学习动态调度的仓配物流一体化平台。

2、为了实现上述目的，本发明采用了如下技术方案：一种基于强化学习动态调度的仓配物流一体化平台，所述包括：

3、时间裕量分析模块，按订单编号调取作业和配送衔接数据，依拣选到车状态筛选订单，绑定巷道月台归属和调度时刻成记录，识别时序关系变化，归并同向段成状态标识序列，关联订单巷道月台归属，得到订单时间裕量对应表；

4、紧迫度排序模块，基于所述订单时间裕量对应表，读取状态标识排列位置，生成初始优先序列，调用车辆装载记录，按巷道归属成队列，比对相邻订单装载先后与调度先后，不一致则调整，依初始序列汇总保留月台归属，得到订单紧迫排序序列；

5、冲突任务编排模块，根据所述订单紧迫排序序列，读取相邻订单巷道和月台，判定同巷道或同月台冲突，标记冲突位置并划分执行片段，保留边界待编排节点，按片段顺序输出候选动作，得到可执行配送任务集合；

6、调度绩效监测模块，基于所述可执行配送任务集合，读取片段订单及车辆信息，完成后登记订单和发车结果，回填形成执行记录，比对相邻片段偏移方向并标记转折，建立前序关联记录，得到调度表现变化序列；

7、执行指令生成模块，依据所述调度表现变化序列，定位转折片段，读取未完成订单巷道月台，匹配片段清单，按片段写入执行序列，未匹配按订单紧迫排序序列接续，依车辆位置和占用月台后移冲突单，得到仓配调度执行任务序列。

8、作为本发明的进一步方案，所述订单时间裕量对应表包括订单时间裕量等级、订单履约风险等级、订单时效余量区间和订单调度关注类别，所述订单紧迫排序序列包括订单优先级排序结果、订单紧迫等级划分、订单排序位次信息和订单调度顺位信息，所述可执行配送任务集合包括配送任务执行片段、配送任务执行顺序、配送任务资源配置结果和配送任务协同关系，所述调度表现变化序列包括调度表现等级、调度趋势类别、调度异常状态信息和调度变化特征信息，所述仓配调度执行任务序列包括任务执行顺序、任务下发清单、任务资源分配结果和任务执行状态标识。

9、本发明的工作原理及优点在于：

10、本发明中，通过相邻订单时序关系变化方向构建状态标识序列，并将变化段特征与订单空间归属信息建立映射关系，使订单时间裕量差异获得结构化表达，结合调度顺位与装载顺位协同校验形成兼顾时效特征与作业衔接特征的排序结果，通过冲突位置识别形成执行片段边界，并依据执行偏移状态转折关系生成任务重组依据，使后续执行序列具备针对性调整能力，实现订单组织关系与资源占用关系的同步协调，增强任务编排连贯性与执行序列适应性，减少执行过程中顺序反复调整现象，提高仓配协同过程的稳定程度与连续运行能力。

1.一种基于强化学习动态调度的仓配物流一体化平台，其特征在于，所述平台包括：

2.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述订单时间裕量对应表包括订单时间裕量等级、订单履约风险等级、订单时效余量区间和订单调度关注类别，所述订单紧迫排序序列包括订单优先级排序结果、订单紧迫等级划分、订单排序位次信息和订单调度顺位信息，所述可执行配送任务集合包括配送任务执行片段、配送任务执行顺序、配送任务资源配置结果和配送任务协同关系，所述调度表现变化序列包括调度表现等级、调度趋势类别、调度异常状态信息和调度变化特征信息。

3.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述时间裕量分析模块包括：

4.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述紧迫度排序模块包括：

5.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述冲突任务编排模块包括：

6.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述调度绩效监测模块包括：

7.根据权利要求6所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述调度时间顺序比对相邻执行片段登记顺序相对于片段顺序基准的前移状态和后移状态的过程具体为：

8.根据权利要求6所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述判断偏移方向是否由前移状态转为后移状态的过程具体为：

9.根据权利要求1所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述平台还包括：

10.根据权利要求9所述的基于强化学习动态调度的仓配物流一体化平台，其特征在于：所述执行指令生成模块包括：