使用生成式AI和强化学习的自动代码生成的制作方法
本公开总体涉及用于生成可执行代码的系统和方法,包括但不限于用于自动化系统中低层级控制的控制代码。
背景技术:
1、在配置、组装或改造自动化系统设备时,关键挑战之一是为机器的低层级控制(例如传感器和执行器)编程,以实现处理目标。将需求分解到制定过程计划、编程、测试和验证自动化系统的过程,需要一定程度的专业知识,而且根据其复杂程度可能需要大量时间。当前方法依赖于对单个设备和系统进行手动编程。需要改进的系统。
技术实现思路
1、各种所公开实施方式包括使用来自人类反馈的强化学习对自动化系统和其他设备进行编程的方法以及对应的系统和计算机可读介质。一种方法包括:由一个或多个计算机系统实现的生成式人工智能(ai)系统接收包括高层级任务描述的用户提示。方法包括:由ai系统接收与用户提示相对应的模拟环境信息,其中,模拟环境信息包括配置信息。方法包括:由ai系统生成与用户提示相对应且与配置信息一致的机器程序。方法包括:在由一个或多个计算机系统实现的模拟环境中对机器程序进行模拟。
2、各种实施方式还包括:由至少一个物理设备执行机器程序。各种实施方式还包括:由ai系统生成与用户提示相对应且与配置信息一致的低层级动作计划,并且当用户批准低层级动作计划时,根据低层级动作计划生成机器程序,并且当用户未批准低层级动作计划时,重复接收用户提示。
3、各种实施方式还包括:当用户批准经模拟的机器程序时,存储用户提示和机器程序,并且当用户未批准经模拟的机器程序时,重复接收用户提示。
4、在各种实施方式中,配置信息包括限定待编程的物理机器可用的输入、输出、设置和其他参数的信息。在各种实施方式中,配置信息包括限定能够由待编程的物理机器执行的操作的信息。在各种实施方式中,ai系统还创建待编程的物理机器的语义模型。
5、所公开的实施方式还包含包括处理器和可访问存储器的计算机系统,其特别被配置为执行本文所公开的过程。所公开的实施方式还包括以可执行指令编码的非暂时性计算机可读介质,该可执行指令在被执行时使一个或多个计算机系统执行本文所公开的过程。
6、上文已经相当宽泛地概述了本公开的特征和技术优点,以便本领域技术人员能够更好地理解下面的具体实施方式。本公开的附加特征和优点将在下文描述,这些特征和优点构成本公开权利要求书的主题。本领域技术人员应当理解,他们可以容易地将所公开的概念和具体实施方式用作修改或设计用于实现本公开相同目的的其他结构的基础。本领域技术人员还将认识到,这样的等效构造并不脱离本公开最宽泛形式的精神和范围。
7、在进入下面的具体实施方式之前,有利的做法是设定贯穿本专利文件中使用的某些词语或短语的定义:术语“包括”和“包含”及其派生词表示包括而不加限制;术语“或”是包含性的,表示和/或;短语“与……相关联”和“与其……关联”及其派生词可以表示包括、被包括在之内、与……互连、包含、被包含在……之内、连接到或连接至、耦接到或耦接至、可与……通信、与……协作、交错、并置、与……邻近、被绑定到或绑定至、具有、具有……的属性,等等;以及术语“控制器”表示控制至少一个操作的任何设备、系统或其一部分,无论该设备是以硬件、固件、软件还是其中至少两者的某种组合来实现。应当注意,与任何特定控制器相关联的功能可以是集中式或分布式的,无论是本地还是远程。贯穿本专利文件提供了某些词语和短语的定义,并且本领域普通技术人员将理解,这样的定义在许多(如果不是大多数)情况下适用于这些已定义词语和短语的先前以及将来用法。虽然某些术语可以包括各种各样的实施方式,但所附权利要求书可以明确地将这些术语限制到特定实施方式。
1.一种方法,包括:
2.根据权利要求1所述的方法,还包括由至少一个物理设备执行(228)所述机器程序(162)。
3.根据权利要求1所述的方法,还包括:
4.根据权利要求1所述的方法,还包括:
5.根据权利要求1所述的方法,其中,所述配置信息(160)包括限定待编程的物理机器可用的输入、输出、设置和其他参数的信息。
6.根据权利要求1所述的方法,其中,所述配置信息(160)包括限定能够由待编程的物理机器执行的操作的信息。
7.根据权利要求1所述的方法,其中,所述ai系统(204)还创建(212)待编程的物理机器的语义模型(166)。
8.一种计算机系统(100),包括处理器(102)和可访问的存储器(108),所述计算机系统(100)被尤其配置为执行根据权利要求1至7中任一项的过程。
9.一种非暂时性计算机可读介质(126),编码有可执行指令(152),所述可执行指令在被执行时使一个或多个计算机系统(100)执行根据权利要求1至7中任一项的过程。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com