对数加法-累加器电路系统、包括其的处理流水线以及操作方法与流程

对数加法-累加器电路系统、包括其的处理流水线以及操作方法
1.相关申请
2.本非临时申请要求于2019年12月4日提交的标题为“logarithmic addition-accumulatorcircuitry，processing pipeline includesame and method of operating same”的美国临时专利申请no.62/943,336的优先权和权益。'336临时申请在此通过引用整体并入本文。


背景技术：

3.本文描述和图示了许多发明。本发明既不限于任何单个方面或其实施例，也不限于这些方面和/或实施例的任何组合和/或排列。重要的是，本发明的每个方面和/或其实施例可以单独使用或与本发明的其它方面和/或其实施例中的一个或多个组合使用。其所有组合和排列旨在落入本发明的范围内。
4.在一个方面，本发明涉及具有对数加法-累加器电路系统的一个或多个集成电路(以及操作这种电路系统的方法)，其中至少部分地基于例如与推理操作相关的对数数据格式来处理数据(例如，图像数据)。在一个实施例中，本发明包括例如串联互连的多个对数加法-累加器电路(在本文中有时称为“多个lac”或“多个lac电路”，并且单数/单独称为“lac”或“lac电路”)以将对数加法和累加操作流水线化。在一个实施例中，本发明包括电路系统，该电路系统用于将具有第一或初始数据格式(例如，浮点数据格式或定点数据格式)的输入数据/值转换或变换成对数数据格式(例如，具有底数2)，并部分地经由对数加法处理具有对数数据格式的数据。在一个实施例中，转换电路系统通过将每个输入数据/值的分数域的值从浮点数据格式重新映射到其值的对数来改变、变换和/或转换输入数据/值的数据格式。
5.例如，在操作中，对数数据格式的输入数据/值被加到也是对数数据格式(例如，具有底数2)的图像过滤器权重或系数。在图像数据处理中采用的过滤器权重或系数可以以对数数据格式存储在存储器中或以与对数数据格式不同的格式存储在存储器中并在处理之前(例如，紧接在处理之前)转换或变换成对数数据格式。在一个实施例中，转换电路系统通过将每个过滤器权重的分数域的值从浮点数据格式重新映射到分数域的值的对数来改变、变换和/或转换过滤器权重的数据格式。
6.在对数加法之后，和数据可以被转换或变换成另一种/不同的数据格式(例如，浮点格式或定点格式——例如，回到输入数据的数据格式——但是，值的长度可能相同或不同)用于附加/后续处理。例如，对数数据格式的处理后的图像数据可以被转换或变换成浮点数据格式(即，与输入数据的数据格式相同的数据格式)。此后，可以进一步处理具有浮点数据格式的部分处理的数据以实现例如与推理操作相关的图像数据处理的累加操作。值得注意的是，在一个实施例中，转换电路系统通过将每个数据/值的分数域的值从对数数据格式重新映射到浮点数据格式来改变、变换和/或转换和数据的数据格式。
7.另一方面，本发明涉及一个或多个集成电路(以及操作这种电路的方法)，包括多
个执行或处理流水线，具有对数加法-累加器电路系统(有时称为“对数加法-累加电路系统”)，它基于对数数据格式处理数据以例如生成处理后的图像数据。例如，每个执行或处理流水线包括用于处理数据的多个对数加法-累加器电路，例如，如上所述。在一个实施例中，在操作中，图像数据(其可以是浮点数据格式)被提供给多个执行或处理流水线，每个流水线包括多个对数加法-累加器电路。在此，数据(例如，具有浮点或定点数据格式的图像数据)最初被(经由格式转换电路系统)转换或变换成对数数据格式，然后数据经由多个对数加法-累加器电路系统的对数加法/加法器电路系统被加到相关联的图像过滤器权重或系数(其处于或已经变换/转换成对数数据格式)。在一个实施例中，对数加法/加法器电路系统的输出(即，和数据)被应用或提供给格式转换电路系统，以将来自对数加法/加法器电路系统的和/输出的对数数据格式转换或变换成不同的数据格式——例如，促进处理电路系统的后续处理或与处理电路系统的后续处理一致的数据格式(例如，浮点数据格式)。在这方面，随后可以经由多个对数加法-累加器电路系统的累加器电路系统进一步处理例如浮点数据格式的对数加法-累加器电路系统的和/输出，以实现处理电路系统的累加操作。累加器电路系统累加例如与推理操作相关的多个相关联的部分处理的图像数据。值得注意的是，多个执行或处理流水线可以并发工作或操作。
8.多个对数加法-累加器电路可以包括多个寄存器(包括多个影子寄存器)，以实现或促进由对数加法-累加器电路执行的乘法和累加操作的流水线化，从而增加与处理输入数据(例如，图像数据)相关的对数加法-累加器执行或处理流水线的吞吐量。值得注意的是，本发明可以采用美国专利申请no.16/545,345中描述和图示的一种或多种电路体系架构，其中对数加法电路是乘法电路的替代，或作为其附加，以便实现如本文所述的对数加法电路系统。将如本文描述和图示的对数加法电路实现到这样的电路体系架构(包括多个寄存器(例如，影子寄存器)中促进级联与本发明一致的对数加法和累加操作。以这种方式，多个对数加法-累加器电路可以被配置和/或重新配置为以更快速和/或高效地执行处理和操作的方式来处理数据(例如，图像数据)。'345申请通过引用整体并入本文。
9.在又一方面，本发明涉及一个或多个集成电路，其具有用于实现对数加法和累加操作以及乘法和累加操作的电路系统。在此，一个或多个集成电路包括用于执行对数加法和累加操作(例如，如本文所讨论的)的对数加法-累加器电路系统和用于执行乘法和累加操作(例如，如下文详细讨论的)的乘法器-累加器电路系统。一个或多个集成电路可以包括模式选择电路系统以控制(即，启用和/或禁用)对数加法-累加器电路系统和乘法器-累加器电路系统的可操作性和/或操作，从而选择用于处理例如与推理操作相关的图像数据的电路系统。在这方面，模式选择电路系统控制或确定数据处理，以及其中采用的电路系统，包括对数加法-累加器电路系统或乘法器-累加器电路系统。
10.在一个实施例中，模式选择电路系统可以是一次性可编程的；在另一个实施例中，模式选择电路系统是不止一次可编程的(即，多次)。模式选择电路系统可以例如在原位(即，在集成电路的操作期间)、在制造时和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或在其期间进行编程。例如，模式选择电路系统可以从包括一个或多个数据存储电路(例如，一个或多个存储器单元、寄存器、触发器、锁存器、存储器块/阵列)、一个或多个输入引脚/导体、(任何类型的)查找表lut、处理器或控制器和/或离散控制逻辑的内部或外部电路系统(即，在一个或多个集成电路外部-例如，主机计算机/处理器)接收模式选择
信号。响应于此，模式选择电路系统可以使用这样的(一个或多个)信号来启用或禁用所选择的处理电路系统(视情况而定)，从而(例如，在原位和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或在其期间)实现处理模式之一(即，对数加法和累加操作或乘法和累加操作)。
11.值得注意的是，在处理电路系统包括对数加法-累加器电路系统和乘法器-累加器电路系统两者的情况下，这样的电路系统可以共享一个或多个电路，并且由此，各自的电路系统可能不是完全分离和不同的。例如，对数加法-累加器电路系统的数据路径和乘法器-累加器电路系统的数据路径可以共享与过滤器权重或系数相关联的电路系统以及执行上述累加操作的电路系统。此外，当在具有处理具有对数数据格式的数据的对数加法-累加器电路系统以及处理具有浮点或定点格式的数据的乘法器-累加器电路系统的的多个执行或处理流水线中实现多个各自的电路系统的情况下，数据路径可以共享集成电路的大部分电路系统
‑‑
除了例如数据格式转换电路系统(即，将数据转换成对数数据格式/从对数数据格式转换的电路系统)、对数加法-累加器电路系统的对数加法电路系统和乘法器-累加器电路系统的乘法电路系统之外。在这个实施例中，这样的执行或处理流水线可以结合对数加法-累加器电路系统或乘法器-累加器电路系统来处理例如与推理操作相关的图像数据。
12.本发明的电路系统可以设置在(一个或多个)集成电路上或(一个或多个)集成电路中，例如，(i)处理器、控制器、状态机、门阵列、片上系统(“soc”)、可编程门阵列(“pga”)和/或现场可编程门阵列(“fpga”)，和/或(ii)包括嵌入式fpga的处理器、控制器、状态机和soc，和/或(iii)集成电路(例如，处理器、控制器、状态机和soc)-包括嵌入式处理器、控制器、状态机和/或pga。实际上，本发明的电路系统可以设置在专门地专用于这种电路系统的(一个或多个)集成电路上或(一个或多个)集成电路中。
附图说明
13.本发明可以结合其附图中所示的实施例来实现。这些附图示出了本发明的不同方面，并且在适当的情况下，在不同图中图示类似电路、体系架构、结构、组件、材料和/或电路的参考标号、命名法或名称被类似地标记。应该理解的是，结构、组件、材料和/或电路的各种组合，除了那些具体示出的之外，都被考虑并且在本发明的范围内。
14.此外，本文描述和图示有许多发明。本发明既不限于任何单个方面或其实施例，也不限于这些方面和/或实施例的任何组合和/或排列。此外，本发明的每个方面和/或其实施例可以单独使用或与本发明的其它方面和/或其实施例中的一个或多个组合使用。为简洁起见，本文未单独讨论和/或图示某些排列和组合。值得注意的是，本文描述为“示例性”的实施例或实施方式不应被解释为例如相对于其它实施例或实施方式是优选的或有利的；而是，它旨在反映或指示(一个或多个)实施例是(一个或多个)“示例”实施例。
15.值得注意的是，本文描述和/或在图中图示的配置、块/数据宽度、数据路径宽度、带宽、数据长度、值、处理、伪代码、操作和/或算法，以及与其相关联的文本是示例性的。实际上，本发明不限于任何特定或示例性的电路、逻辑、块、功能和/或物理图、在执行流水线中采用的乘法器-累加器电路的数量、在特定处理配置中采用的执行流水线的数量、存储器的组织/分配、块/数据宽度、数据路径宽度、带宽、值、处理、伪代码、操作和/或根据例如示例性电路、逻辑、块、功能和/或物理图图示和/或描述的算法。实际上，虽然本发明的若干示
例性实施例和特征在浮点数据格式(例如，fp16或fp24)和对数数据格式(例如，ll8或ll16)的上下文中进行图示，但实施例和发明适用于其它精度(例如，fpxx，其中：8≤xx≤39)和llxx，其中：8≤xx≤24)。为简洁起见，除了本文所示和/或描述的那些之外的精度旨在落入本发明的范围内，并且基于例如本技术对于本领域技术人员将是非常清楚的。
16.此外，虽然说明性/示例性实施例包括被指派、分配和/或用于存储某些数据和/或在某些组织中的多个存储器(例如，l3存储器、l2存储器、l1存储器、l0存储器)，但是可以添加一个或多个存储器，和/或可以省略和/或组合/合并一个或多个存储器-例如，l3存储器或l2存储器，和/或可以改变、补充和/或修改组织。本发明不限于在申请中阐述的存储器组织和/或分配的说明性/示例性实施例。同样，本发明不限于本文阐述的说明性/示例性实施例。
17.图1a图示了根据本发明的一个或多个方面的以线性流水线配置连接的示例性对数加法-累加器执行流水线的逻辑概述的示意框图，其中对数加法-累加处理或执行流水线(“lac流水线”)包括以框图形式图示的对数加法-累加器电路系统；值得注意的是，对数加法-累加器电路系统包括一个或多个对数加法-累加器电路(“多个lac”(或单数/单独的“lac”)-示例性对数加法-累加器电路(有时也称为“对数加法-累加电路”)在插图a中以示意框图的形式图示)；在该示例性实施例中，“m”(例如，在说明性实施例中为64)个对数加法-累加器电路连接在线性执行流水线中以并发操作，由此，处理电路在每m(例如，64)周期间隔(在此，周期名义上可以是1ns)中执行m x m(例如，64x64)个对数加法和累加操作；值得注意的是，每m(例如，64)周期间隔处理在特定(i,j)位置(这个示例性实施例的宽度dw/yw和高度dh/yh维度的索引
‑‑
dw＝512、dh＝256和dd＝128，并且yw＝512、yh＝256和yd＝64)处的dd/yd(深度)列的输入和输出像素/数据，其中对于这个阶段的每个dw*dh深度列重复m(例如，64)周期执行间隔；此外，在一个实施例中，在对数加法-累加器电路系统开始处理之前(参见例如'345申请，如上所述，通过引用并入本文)，对数数据格式的过滤器权重或权重数据加载到存储器中(例如，l1/l0
–
诸如(一个或多个)sram存储器)；此外，在这个实施例中，采用格式转换电路系统将输入数据(dd)和过滤器权重(fkl)的数据格式从第一数据格式(例如，浮点数据格式或定点数据格式(例如，整数或块缩放分数数据格式)转换成对数数据格式，以促进在执行流水线的lac中处理；
18.图1b图示了根据本发明一个实施例的示例性对数加法-累加器电路系统(有时也称为“对数加法-累加电路系统”)的示例性逻辑概述的示意性框图，该对数加法-累加器电路系统包括以对数数据格式执行输入数据和过滤器权重两者的对数加法操作的对数加法电路系统(“mul”)和以浮点数据格式执行累加/加法操作的累加器电路系统(“add”)；在这个实施例中，数据格式转换电路系统被用于将输入数据/值转换成对数数据格式(fpxx到llxx(例如，fp24到ll16)；而且，数据格式转换电路系统被用于将对数加法电路系统的输出从对数数据格式转换成浮点数据格式，以促进示例性对数加法-累加器电路的附加数据处理；在此，对数加法电路系统的对数数据格式的输出数据/值(和数据)被转换或变换成不同的数据格式(例如，初始数据格式，例如浮点格式或定点格式—虽然在某些实施例中，位长可以改变)以进行后续处理；值得注意的是，虽然这个说明性示意框图提供了数据和操作的位精度，但这种位精度是示例性的并且本发明不限于(i)对数数据格式(llxx，其中：xx是整数)、浮点格式(fpxx，其中：xx是整数)、定点格式(例如，块缩放分数数据格式“bsf”)、块/数
据宽度、数据路径宽度、带宽和/或值的特定位精度，(ii)特定电路系统和/或整体流水线的示例性逻辑或物理概述配置，和/或(iii)示例性模块/电路系统配置和/或流水线体系架构；实际上，在一个实施例中，示例性对数加法-累加器电路可以包括两个专用存储器组(即，组0和组1)以存储至少两个不同的过滤器权重的集合—每个过滤器权重的集合与数据的集合相关联并用于处理数据的集合)，其中每个存储器组可以被交替读取以用于处理给定的关联数据的集合并在处理给定的关联数据的集合之后被交替写入并为后续处理(例如，下一个关联数据的集合)做准备；
19.图1c图示了根据本发明的某些方面的包括多个多位lac执行流水线的集成电路或集成电路的一部分(有时可以称为“x1组件”)的高级框图布局，多位lac执行流水线具有多个对数加法-累加器电路系统，每个对数加法-累加器电路系统实现对数加法和累加操作；多位lac执行流水线和/或多个对数加法-累加器电路可以被配置为实现一个或多个处理体系架构或技术(单个/单独地或与一个或多个x1组件组合)；在这个说明性实施例中，多位lac执行流水线被组织成集群(在这个说明性实施例中，四个集群，其中每个集群包括多个多位lac执行流水线(在这个说明性实施例中，每个集群包括16个64-lac执行流水线(以下也可以单独称为lac处理器))；在一个实施例中，多个对数加法-累加器电路系统是可配置或可编程的(一次或多次，例如，在启动时和/或在原位)以实现一个或多个流水线化处理体系架构或技术(参见例如右下角的图1c的高级框图的一部分的扩展视图是单个lac执行流水线(在说明性实施例中，包括例如64个对数加法-累加器电路系统(“lac”)-也可以被称为lac处理器)，该单个lac执行流水线与以线性执行流水线配置布置的示例性对数加法-累加器电路系统的逻辑概述的示意性框图(-参见图1a)相关)；这个说明性实施例中的处理组件包括：存储器(例如，l2存储器、l1存储器和l0存储器(例如，sram))，总线接口(例如，phy和/或gpio)，用于促进与组件和用于存储和供组件的电路系统使用的存储器(例如，sram和dram)外部的电路系统的通信，以及多个开关/多路复用器，所述多个开关/多路复用器电互连以形成开关互连网络“片上网络”(“noc”)以促进lac执行流水线的对数加法-累加器电路的集群的互连；在一个实施例中，noc包括开关互连网络(例如，混合模式互连网络(即，分层开关矩阵互连网络和网状、环面等互连网络)(下文中统称为“网状网络”或“网状互连网络”))、相关联的数据存储电路、输入引脚和/或在被编程时确定开关/多路复用器的操作的查找表(lut)；在一个实施例中，一个或多个(或所有)集群包括一个或多个计算电路(例如，多个对数加法-累加器电路系统-标记为“nmax行
”‑
参见例如'345申请，其中除了数据格式电路系统之外，对数加法电路系统是乘法器电路系统的替代品)；值得注意的是，在一个实施例中，每个lac执行流水线(在一个实施例中，由多个串联互连的对数加法-累加器电路组成)连接到专用于那个处理流水线的相关联的l0存储器(例如，sram存储器)；相关联的l0存储器存储由那个特定lac处理流水线的每个对数加法-累加器电路的对数加法电路系统在执行对数加法操作时使用的过滤器权重，其中给定集群的每个lac处理流水线连接到相关联的l0存储器(在一个实施例中，其专用于那个lac处理流水线的对数加法-累加器电路
–
在这个说明性实施例中，lac处理流水线中的64个lac)；lac集群的多个(例如，16个)lac执行流水线(并且特别是集群的每个lac执行流水线的l0存储器)耦合到相关联的l1存储器(例如，sram存储器)；在此，相关联的l1存储器连接到集群的每个lac执行流水线并由其共享，以接收存储在与集群的每个lac执行流水线相关联的l0存储器中的过滤器权重；在一个实
施例中，相关联的l1存储器被指派并专用于lac集群的多个流水线；值得注意的是，每个64-lac执行流水线的移入和移出路径耦合到l2存储器(例如，sram存储器)，其中l2存储器还耦合到l1存储器和l0存储器；noc将l2存储器耦合到phy(物理接口)，phy(物理接口)可以连接到l3存储器(例如，外部dram)；noc还耦合到pcie或phy，pcie或phy进而可以提供与x1处理组件外部的电路系统(例如，外部处理器，诸如主机计算机中的处理器)的互连或通信；在一个实施例中，根据本发明的一个或多个方面，noc还可以连接多个x1组件(例如，经由gpio输入/输出phy)，这些允许多个x1组件处理相关数据(例如，图像数据)，如本文所讨论的；
20.图1d图示了示例性乘法器-累加器电路和示例性对数加法-累加电路系统(有时称为“对数加法-累加器电路系统”)的示例性逻辑概述的示例性示意框图；
21.图1e图示了根据本发明一个实施例的示例性对数加法-累加执行或处理电路的示例性逻辑概述的示意框图，包括以16位对数数据格式(ll16 mul)执行操作的对数加法电路系统(mul)、将对数数据格式的(和数据)转换或变换成例如浮点数据格式的格式转换电路系统，以及执行累加/加法操作的累加器电路系统(add)，在一个实施例中以24位浮点格式(fp24 add)；值得注意的是，处理电路系统和操作的位宽是示例性的-即，在这个说明性实施例中，数据和过滤器权重采用16位对数数据格式(ll16)，其中转换电路系统可以改变或修改(例如，增加或减少)输入数据和过滤器权重的位宽；如上面所指示的，对数加法电路系统和浮点累加器分别以16位(ll16)和24位浮点数据格式(fp24)执行操作；其它浮点格式或宽度精度也适用(例如，8、16和32位)；如上所述，在一个实施例中，对数加法电路系统和/或浮点累加器采用的精度/格式可以取决于可用/分配的存储器带宽、可用/分配的布线带宽，和/或例如集成电路内可用于/分配给处理电路系统的浮点电路系统以存储、传送/读取和/或处理数据(例如，部分处理和待处理的数据)的区域的量；值得注意的是，本发明可以经由可以配置有相同精度宽度或不同精度宽度/格式的浮点执行电路系统来实现；
22.图1f和1g图示了根据本发明某些实施例的示例性对数加法-累加器执行或处理流水线(参见图1a和1c)的示例性逻辑概述的示意框图，其中每个对数加法-累加器电路包括以对数数据格式执行操作的对数加法电路系统和/或以浮点格式执行操作的累加器电路系统；在一个实施例中，在图1f中，采用数据格式转换电路系统将输入数据转换成对数数据格式(fpxx到llxx(例如，fp24到ll16)；在另一个实施例中，在图1g中，采用数据格式转换电路系统将输入数据和过滤器权重转换成对数数据格式(fpxx到llxx(例如，fp24到ll16，和fp8到ll16))；在这些示例性实施例中，对数加法-累加器电路可以包括多个存储器组(例如，sram存储器组)，其专用于对数加法-累加器电路以存储由相关联的对数加法-累加器电路的对数加法电路系统使用的过滤器权重；在一个说明性实施例中，lac执行或处理流水线包括64个对数加法-累加器电路(参见图1a和1c)；值得注意的是，在这个示例性对数加法-累加器执行或处理流水线的线性流水线配置的逻辑概述中，多个处理(lac)电路系统(“p”)连接在执行流水线中并且并发地操作；例如，在p＝64的一个示例性实施例中，对数加法-累加器处理电路在每64周期间隔中执行64x64个对数加法-累加操作；此后，在相同的64周期间隔期间，接下来的64个输入像素/数据被移入，而先前的输出像素/数据被移出；值得注意的是，在一个实施例中，每个对数加法-累加器电路可以包括两个专用存储器组以存储至少两个不同的过滤器权重的集合-每个过滤器权重的集合与数据的集合相关联并用于处理数据的集合)，其中每个存储器组可以被交替读取以用于处理给定的关联数据的集合并在处理
给定的关联数据的集合之后被交替写入；在阶段处理开始之前将过滤器权重或权重数据从例如外部存储器或处理器加载到存储器(例如，l1/l0 sram存储器)中(例如，参见'345申请)；值得注意的是，本发明的对数加法-累加器电路和电路系统可以互连或实现在一个或多个对数加法-累加器执行或处理流水线中，包括例如美国临时专利申请no.63/012,111中描述和/或图示的与mac处理流水线相关的执行或处理流水线；'111申请通过引用整体并入本文；如上所述，lac和lac流水线替代'111申请中描述和/或图示的示例性处理流水线中的mac和mac流水线；
23.图1h图示了根据本发明的一个实施例的示例性对数加法-累加器电路的示例性逻辑概述的示意性框图，其包括对都以对数数据格式的输入数据和过滤器权重执行对数加法操作的对数加法电路系统(“mul”)，以及例如在这个实施例中以浮点数据格式执行累加/加法操作的累加器电路系统(“add”)；在这个实施例中，采用数据格式转换电路系统将输入数据和过滤器权重转换成对数数据格式(fpxx到llxx(例如，fp24到ll16，fp8到ll16))；而且，采用格式转换电路系统将对数加法电路系统的输出从对数数据格式转换成浮点数据格式，以促进示例性对数加法-累加器电路的附加数据处理；在此，对数数据格式的对数加法电路系统的输出数据/值(和数据)被转换或变换成不同的数据格式(例如，初始数据格式，例如，浮点格式或定点格式-虽然在某些实施例中，位长可以改变)用于后续处理；值得注意的是，虽然这个说明性示意框图提供了数据和操作的位精度，但这种位精度是示例性的，并且本发明不限于(i)对数数据格式(llxx，其中：xx是整数)、浮点格式(fpxx，其中：xx是整数)、定点格式(例如，块缩放分数数据格式“bsf”)的特定位精度)、块/数据宽度、数据路径宽度、带宽和/或值的特定位精度，(ii)特定电路系统和/或整体流水线的示例性逻辑或物理概述配置，和/或(iii)示例性模块/电路系统配置和/或流水线体系架构；
24.图2a图示了根据本发明某些方面的具有查找表的示例性数据格式转换电路系统的示意/流程框图，该查找表存储使数据/值(在这个示例性实施例中，以浮点数据格式)与对数数据格式的“等效”值等同的预先计算和/或编码的值；在此，对于每个数据/值，适当的输出值被预先计算(和编码)并编译到格式转换查找表中(使用y＝log2(x)计算技术)，然后存储在存储器(例如，非易失性只读存储器，诸如rom或闪存)中；在这个说明性实施例中，查找表包含浮点数据格式(具体为fp16)和对数数据格式(具体为ll16)之间的相关性；可以使用现在已知或以后开发的任何电路系统和/或技术预先计算表的内容；值得注意的是，ll16和fp16格式的指数域“e”是相似的-它是偏置值，表示数字(即，“2^(e-ebias)”)的指数基数的整数值，其中“e-ebias”值是数字的整数的以2为底数的对数；而且，标准浮点格式将e域中的这个整数对数与f域中的二进制分数(也称为尾数或有效数)混合以(近似)表示真数，并且对数浮点格式混合e域中的整数对数与g域中的分数对数以(近似)表示真数；
25.图2b图示了根据本发明某些方面的将数据/值从浮点数据格式转换成对数数据格式的另一个示例性数据格式转换电路系统的示意/流程框图，其中转换电路系统包括查找表，该查找表存储使数据/值(在这个示例性实施例中，具有浮点数据格式)与具有对数数据格式(使用y＝log2(x)计算技术)的“等效”数据值等同的预先计算和/或编码的值；在这个示例性实施例中，对于每个数据/值，“等效”值被预先计算(和编码)并以格式转换查找表形式存储在存储器(例如，非易失性只读存储器，诸如rom或闪存)中；在这个说明性实施例中，查找表包含浮点数据格式(具体为fp24)和对数数据格式(具体为ll16)之间的相关性；可以
使用现在已知或以后开发的任何电路系统和/或技术预先计算表的内容；在这个实施例中，分数域(f)经由舍入逻辑被舍入(在此，从15位值到7位值)；值得注意的是，ll16和fp16格式的指数域“e”是相似的-它是偏差值，表示数字(即，“2^(e-ebias)”)的指数基数的整数值，其中“e-ebias”值是数字的整数的以2为底数的对数；而且，标准浮点格式将指数域中的这个整数对数与分数域“f”中的二进制小数(也称为尾数或有效数)混合以表示或近似表示真数，并且对数浮点格式混合指数域中的整数对数与对数值域“g”中的分数域对数以表示真数；
26.图3a、3c和3d分别图示了根据本发明某些方面的示例性数据格式转换电路系统的示意/流程框图和对应的电路框图，其中逻辑电路系统使用y＝log2(x)计算技术将具有浮点数据格式的数据/值(输入)转换或变换成具有对数浮点数据格式的数据/值(输出)；在这个实施例中，数据/值的分数域(f)通过逻辑门和多路复用器(mux块)进行调整；在fp16到ll16转换电路系统中，分数域的转换使用用于将域的值转换成对数浮点数据格式的大约30个逻辑门(图3a中的逻辑块和图3c中的逻辑1)，x位加法器(add或add块)和x位多路复用器(例如，x＝7，参见图3c)；值得注意的是，图3c中所示的数据格式转换电路系统的实施例是图3a中所示的数据格式转换框图的电路框图实施方式-实现y＝log2(x)计算方法以提供浮点数据格式到对数浮点数据格式的具有中等水平精度的数据转换；类似地，图3d中所示的数据格式转换电路系统的实施例是图3a中所示的数据格式转换框图的电路框图实施方式-实现y＝log2(x)计算方法以提供浮点数据格式到对数浮点数据格式的具有高水平精度的数据转换(即，相对于图3c中所示的实施例具有更高水平的精度)；在一个实施例中，图3d的精度的水平是从浮点数据格式到对数数据格式的32或64位精度；结果是转换值可以正确地舍入到目标格式；
27.图3b图示了根据本发明某些方面的示例性数据格式转换电路系统的示意/流程框图，其中逻辑电路系统使用y＝log2(x)计算技术将具有浮点数据格式的数据/值(输入)转换或变换成具有对数浮点数据格式的数据/值(输出)；在这个实施例中，数据/值的分数域(f)经由舍入逻辑进行舍入(在此，从15位值到7位值)，并且用逻辑门和多路复用器(mux块)进行调整；在fp24到ll16转换电路系统中，分数域的转换采用逻辑将域的值转换成对数浮点数据格式；值得注意的是，作为图3a-3d的计算技术的附加，或者作为其替代，本发明还可以采用外推技术将数据格式从浮点数据格式转换成对数浮点数据格式；
28.图4a和4b分别图示了根据本发明某些方面的示例性数据格式转换电路系统的示意/流程框图和对应的电路框图，其中逻辑电路系统将具有对数数据格式和第一位长的数据/值(输入)转换或变换成具有对数浮点数据格式和第二位长的数据/值(输出)；在一个实施例中，可以采用在此所示的转换电路系统将对数数据格式(例如，ll8-具有用于符号(1位)、指数(3位)和分数(4位)的8位的对数数据格式)的过滤器权重或系数转换成具有更大动态范围和精度的对数数据格式(例如，例如，ll8
–
具有用于符号(1位)、指数(8位)和分数(7位)的16位的对数数据格式)的过滤器权重或系数；该转换技术经由逻辑电路系统、y位加法器和一个或多个多路复用器(参见图4b)使ll8输入格式的指数和分数域中的位数大约加倍；值得注意的是，三个结果域可能还需要使用多路复用器的行替换的特殊值、操作数或字符)；而且，多路复用器在指定为“x”对数数据格式(ll8x)、“y”对数数据格式(ll8y)和“z”对数数据格式(ll8z)的三(3)种替代转换之间进行选择；
29.图5a-5c分别图示了根据本发明某些方面的示例性对数加法/加法器电路系统的示意/流程框图和对应的电路框图，其中电路系统接收各自具有对数数据格式的两个操作数/值(输入-在这个说明性示例中，图像/输入数据和过滤器权重/系数)，并且将操作数/值相加以生成和或结果(输出)；在这个实施例中，输入的符号域被xor，指数域的值相加(如果舍入导致分数上溢，那么递增)，并且两个分数域(以对数形式)相加在一起(经由2的补码)-在这个实施例中，使用7位定点加法器；值得注意的是，图5b图示了图5a中所示的对数加法电路系统的详细示例性电路框图，其中图5c提供了图5b中所示的某些逻辑块的细节(参见“逻辑1”、“逻辑2”和“逻辑3”)；图5b中所示的对数加法电路系统(ga gb)可以由实现其它功能(诸如倒数、平方根、幂函数)的电路系统代替或补充，其中，在操作数为对数数据格式之后，可以实现其它操作或功能(例如，除法a/b可以通过执行ga-gb来执行(连同指数ea-eb的减法，而不是对于乘法的加法ea eb)；
30.图6a图示了根据本发明某些方面的示例性数据格式转换电路系统的示意/流程框图，该电路系统具有查找表，该查找表存储使对数数据格式中的数据/值与另一种数据格式(在这个示例性实施例中，采用浮点数据格式)的“等效”值等同的预先计算和/或编码的值；在此，对于每个数据/值，适当的输出值被预先计算(和编码)并编译在格式转换查找表中(使用y＝2
x
计算技术)，然后存储在存储器(例如，非易失性、只读存储器，诸如rom或闪存)中；在这个说明性实施例中，查找表包含对数数据格式(具体为ll16)和浮点数据格式(具体为fp16)之间的相关性；可以使用现在已知或以后开发的任何电路系统和/或技术预先计算表的内容；
31.图6b图示了根据本发明某些方面的示例性数据格式转换电路系统的示意/流程框图，其中逻辑电路系统使用y＝2
x
计算技术将具有对数数据格式的数据/值(输入)转换或变换成具有浮点数据格式的数据/值(输出)；在这个实施例中，数据/值的分数域(g)用逻辑门、加法器(add块)和多路复用器(mux块)进行调整。
32.图6c-6e图示了图6b的示例性数据格式转换电路系统的示意/流程框图的电路框图，其中每个电路框图提供不同水平的精度；在一个实施例中(图6c)，具有中等精度的ll16到fp16转换电路系统可以使用例如大约30个逻辑门、x位加法器和x位多路复用器(例如，x＝7)来实现分数域的转换；在另一个实施例中(图6d)，具有比图6c的实施例更高的精度的ll16到fp16转换电路系统可以使用y＝2^x计算技术来实现转换电路系统；在一个实施例中(图6e)，经由转换电路系统从ll16到fp16的转换的精度的水平大于图6c和6d的实施例，其中对数数据格式到浮点格式转换电路系统提供从对数数据格式到浮点数据格式的数据转换的精度的水平(在此，计算y＝2^x)-例如，32位或64位精度；如上所述，本发明可以采用任何数据格式转换电路系统或方法来将图像/输入数据的数据格式转换、修改、扩展/收缩和/或调整为现在已知或以后开发的对数数据格式-所有这些都旨在落入本发明的范围内；
33.图7图示了具有不同宽度或长度(包括相应范围)的示例性浮点数据格式，以及具有不同宽度或长度(包括相应范围)的示例性对数数据格式，其中对数数据格式可以“等效”于浮点数据格式；值得注意的是，这三种对数数据格式对符号域s和分数域g使用符号量值数值格式，其中分数域g的最高权重为0.5，并且没有隐藏(隐式)位，因此它包括非归一化的值；指数域是二的补码数值格式，添加了127的偏置；最小和最大指数值被保留用于特殊操作数或字符(nan、inf、dnrm、zero)；
34.图8图示了用于对数数据格式(ll16)的示例性数字空间，其中为特殊操作数(nan、inf、zro)保留最小和最大指数e[7:0]；当发生未定义的操作(0*∞或∞-∞)时，生成nan值；
±
inf值是指数上溢的饱和值；
±
zro值是指数下溢的饱和值。exp[7:0]＝8'b00000000)示出与浮点数据格式(fp16)的dnrm值对应的binade，其中，除了g[1:7]＝7'b0000000保留用于zro之外，它的响应与其它binade一样；
[0035]
图9a图示了根据本发明某些实施例的用于具有1位符号域(s)、3位指数域(e)和四位分数域(f)的对数数据格式(ll8y)的示例性编码技术，如结合某些数据(例如，过滤器权重/系数)实现的-例如，与采用查找表的转换电路系统的实施方式相关；值得注意的是，可以采用、提供和/或生成与其它对数数据格式(例如，ll8x和ll8z)相关的相似或对应的查找表；
[0036]
图9b和9c分别图示了根据本发明某些方面的实施例的用于对数数据格式(ll8y)的编码技术的选择的部分，如图9a中所识别的；
[0037]
图10a图示了用于具有1位符号域(s)、3位指数域(e)和四位分数域(f)的对数数据格式(ll8y)的示例性编码技术，如结合本发明某些实施例的某些数据(例如，过滤器权重/系数)实现的-例如，与实现查找表的数据格式转换电路系统相关；在这个图示中，根据本发明的一个实施例，示例性浮点格式(ll8y)包括(例如，动态地)可配置的范围和精度；值得注意的是，描绘了对数数据格式ll16的水平线下方的“可允许的”数字空间与ll8x、ll8y和ll8z的对数数据格式相关地以图形方式表示；ll8y的范围和精度包括中心四个binade(-2到 2)，它具有与fp8格式相同的精度(4位)
‑‑
但是与fp8不同的是，ll8y格式的精度对称衰减；在从-11到-8的三个binade和从 8到 10的两个binade中有零位精度(单个值)；ll8y的对称衰减与用于图像过滤应用的数据权重值分布中所看到的衰减相似；相比之下，int8格式在负方向上的binade有衰减，但在正方向上的binade的宽度中有硬边缘；描绘了ll8x格式，其中在中间的两个binade(-1到 1)中，它比ll8y格式多一位精度(5位)；与ll8y一样，ll8x格式的精度对称衰减。从-5到-6的binade和 5的binade中有零位精度(单个值)；此外，还描绘了ll8z格式，其中在中心的八个binade(-4到 4)中，它的精度比前面讨论的ll8y格式少一位(3位)；与ll8y格式一样，ll8x格式的精度对称衰减；此外，从-19到-12的binade和从 12到 18的binade中存在零位精度(单个值)；值得注意的是，三种浮点格式的集合(ll8x、ll8y、ll8z)的主要好处是它们提供了多种替代实施方式/实施例，这些实施方式/实施例提供了范围和精度的变化；这可以减少使用数据值时的舍入误差和饱和误差；
[0038]
图10b图示了在描绘了对数数据格式ll16的水平线下方的“可允许的”数字空间，如图10a中所示，以及包括在负方向上的binade的衰减但在正方向上的binade的宽度中的硬边缘的int8格式，如图10a中所示；
[0039]
图10c-10e图示了如图10a中所示的对数数据格式ll8x、ll8y、ll8z的图形表示；值得注意的是，图10c(相对于图10a)将用于对数数据格式ll8x的编码技术隔离以提供更大的清晰度，图10d(相对于图10a)将用于对数数据格式ll8y的编码技术隔离以提供更大的清晰度，并且图10e(相对于图10a)将用于对数数据格式ll8z的编码技术隔离以提供更大的清晰度；
[0040]
图11图示了根据本发明各方面的对数加法电路系统的特殊操作数或字符sd/ed/gd域；值得注意的是，用于交互情况的sd/ed/gd域的细节在三个4x4表中阐述，其中每个表
包括针对每个操作数的四种情况{zro、nrm、inf、nan}，其中a操作数沿着水平轴并且b操作数沿着垂直轴；在此，三个表从左到右包括针对这些不同a和b操作数值的对数加法电路系统的结果/输出的符号sd、指数ed[7:0]和分数gd[0:7]；
[0041]
图12a图示了根据本发明一个实施例的包括对数加法-累加器电路系统和乘法器-累加器电路系统的示例性处理电路的示例性逻辑概述的示意框图，其中示例性处理电路系统可配置为实现对数加法和累加(lac)操作以及乘法和累加(mac)操作；值得注意的是，模式选择电路系统可以生成并发出模式或模式控制信号“mode”以选择或启用在过滤操作/应用中采用哪种处理格式选项，其中当启用/选择lac时，对数加法-累加器电路系统和数据路径执行或实现对数加法和累加操作，而当启用/选择mac时，乘法器-累加器电路系统和数据路径执行或实现乘法和累加操作；通过控制、确定或启用处理的数据路径以包括对数加法-累加器电路系统或乘法器-累加器电路系统，模式选择电路系统可以响应性地控制(即，启用和/或禁用)对数加法-累加器电路系统和乘法器-累加器电路系统的可操作性以选择要处理例如与推理操作相关的图像数据所采用的电路系统；以及
[0042]
图12b图示了根据本发明一个实施例的包括对数加法-累加器电路系统和乘法器-累加器电路系统的示例性处理电路的另一个示例性逻辑概述的示意框图，其中示例性处理电路系统可配置为实现对数加法和累加(lac)操作以及乘法和累加(mac)操作，并包括将输入数据/值和过滤器权重的数据格式从浮点数据格式转换成对数数据格式的转换电路系统；值得注意的是，模式选择电路系统可以生成并发出模式或模式控制信号“mode”以选择或启用在过滤操作/应用中采用哪种处理格式选项，其中当启用/选择lac时，采用数据格式转换电路系统将输入数据和过滤器权重转换成对数数据格式(fpxx到llxx(例如，fp24到ll16，以及fp8到ll16))，并且对数加法-累加器电路系统和数据路径执行或实现对数加法和累加操作；并且其中当经由模式选择信号启用/选择mac时，乘法器-累加器电路系统和数据路径执行或实现乘法和累加操作，并且不采用数据格式转换电路系统；通过控制、确定或启用处理的数据路径以包括对数加法-累加器电路系统或乘法器-累加器电路系统，模式选择电路系统可以响应性地控制(即，启用和/或禁用)对数加法-累加器电路系统和乘法器-累加器电路系统的可操作性以选择要处理例如与推理操作相关的输入数据/值(例如，图像数据)所采用的电路系统；值得注意的是，此外，未选择或未启用的电路系统(例如，lac或mac)也可以被电气禁用，以例如降低和/或最小化功耗和杂散噪声。
[0043]
再次，本文描述和说明了许多发明。本发明不限于说明性示例性实施例，包括关于：(i)所说明的(一种或多种)特定浮点数据格式、(一种或多种)特定定点数据格式、特定对数数据格式、块/数据宽度或长度、数据路径宽度、带宽、值、进程和/或算法，或(ii)示例性逻辑或物理概述配置、示例性电路系统配置和/或示例性verilog代码。实际上，虽然本发明的若干示例性实施例和特征在浮点数据格式(例如，fp16或fp24)和对数数据格式(例如，ll8或ll16)的上下文中被说明，但实施例和发明适用于其它精度(例如，fpxx，其中：8≤xx≤39，和llxx，其中：8≤xx≤24)。为免生疑问，数据格式的精度不需要相等。而且，为简洁起见，除了在本文说明和/或描述的那些以外的精度旨在落入本发明的范围内，并且基于例如本技术对于本领域技术人员将是非常清楚的。
[0044]
本发明既不限于任何单个方面或其实施例，也不限于这些方面和/或实施例的任何组合和/或置换。本发明的每个方面和/或其实施例可以单独采用或与本发明的其它方面
和/或其实施例中的一个或多个组合使用。为简洁起见，那些组合和置换中的许多在本文中没有单独讨论或说明。
具体实施方式
[0045]
在第一方面，本发明涉及一个或多个具有对数加法-累加器电路系统的集成(以及操作这种电路系统的方法)，其中例如与推理操作相关的至少部分地基于对数数据格式来处理输入数据(例如，图像数据)。在一个实施例中，本发明包括例如串联互连的多个对数加法-累加器电路(有时也称为“对数加法-累加电路”)以流水线化对数加法和累加操作。数据格式转换电路系统可以被用于将具有第一或初始数据格式(例如，浮点数据格式或定点数据格式)的输入数据转换或变换成对数数据格式(例如，具有底数2)
–
在数据不是对数数据格式的情况下。在一个实施例中，在处理输入数据、结合过滤器权重的对数加法之后，数据格式转换电路系统将和数据转换或变换成不同的数据格式(例如，初始数据格式，例如浮点格式)用于后续处理。在一个实施例中，数据格式转换电路系统通过将每个输入数据/值的分数域的值从浮点数据格式重新映射为分数域的值的对数，并在对数加法操作之后将每个和数据的分数域的值从对数数据格式重新映射为浮点数据格式，来改变、变换和/或转换输入数据/值的数据格式。
[0046]
例如，在操作中，对数数据格式的图像数据被添加到也是对数数据格式(例如，具有底数2)的图像过滤器权重或系数。在图像数据处理中采用的过滤器权重或系数可以以对数数据格式存储在存储器中或以与对数数据格式不同的格式存储在存储器中并在处理之前(例如，紧接在处理之前)转换或变换成对数数据格式。在对数加法之后，经处理的图像数据可以被转换或变换成另一种/不同的数据格式(例如，浮点格式或定点格式-例如，回到输入数据的数据格式-但是，值的长度可以相同或不同)用于附加/后续处理。
[0047]
在另一方面，本发明涉及一个或多个包括多个执行或处理流水线的集成电路(以及操作这种电路的方法)，执行或处理流水线具有对数加法-累加器电路系统，其基于对数数据格式处理数据，例如，以生成经处理的图像数据。例如，每个执行或处理流水线包括多个对数加法-累加器电路以处理数据，例如，如上面所讨论的。在一个实施例中，在操作中，图像数据(其可以是浮点数据格式)被提供给多个执行或处理流水线，每个流水线包括多个对数加法-累加器电路。在此，数据(例如，具有浮点或定点数据格式的图像数据)最初被转换或变换成对数数据格式(经由格式转换电路系统)，然后数据经由多个对数加法-累加器电路系统的对数加法/加法器电路系统被加到相关联的图像过滤器权重或系数(其处于或已经被变换/转换成对数数据格式)。在一个实施例中，对数加法/加法器电路系统的输出(即，和数据)被应用或提供给格式转换电路系统，以将来自对数加法/加法器电路系统的和/输出的对数数据格式转换或变换成不同的数据格式-例如，促进处理电路系统的后续处理或与处理电路系统的后续处理一致的数据格式(例如，浮点数据格式)。在这方面，随后可以经由多个对数加法-累加器电路系统的累加器电路系统进一步处理例如浮点数据格式的对数加法-累加器电路系统的和/输出，以实现处理电路系统的累加操作。累加器电路系统累加多个相关联的经部分处理的图像数据，例如，与推理操作相关。值得注意的是，多个执行或处理流水线可以同时运作或操作。
[0048]
在又一方面，本发明涉及一个或多个集成电路，其具有实现对数加法和累加操作
以及乘法和累加操作的电路系统。在此，一个或多个集成电路包括执行对数加法和累加操作(例如，如本文所讨论的)的对数加法-累加器电路系统和执行乘法和累加操作(例如，如下文详细讨论的)的乘法器-累加器电路系统。集成电路中的一个或多个可以包括模式选择电路系统，以控制(即，启用和/或禁用)对数加法-累加器电路系统和乘法器-累加器电路系统的可操作性和/或操作，以选择用于处理例如与推理操作相关的图像数据的电路系统。在这方面，模式选择电路系统控制或确定数据处理以及其中采用的电路系统，包括对数加法-累加器电路系统或乘法器-累加器电路系统。
[0049]
在一个实施例中，模式选择电路系统可以是一次性可编程的；在另一个实施例中，模式选择电路系统是多于一次可编程的(即，多次)。模式选择电路系统可以例如在原位(即，在集成电路的操作期间)、在制造时和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或期间被编程。例如，模式选择电路系统可以从包括一个或多个数据存储电路(例如，一个或多个存储器单元格、寄存器、触发器、锁存器、存储器的块/阵列)、一个或多个输入引脚/导体、(任何类型的)查找表lut、处理器或控制器和/或离散控制逻辑的内部电路系统或外部电路系统(即，在一个或多个集成电路外部-例如，主机计算机/处理器)接收模式选择信号。响应于此，模式选择电路系统可以采用(一个或多个)这样的信号来启用或禁用所选择的处理电路系统(视情况而定)，从而(例如，在原位和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或期间)实现处理的模式之一(即，对数加法和累加操作或乘法和累加操作)。
[0050]
如上所述，一方面，本发明涉及一个或多个具有对数加法-累加器电路系统的集成电路(以及操作这种电路系统的方法)，在一个实施例中，包括多个执行或处理流水线，每个具有多个对数加法-累加器电路系统。例如，参考图1a-1c，在本发明的一个实施例中，对数加法-累加器电路系统(“lac”)在执行流水线中实现。在一个示例性实施例中，执行流水线中的“m”个(例如，说明性实施例中为64个处理电路)lac处理电路执行对数加法和累加操作，由此处理电路在每r(例如，64)周期间隔(在此，周期名义上可以是1ns)中执行m x m(例如，64x64)个对数加法-累加操作。在操作中，输入像素/数据(do-例如，64)从存储器(在这个实施例中图示为l2 sram)输出到格式转换电路系统，该格式转换电路系统将输入像素/数据(do)的数据格式转换或转变成对数数据格式(例如，具有底数2)，然后将输入像素/数据(do)输出到执行流水线的电路系统中。此外，过滤器权重或系数从存储器(在这个实施例中图示为l2)输出到格式转换电路系统，该格式转换电路系统将过滤器权重的数据格式转换或转变成对数数据格式(例如，具有底数2)，然后将具有对数数据格式的过滤器权重输出到存储器(在这个实施例中图示为l1 sram)中以供执行流水线在执行对数加法和累加操作期间访问。在一个实施例中，数据格式转换电路系统除了将过滤器权重的数据格式转换成对数数据格式之外，或者代替它(例如，在过滤器权重已经是对数数据格式的情况下)，还可以将过滤器权重的长度从8位调整到16位。
[0051]
在这个示例性实施例中，执行或处理流水线在相同的m(例如，64)周期间隔期间移入新的输入像素/数据(例如，64个)并移出先前的输出像素/数据(yd)。值得注意的是，每m(例如，64)周期间隔处理在特定(i,j)位置(宽度dw/yw和高度dh/yh维度的索引)的dd/yd(深度)列的输入和输出像素/数据。对于这个阶段的每个dw*dh深度列，重复m(例如，64)周期执行间隔。
[0052]
在这个示例性实施例中，过滤器权重或系数，在经由格式转换电路系统转换成对数数据格式之后，在lac电路系统发起输入数据/值的处理之前被存储或加载到存储器(例如，l1/l0 sram存储器)中。在这个特定示例中，输入级具有dw＝512、dh＝256和dd＝128，并且输出级具有yw＝512、yh＝256和yd＝64。注意的是，在每个64x64lac执行步骤中，仅处理128个dd输入平面中的64个。值得注意的是，如2019年8月20日提交的美国专利申请no.16/545,345中描述和/或说明的，本发明可以采用或实现促进乘法和累加操作的流水线化的电路系统、体系架构和集成电路的各方面。虽然'345申请描述和说明了乘法器-累加器电路系统，但该电路系统及其操作可以代替乘法电路系统，或除此之外，替代/实现对数加法电路系统，以促进级联与本发明一致的对数加法和累加操作。'345申请通过引用整体并入本文。
[0053]
继续参考图1a，所示的数据处理流程可以通过简单地调整所执行的基本64x64 lac累加操作的迭代次数来适应任意图像/数据平面维度(dw/yw和dh/yh)。循环索引“i”和“j”由控制和序列化逻辑电路系统调整，以实现图像/数据平面的维度。而且，还可以调整和/或扩展数据处理流程或方法以处置比执行流水线中lac处理电路系统的数量(例如，在这个说明性示例中为64)更大的yd列深度。在一个实施例中，这可以通过将输出像素的深度列划分为64个块并针对这些块中的每一个重复图1a的64x64 lac累加来实现。
[0054]
实际上，图1a中所示的数据处理流程或方法还可以被扩展以处置大于执行流水线中lac处理电路的数量(在这个说明性示例中为64)的dd列深度。在一个实施例中，这可以通过最初执行64个输入像素dijk的第一块到每个输出像素yijl中的部分累加来实现。然后，在第二操作步骤，这些部分累加值yijl被读回到执行流水线中作为初始值，用于将64个输入像素dijk的下一个块继续累加到每个输出像素yijl中。存储或保持连续累加值的存储器(例如，l2存储器)可以被组织、分区和/或调整尺寸以适应任何额外的读/写带宽以支持操作。
[0055]
概括64x64 mac执行流水线的适用性的这些技术也可以被使用或扩展将在本技术的后面部分中描述的附加方法的一般性。
[0056]
值得注意的是，图1a图示了根据本发明某些方面的与一个或多个附加的64-lac执行流水线相关的对数加法和累加操作的示例性实施例。在这个实施例中，64x64 fkl过滤器权重跨64个l0 sram分布(64个处理电路的每一个中都有一个l0 sram)。在每个执行周期中，将读取64个fkl值(绿色)并将其传递给lac电路。在从dijk移位链(橙色)加载之后，dijk数据值在64个执行周期期间保持在一个处理电路中。在这个说明性实施例中，过滤器权重和输入/像素数据的数据格式在输入到流水线之前经由格式转换电路系统被转换成对数数据格式。
[0057]
在从yijl移位链加载之后，yijl lac值将在64个执行周期期间循环通过所有64个处理电路，并且将使用相同的移位链卸载。在此，图1a图示了由与lac执行流水线相关联的控制和序列化逻辑执行的循环。这个循环示出dijk输入数据/像素和fkl过滤器值的乘积到部分和yijl中的累加。在这个实施例中，部分和yijl然后被累加到最终输出像素值yijl中。
[0058]
值得注意的是，参考图1a，在一个实施例中，处理级可以并行地利用附加的64-lac执行流水线来对输入帧或数据层的其它像素/数据(i,j)并发地进行操作。在这个实施例中，可以采用附加的l2存储器端口(例如，通过跨多个物理sram块划分、分段或拆分l2存储器)。在此，并发lac执行流水线操作在并行执行流水线中跨存储器(例如，l0存储器)复制权
重数据(标记为fkl)。值得注意的是，在图1a中所示的示例性实施例中，输入级具有dw＝512、dh＝256和dd＝128，并且输出级具有yw＝512、yh＝256和yd＝64。
[0059]
本发明可以采用和/或实现执行或处理流水线的体系架构(以及操作这种电路系统的方法)以并发地或并行地处理数据，从而增加流水线的吞吐量-例如，如美国专利申请no.16/816,164和美国临时专利申请no.62/831,413中所述和/或说明的；'164和'413申请通过引用整体并入本文。在此，各自包括多个lac电路的多个处理或执行流水线可以并发地处理数据以增加数据处理和整个流水线的吞吐量。
[0060]
图1b以框图形式图示了根据本发明某些方面的图1a的lac执行流水线的电路系统的示例性实施例，其中采用“对数”浮点格式，使得对数加法电路系统在执行过程期间将对数数据格式(例如，底数2)的输入数据/值以对数方式加到(对数数据格式(例如，底数2)的)过滤器权重或系数。转换电路系统将输入数据/值的分数域中的二进制值从标准浮点格式重新映射为那个二进制值的对数。
[0061]
简而言之，输入图像/像素数据(d)是从存储器(例如，l2存储器组
–
sram)读取的。在一个实施例中，输入图像/像素数据是浮点数据格式(例如，fp24
‑‑
用于符号、指数、分数的24位)。在此，输入图像/像素数据被获取(未加工的图像数据)或者可以已经经由过滤操作更早地生成并且随后存储在存储器中。
[0062]
在一个实施例中，将输入图像/像素数据从存储器读取到格式转换电路系统，从而“即时”转换成对数数据格式(例如，ll16格式-16位值，它可以具有与fp16格式相同的位数(但会有不同的解释))。因此，对数数据格式的输入图像/像素数据由数据格式转换电路系统输出，并使用加载寄存器“d_si”输入/移位到lac的处理电路系统中。对数数据格式的输入数据/值也可以并行加载到相同的数据寄存器“d”中以用于执行过程。
[0063]
参考图1a、1b和1f，在一个实施例中，过滤器权重或系数先前被转换成对数数据格式(例如，ll8-具有用于符号、指数、分数的8位的对数数据格式)并存储在存储器(在这个说明性实施例中的l2，它可以是sram)中。例如，在一个实施例中，过滤器权重或系数可以从存储器(l2)中读取，并经由格式转换电路系统“即时”转换、变换和/或修改为适当的对数数据格式(例如，将ll8格式转换成ll16格式)以用于存储在存储器中(在此为l1存储器级别-例如，sram)。此后，可以通过与对数加法和累加操作相关的处理电路系统来访问过滤器权重或系数。
[0064]
在另一个实施例中，过滤器权重或系数以浮点或定点数据格式存储在存储器(l2)中，然后经由数据格式转换电路系统转换或变换成对数数据格式。例如，参考图1g，在一个实施例中，过滤器权重或系数从存储器(l2)读取到格式化转换电路系统，并从浮点数据格式转换或变换成对数数据格式(例如，说明性实施例中是fp8到ll16格式)。实际上，可以从存储器(l2)中读取整数数据格式(int)或块缩放的分数数据格式(bsf)的过滤器权重或系数，然后将其转换或变换成对数数据格式(例如，从int8到ll16；或者，例如，bsf8到ll16)。
[0065]
参考图1a、1b、1e、1f、1g和1h，在操作中，在(具有对数数据格式)输入数据/值的处理的开始之前从存储器(l1存储器)读取过滤器权重并将其存储在特定lac处理电路系统本地的/专用于特定lac处理电路的存储器(l0，例如，sram)中。此后，处理流水线的电路系统从l0存储器读取过滤器权重或系数(具有对数数据格式)并实现对数加法操作。在一个实施例中，经由对数加法-累加电路系统读取过滤器权重或系数并将其加载到过滤器权重寄存
器“f”中以用于处理。在此，执行过程从“d”和“f”寄存器获取数据(在这个说明性实施例中，都是ll16的数据/值)，并经由对数加法电路系统(参见图1b和1h的示例性电路系统框图中的电路块“ll16 mul”)对图像数据和过滤器权重求和/将图像数据和过滤器权重求相加。在这个实施例中，对数加法电路系统采用定点加法。
[0066]
此后，和数据(ll16)被输出到格式转换电路系统，以将数据/值从对数数据格式转换成促进进一步处理或与进一步处理一致的数据格式(例如，浮点或定点数据格式)。(参见图1a、1b、1e、1f、1g和1h)。在一个实施例中，经部分处理的图像/输入数据(在这个特定实施例中，具有ll16格式的和/输出数据)经由数据格式转换电路系统被转换成浮点数据格式(例如，fp16格式)以促进经由累加电路系统的附加/后续处理。继续参考图1a、1b、1e、1f、1g和1h，在一个实施例中，经部分处理的数据(以fp16数据格式)经由“d*f”寄存器提供给累加级，并且多个经部分处理的图像数据经由累加电路系统被累加(例如，具有fp24精度)，并输出到存储器(在此是“y”寄存器)。在一个实施例中，在每个结果“y”已经累加了64个和/积之后，累加总数被并行加载到“mac-so”寄存器中。这种数据可以在下一个执行序列期间被串行输出(例如，移出)。在此，临时和yijlk lac值将在从yijk移位链加载之后的执行周期期间循环通过处理电路(在这个说明性实施例中为64)，将使用相同的移位链卸载，然后累加到最终输出像素/数据值yijl。(参见例如图1a)。
[0067]
值得注意的是，在一个实施例中，输入数据/值(例如，图像数据)以对数数据格式存储在存储器(例如，l2)中，使得部署在其数据路径中的格式转换电路系统是不必要的。在另一个实施例中，除此之外或代替它，过滤器权重或系数以具有适当位长的对数数据格式存储在存储器(例如，l2)中，使得部署在其数据路径中的格式转换电路系统是不必要的。
[0068]
而且，在一个实施例中，与过滤器权重或系数相关联的格式转换电路系统部署在存储器l1和存储器l0之间的数据路径中。可替代地，与过滤器权重或系数相关联的格式转换电路系统部署在存储器l0和对数加法-累加电路系统之间的数据路径中。
[0069]
参考图1c，在这个说明性实施例中，每个64-lac执行流水线具有其自己的l0存储器(例如，sram)，并且每个16x64-lac集群包括共享的l1存储器(例如，sram)。64-lac执行流水线的移入和移出数据路径耦合到存储器(在这个实施例中，l2存储器(例如，sram))，该存储器还耦合到一个或多个附加的/其它存储器(在这个实施例中，l1/l0存储器)。片上网络(noc)将l2存储器耦合到用于l3存储器(在这个实施例中，外部存储器(例如，dram))的phy(物理接口)。noc还耦合到pcie phy，而pcie phy进而可以耦合到外部主机计算机/处理器。值得注意的是，在一个实施例中，noc还耦合到gpio输入/输出phy，这允许多个x1组件被操作-例如，在一个实施例中，并发地被操作。
[0070]
图1c图示了根据本发明某些方面的逻辑瓦片的电路系统的示例性实施例，其包括多个执行流水线和资源，其中流水线的电路系统实现lac执行流水线；值得注意的是，在说明性实施例中，逻辑瓦片包括四个集群，每个集群包括16个64-lac执行流水线，其中示例性64-lac执行流水线以框图形式示出以供参考。在集成电路包括多个这样的逻辑瓦片的情况下，逻辑瓦片可以互连。如上所述，本发明可以采用或实现如在2019年8月20日提交的美国专利申请no.16/545,345中描述和/或图示的电路系统、体系架构和集成电路的各方面。虽然'345申请描述并说明了乘法器-累加器电路系统，但该电路系统及其操作可以代替乘法电路系统，或除此之外，替代/实现对数加法电路系统和转换电路系统以促进与本发明一致
的对数加法和累加操作的级联。在'345申请中描述和图示的其它特征，包括例如体系架构、互连网络的电路系统以及nlinx接口连接器，也可以与本文描述和说明的发明结合使用。再次，'345申请通过引用整体并入本文。
[0071]
对数加法-累加器电路系统可以互连到执行或处理流水线和体系架构中，如美国临时专利申请no.63/012,111(涉及mac)中描述和/或说明的；63/012,111申请通过引用整体并入本文。在一个实施例中，电路系统配置和控制多个单独的对数加法-累加器电路(而不是其中提到的mac电路)或互连(串联)的对数加法-累加器电路的行/组(有时称为“集群”)以流水线化对数加法和累加操作。在一个实施例中，一个或多个流水线的互连是可配置的或可编程的，以提供不同形式的流水线化-如'111申请中所阐述的。在此，由多个对数加法-累加器电路系统的互连所提供的流水线化体系架构可以是可控的或可编程的。以这种方式，多个对数加法-累加器电路可以被配置和/或重新配置为形成或提供(一个或多个)期望的处理流水线以处理数据(例如，图像数据)，如在'111申请中在mac的上下文中所描述的。
[0072]
例如，参考'111申请，在一个实施例中，控制/配置电路系统可以配置或确定本文描述的对数加法-累加器电路，或者被互连(串联)以执行对数加法和累加操作的互连的对数加法-累加器电路的行/组，和/或经由对数加法-累加器电路的连接(或互连的对数加法-累加器电路的行/组)实现的流水线化体系架构或配置。因此，在一个实施例中，在'111申请中描述和说明的控制/配置电路系统通过控制或提供采用本文所述的任何对数加法-累加器电路实施例的对数加法-累加器电路和/或互连的对数加法-累加器电路的行之间的(一个或多个)连接来配置或实现执行或处理流水线的体系架构。
[0073]
参考图1c，如上所述，集成电路可以包括多个多位lac执行流水线，它们被组织为组件的集群。在此，组件可以包括诸如总线接口(例如，phy和/或gpio)之类的“资源”，以促进与组件和用于存储并由组件的电路系统使用的存储器(例如，sram和dram)外部的电路系统的通信。例如，在一个实施例中，四个集群包括在组件中(有时可以标记为“x1”)，其中每个集群包括多个多位mac执行流水线(在这个说明性实施例中，16个64-lac执行流水线)。值得注意的是，图1a和1b的单个64-lac执行流水线在右上角示出以供参考。
[0074]
继续参考图1c，这个示例性实施例中的存储器层次结构包括与每个64lac执行流水线相关联的l0存储器资源。更大的l1 sram存储器资源与16x64 lac执行流水线的每个集群相关联。这两个存储器可以存储、保留和/或保持在对数加法操作中采用的过滤器权重值fijklm(无论是否采用对数数据格式(例如，fp数据格式))。
[0075]
值得注意的是，图1c的实施例可以采用更大的l2存储器(sram)和甚至更大的外部l3存储器(dram)，它们都由16x64lac执行流水线的所有四个集群共享。这些存储器存储或保持输入图像像素dijk和输出图像像素yijl，以及过滤器权重值fijklm。
[0076]
如上面所提到的，在本文阐述的说明性实施例(文本和附图)中，对数加法-累加器电路系统有时被标记为“lac”或“lac流水线”。
[0077]
如上所述，执行流水线的电路系统可以并发地处理数据以增加流水线的吞吐量。例如，在一种实施方式中，本发明可以包括多个单独的对数加法-累加器电路(在本文(包括通过引用并入的申请的文本/图)有时称为“lac”)和多个寄存器(在一个实施例中，包括多个影子寄存器-参见例如'345申请)，其促进对数加法和累加操作的流水线化，其中执行流
水线的电路系统并发地处理数据以增加流水线的吞吐量。在此，本发明可以实现乘法器-累加器执行或处理流水线的并发和/或并行处理技术(以及操作这种电路系统的方法)，这增加了流水线的吞吐量，如美国专利申请no.16/816,164和美国临时专利申请号no.62/831,413中描述和/和说明的。在一个实施例中，本发明的执行或处理流水线(包括对数加法-累加器电路系统)可以以环形配置或体系架构互连，以并发地或并行处理数据，如'164和'413申请中所描述的。在此，一个或多个x1组件(其可以集成/制造在单个管芯或多个管芯上)的一个或多个(或全部)集群的多个lac执行流水线可以以环形配置或体系架构互连(其中总线互连组件)以并发地处理相关数据。再次，虽然'164和'413申请描述和说明了乘法器-累加器电路系统(mac电路系统)，但电路系统及其操作可以代替乘法电路系统，或除此之外，替代/实现对数加法电路系统以促进级联与本发明一致的对数加法和累加操作。
[0078]
参考图1a、1b、1e、1f和1g，输入数据/值被输入到对数加法-累加器电路系统(或流水线电路系统)中并且，在图像/输入数据是与对数数据格式不同的数据格式的情况下，图像/输入数据经由格式转换电路系统被转换成对数数据格式。例如，在输入数据/值是浮点数据格式的情况下，格式转换电路系统在图像数据由对数加法-累加器电路系统处理之前将图像数据从浮点数据格式转换成对数数据格式。本发明可以采用任何数据格式转换电路系统或方法将图像/输入数据的数据格式转换、修改、扩展/收缩和/或调整为现在已知或以后开发的对数数据格式-所有这些都旨在落在在本发明的范围内。
[0079]
参考图1d，在一个实施例中，基于mac的处理电路系统和基于lac的处理在许多方面是相似的。例如，各自都在从存储器(例如，l2存储器)到执行流水线的处理电路系统的数据路径中包括格式转换电路系统。在说明性实施例中，过滤器权重或系数包括fp8到fp16(基于mac的处理电路系统)和ll8到ll16(基于lac的处理电路系统)的数据格式转换，并且图像/输入数据包括fp24到fp16(基于mac的处理电路系统)和fp24到ll16(基于lac的处理电路系统)的数据格式转换。但是，基于mac的处理电路系统与基于lac的处理的不同之处在于，基于mac的处理电路系统包括乘法电路系统以将过滤器权重或系数与图像/输入数据相乘(参见图1d的mac处理电路部分中的fp16 mul块)，而基于lac的处理电路系统包括加法电路系统以将过滤器权重或系数与图像/输入数据相加(参见图1d的lac处理电路部分中的ll16 mul块)。值得注意的是，在说明性实施例中，基于lac的处理电路系统还有数据格式转换电路系统(即，ll16到fp16转换块)以将经部分处理的图像/输入数据转换成与对数数据格式不同的数据格式以促进后续数据处理。
[0080]
在一个实施例中，格式转换电路系统采用查找表将图像/输入数据转变或转换成对数数据格式，其中预先计算每个输入数据/值的对数数据格式“等效”并将其存储和/或编码在存储器(例如，非易失性存储器，诸如rom或闪存存储器)中。例如，参考图2a和2b，输入数据/值的分数域的值的浮点数据格式(例如，分别为fp16或fp24)可以使用基于查找表的电路系统/方法被转换成对数数据格式(例如，到ll16)。在此，可以预先计算浮点数据格式(在这个说明性实施例中为fp16)的输入数据/值的分数域中的值的对数数据格式(在这个示例性实施例中为ll16)等效并将其存储和/或编码在存储器中。在一个实施例中，fp16/ll16格式可以使用大约900位的查找表。
[0081]
值得注意的是，符号域和指数域中的值可以使用电路系统进行转换或变换。在此，对数数据格式(ll16)与浮点数据格式(fp16)的指数域“e”的值相似之处在于，在一个实施
例中，它是表示数字(即，2^(e-ebias))的指数基数的整数值的偏置值。“e-ebias”值是指数域的值/数字的整数的以2为底数的对数。标准浮点格式将指数域中的整数对数与分数域中的二进制分数(也称为尾数或有效位)混合以(近似)表示真数。在这个实施例中，对数浮点数据格式将指数域中的整数对数与对数数据格式的分数域中的分数对数混合以(近似)表示真数。
[0082]
继续参考图2b，具有浮点数据格式(在这个说明性实施例中为fp24数据格式)的输入/图像数据被转换成对数浮点格式(在这个说明性实施例中为ll16数据格式)。但是，在这个实施例中，在查找表之前采用舍入逻辑将浮点数据格式的分数域的值从15位舍入到7位(在此，输入为fp24(对于图2a中所示的电路系统/方法，比fp16格式多8个分数位))。在此，浮点数据格式(f)的分数域的分数域的位数被舍入以与对数数据格式(g)的结果分数域的位数相关或对应。存储在存储器中的数据也可以在存储到非易失性存储器中之前被编码。
[0083]
而且，在一个实施例中，查找表包括将浮点数据格式的较大分数域与“等效”对数数据格式的分数域的较小分数域相关的预计算值。在这个实施例中，舍入逻辑被省略或舍入较少的位。例如，将图像/输入数据从浮点数据格式(例如，fp24)转换成每个输入数据/值的对数数据格式(例如，ll24)“等效”的转换电路系统被预先计算并存储和/或编码在存储器中。
[0084]
在另一个实施例中，数据格式转换电路系统包括将具有浮点数据格式的输入/图像数据的分数域转换成等效对数数据格式的逻辑电路系统。例如，参考图3a和3b，输入/图像值的分数域用逻辑门和多路复用器级调整。转换电路系统(这个说明性实施例中的fp16到ll16)可以使用例如大约30个逻辑门、x位加法器和x位多路复用器(例如，x＝7)来实现分数域的转换。(参见图3c)。值得注意的是，图3c中所示的数据格式转换电路系统的实施例是图3a中所示的数据格式转换框图的详细实施方式
–
实现提供中等水平精度的数据转换的计算y＝log2(x)的相同方法；从浮点数据格式到对数数据格式的高水平精度的数据转换(例如，32或64位精度)参见图3d。结果是正确地舍入为目标格式的转换值。
[0085]
参考图3b，转换电路系统/方法还可以采用舍入逻辑(与图2b的方法相似)将输入数据/值从浮点数据格式转换或变换成对数数据格式(在这个说明性实施例中为fp24到ll16)。在此，浮点数据格式(f)的分数域的分数域的位数被舍入以与对数数据格式(g)的结果分数域的位数相关或对应。此后，转换电路系统的逻辑可以使用例如大约30个逻辑门、x位加法器和x位多路复用器(例如，x＝7)来转换分数域的值(参见图3c)并实现提供中等水平的精度的数据转换的计算y＝log2(x)的技术。图3d实现了从浮点数据格式到对数数据格式的高水平精度的数据转换(例如，32或64位精度)的技术。结果是转换值，适当地舍入成到分数域的预定位数(“g
”‑
在这个说明性实施例中为七)的目标格式。
[0086]
而且，本发明还可以采用外插技术将输入数据/值的数据格式转换成对数浮点格式。
[0087]
如上所述，在一个实施例中，过滤器权重经由格式转换电路系统被转换、修改、扩展或调整为适当的对数数据格式。例如，参考图1a、1b和1d-1f，其中过滤器权重或系数先前被转换成对数数据格式(例如，ll8-具有用于符号、指数、分数的8位的对数数据格式)并存储在存储器(在这个说明性实施例中的l2，其可以是sram)中
‑‑
在一个实施例中，过滤器权重或系数可以从存储器(l2)中被读取并经由格式转换电路系统被“即时”转换、变换和/或
修改成适当的对数数据格式(例如，ll8格式到ll16格式)，然后存储在一个或多个处理流水线的更本地的另外的存储器(在此为l1存储器水平-例如，sram)中。此后，可以通过与对数加法和累加操作相关的处理电路系统来访问过滤器权重或系数。
[0088]
参考图1b、1d、1f、4a和4b，在一个示例性实施例中，过滤器权重或系数先前被转换成对数数据格式(例如，ll8-具有用于符号、指数、分数的8位的对数数据格式)并存储在存储器(在这个说明性实施例中为l2，它可以是sram)中。值得注意的是，图4a中所示的转换逻辑与用于转换过滤器权重的格式转换电路系统相似，如2020年1月15日提交的美国临时申请no.62/961,627中所描述和/或说明的，该临时申请在此通过引用并入本文。在一个实施例中，格式转换块近似地使ll8输入格式的指数和分数域中的位数加倍。简而言之，该技术主要通过逻辑门、y位加法器(例如，8个)和一个或多个多路复用器来实现这种方法。(例如，参见图4b(其相对于图4a的框图更详细地图示了过滤器权重/系数的转换或修改)
‑‑
值得注意的是，三个结果域可能还需要使用多路复用器行替换的特殊值、操作数或字符)。图4b的电路框图提供了图4a的过滤器权重/系数转换或修改实施例的附加细节；但是，图4b中实现的过滤器权重/系数转换或修改技术与图4a的框图的技术相同。
[0089]
值得注意的是，在另一个实施例中，过滤器权重或系数以浮点或定点数据格式存储在存储器(l2)中。在此，过滤器权重或系数从存储器(l2)读取到格式转换电路系统，并从浮点数据格式(例如，fp8)或定点数据格式(例如，int8或bsf8)转换或变换成对数数据格式(例如，说明性实施例中的ll16数据格式)。如本文所述，可以以相似的方式采用图2和3中所示的电路系统/技术以将过滤器权重从浮点或定点数据格式转换或变换成对数数据格式(例如，ll16数据格式)。
[0090]
参考图1a、1b和1e-1g，对数加法电路系统将输入数据/值和过滤器权重/系数求和-两者都是对数数据格式。对数加法电路系统的示例性实施例在图5a中示出，其中这个示例性实施例的电路系统对两个输入操作数(即，输入数据/值和过滤器权重/系数)采用ll16(在这个示例性实施例中)并且输出具有符号域、指数域和分数域的和(“d结果”)。在这个实施例中，符号域被xor，并且指数域相加(以及如果舍入导致分数上溢，那么递增)。在此，(以对数形式)的两个分数域利用加法器(在说明性实施例中为7位定点加法器)相加在一起(经由2的补码)。
[0091]
值得注意的是，图5b图示了图5a中所示的对数加法电路系统的更详细的示例性电路框图。图5b中所示的某些示例性逻辑块的附加细节(参见“逻辑1”、“逻辑2”和“逻辑3”)在图5c中提供。
[0092]
继续参考图5b，在其它实施例中，由对数加法电路系统执行的操作(分数域ga 分数域gb；以及指数域ea 指数域eb)可以由实现其它函数(诸如往复函数、平方根函数、幂函数)的电路系统代替或伴随。在此，在操作数为对数数据格式之后，其它函数可以很容易地实现(例如，除法a操作数除以b操作可以通过执行减法(分数域ga-分数域gb)以及指数域ea减去指数域eb的减法(而不是像乘法的情况下的加法ea eb)来实现)。
[0093]
在对数加法之后，可以将经处理的数据/值转换或变换成另一种/不同的数据格式(例如，从对数数据格式转换成浮点格式或定点格式-例如，返回到输入数据的格式-但是，分数域中的值的位长可以不同)以用于附加和/或后续处理。例如，可以将对数数据格式的经处理的数据转换或变换成浮点数据格式(即，与输入数据的数据格式相同的数据格式)。
部署在对数加法电路系统的输出端上的格式转换电路系统(参见例如图1a、1b和1e-1g)可以实现用于将输入数据/值从浮点数据格式转换成对数数据格式的电路系统的逆。在此，可以将与对数数据格式不同的数据格式的经部分处理的图像数据提供给累加器电路系统以实现例如与推理操作相关的图像数据处理的累加操作(参见图1a、1b和1e-1g)。
[0094]
部署在对数加法电路系统的输出端处的格式转换电路系统的示例性实施例在图6a和6b中示出(ll16到fp16)，其将和的数据格式从对数数据格式转换成浮点数据格式。这个示例性实施例的转换电路系统可以使用例如大约30个逻辑门、x位加法器和x位多路复用器(例如，x＝7)来实现分数域的转换。(关于具有中等精度的格式转换电路系统/技术，参见图6c)。
[0095]
图6c中所示的数据格式转换电路系统的实施例是图6b中所示的格式转换框图的详细实施方式。而且，图6d图示了以中等精度计算y＝2^x的数据转换格式电路系统的又一个详细实施例。图6e图示了提供高水平精度的数据转换(在此，计算y＝2^x)-例如，32或64位精度)的对数数据格式到浮点格式转换电路系统。如上面所提到的，本发明可以采用现在已知或以后开发的任何数据格式转换电路系统或方法，以(i)从第一数据格式到对数数据格式和/或(ii)从对数数据格式到第一数据格式或第二数据格式转换、修改、扩展/收缩和/或调整数据/值的数据格式-所有这些都旨在落入本发明的范围内。值得注意的是，本发明的转换格式电路系统/方法转换或修改数据(例如，输入数据/值(在某些实施例中)、过滤器权重/系数(在某些实施例中)、对数加法电路系统的和/结果数据输出的数据格式。
[0096]
参考图7(其图示了几种浮点格式和“等效”对数数据格式的示例)，三种对数数据格式对符号域s和分数域g使用符号量值数值格式。分数域g的最高权重为0.5，并且没有隐藏(隐式)位，因此它包括未归一化的值。指数域是二的补码数值格式，对其添加了127的偏置。最小和最大指数值被保留用于特殊操作数或字符(nan、inf、dnrm、zero)。
[0097]
在一个实施例中，与对数数据格式(例如，ll16)对应的存储器分配包括特殊操作数或字符。例如，参考图8(其图示了用于ll16数据格式的示例性数字空间)，最小和最大指数e[7:0]为特殊操作数(nan、inf、zro)保留。当发生未定义的操作(0*∞或∞-∞)时，生成nan值。
±
inf值是指数上溢的饱和值。
±
zro值是指数下溢的饱和值。范围(exp[7:0]＝8'b00000000)示出了与浮点数据格式(fp16)的dnrm值对应的binade-除了g[1:7]＝7'b0000000为zro保留，它的“行为”与其它binade一样。
[0098]
图9a-9c图示了用于具有1位符号域(s)、3位指数域(e)和4位分数域(f)的对数数据格式(ll8y)的示例性编码技术，如与本发明的某些实施例的某些数据(例如，过滤器权重/系数)相关地实现的-例如，与查找表相关。值得注意的是，可以与其它对数数据格式(例如，ll8x和ll8z)相关的采用、提供和/或生成类似或对应的查找表。
[0099]
继续参考图9a-9c，binade的域尺寸具有最大精度。其它binade增加指数域(e)中的位数并将减少分数域(g)的位数。这将降低这些其它binade的精度。gfp8y值的总位数(8位)将在整个范围内保持恒定。
[0100]
具有最大精度的ll8y binade位于图9a的两个中心列(图9b中最左边的列和图9c中最右边的列)中，3位指数域(e)等于{010，011，100和101}。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/16)，其中s是符号位，e是三位域，并且g是四位分数域。注意的是，始终添加到分数域的隐藏/隐式位的值为1。
[0101]
在这个范围内，指数偏置值ek等于四。四个指数域值{010，011，100和101}将创建{2^(-2),2(-1),2^(0),2^( 1)}的缩放值。这个指数偏置值是可配置的。改变它将改变的binade值的ll8y范围的中心点。所有binade的指数偏置值必须一起改变，以便在binade范围之间不引入间隙区域或重叠区域。
[0102]
图9a右上角的列图示了接下来的两个较大的binade(具有较低的精度)。4位指数域(e)等于{1100，1101}。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/8)，其中s是符号位，e是四位域，并且g是三位分数域。在这个范围内，指数偏置值ek等于10。
[0103]
接下来的两个较大的binade(具有较低的精度)具有等于{11100，11101}的5位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/4)，其中s是符号位，e是五位域，并且g是两位分数域。在这个范围内，指数偏置值ek等于24。
[0104]
接下来的两个较大的binade(具有较低的精度)具有等于{111100，111101}的6位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/2)，其中s是符号位，e是六位域，f是一位分数域。在这个范围内，指数偏差值ek等于54。
[0105]
接下来的三个较大的binade(具有较低的精度)具有等于{1111100，1111101，1111110}的七位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(1)，其中s是符号位，e是七位域，g是零位分数域。在这个范围内，指数偏置值ek等于116。
[0106]
图9a左下方的列图示了接下来的两个较小的binade(具有较低的精度)。4位指数域(e)等于{0010，0011}。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/8)，其中s是符号位，e是四位域，g是三位分数域。在这个范围内，指数偏置值ek等于6。
[0107]
接下来的两个较小的binade(具有较低的精度)具有等于{00010，00011}的5位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/4)，其中s是符号位，e是五位域，g是两位分数域。在这个范围内，指数偏置值ek等于8。
[0108]
接下来的两个较小的binade(具有较低的精度)具有等于{000010，000011}的6位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(g/2)，其中s是符号位，e是六位域，g是一位分数域。在这个范围内，指数偏置值ek等于10。
[0109]
接下来的三个较小的binade(具有较低的精度)具有等于{0000001，0000010，0000011}的七位指数域(e)。这些ll8y编码的值是(-1)^s*2^(e-ek)*(1)，其中s是符号位，e是七位域，并且g是零位分数域。在这个范围内，指数偏置值ek等于12。这完成了用于数值值的252个编码的总结。
[0110]
有四个附加的编码(在总共256个中)分配给特殊值。首先，值8'b00000000表示零(zro)。这是具有指数下溢(eunfl)的正或负结果的饱和值。值8'b10000000表示“非数字”(nan)。这是未定义操作的结果。值8'b01111111表示正无穷大( inf)。这是具有指数上溢(eovfl)的正结果的饱和值。值8'b11111111表示负无穷大(-inf)。这是具有指数上溢(eovfl)的负结果的饱和值。
[0111]
图10a图示了用于具有1位符号域(s)、3位指数域(e)和4位分数域(f)的对数数据格式(ll8y)的另一种示例性编码技术，如结合与本发明的某些实施例的某些数据(例如，过滤器权重/系数)实现的-例如，与查找表相关。在这方面，图10a图示了根据本发明的一个实施例的替代浮点格式(ll8y)的示例，其中范围和精度可以动态配置；这个实施例可以更好地拟合它所表示的数据值的集合。
[0112]
参考图10a(以及针对特定格式的图10b-10e)，在描绘对数数据格式ll16的水平线下方的“可允许的”数字空间关于ll8x、ll8y和ll8z的对数数据格式以图形方式表示。(也参见图10b)。ll8y格式的范围和精度在图10a和10d中示出。在中心的四个binade(-2到 2)中，它具有与前面讨论的fp8格式相同的精度(4位)。与fp8不同，ll8y格式的精度对称地衰减。
[0113]
在从-11到-8的三个binade和从 8到 10的两个binade中存在零位精度(单个值)。
[0114]
ll8y的这种对称衰减与在图像过滤应用的数据权重值分布中看到的衰减相似。这意味着数据集合的大多数数据值将落在具有最多位精度的binade中。
[0115]
参考图10a和10b，相比之下，int8格式具有在负方向上的binade的衰减，但在正方向上的binade的宽度中的硬边缘。因此，较小的数据值(在负方向上)如果太靠近范围的边缘则会看到“软”饱和。
[0116]
对于数据集合的缩放，这会呈现采用整数格式(例如，int8)的困难。例如，如果数据/值的分布位于正方向上binade的宽度的硬边缘或移动得太“靠近”其以利用更多位精度，那么一些数据的较大值将受到“硬”饱和影响。值得注意的是，ll8y格式在范围的两个边缘处都提供“软”饱和。
[0117]
在一个实施例中，转换电路系统可以例如在原位在格式(例如，ll8x、ll8y和ll8z)之间动态可配置。在这方面，可以动态地配置在ll8y格式和ll16格式(或任何更大的ll格式)之间转换数据值的电路系统(硬件逻辑)以支持一定范围的ll格式。这允许调整范围和精度以匹配数据集合的分布特点。本文还描述了两种其它格式(ll8x和ll8z)并且它们可以被用于描述转换电路系统的动态可配置性。
[0118]
ll8x格式在图10a和10c中图示。在中心两个binade(-1到 1)中，它比前面讨论的ll8y格式多一位精度(5位)。与ll8y一样，ll8x格式的精度对称衰减。从-5到-6的binade和 5的binade中有零位精度(单个值)。
[0119]
ll8z格式在图10a和10e中图示。在中心八个binade(-4到 4)中，它比前面讨论的ll8y格式少一位精度(3位)。与ll8y一样，ll8x格式的精度对称衰减。在从-19到-12的binade和从 12到 18的binade中有零位精度(单个值)。
[0120]
三种对数数据格式(ll8x、ll8y、ll8z)的集合的关键好处是它们提供了多种格式替代方案，用于提供不同的范围和/或精度。这减少了当使用数据值时的舍入误差和饱和误差。
[0121]
如果针对特定格式调整指数偏置值(ek)，那么可以向左或向右移动精度分布以匹配数据集合分布(虽然这未在图10a中示出，但在一个实施例中，它可以被结合、实现或采用)。
[0122]
而且，可以组合其中两种格式，使得精度分布关于中心点不对称(虽然这未在图10a中示出，但在一个实施例中，它可以被结合、实现或采用)。
[0123]
在一个实施例中，由这三种对数数据格式使用的编码方法被扩展到具有更多位的浮点数据格式，例如(ll16x/ll16py/llp16z)。值得注意的是，虽然这未在图10a中示出，但在一个实施例中，它可以被结合、实现或采用。
[0124]
在某些情况下，对数加法电路系统的输出可以被解释为寻址特殊操作数或字符。参考图11，针对交互情况的sd/ed/gd域的细节在三个4x4表中列出，其中每个表包括针对每个操作数的四种情况{zro，nrm，inf，nan}，其中a操作数沿着水平轴并且b操作数沿着垂直
轴。这三个表从左到右包括针对这些不同a和b操作数值的结果的符号sd、指数ed[7:0]和分数gd[0:7]。
[0125]
结果的默认符号是sw＝sa xor sb。如果任一操作数是nan，那么不会出现这种情况；在这些情况下，结果的符号是nan操作数的符号。在两个操作数都是nan的情况下，结果的符号是1'b0。
[0126]
当a和b操作数是nrm值时，结果的默认指数是(ea[7:0] eb[7:0]-8'h7f inc)；这是操作数指数的和，减去指数偏移量，并且如果乘积分数≥2.0，那么加上inc＝1。当8'h01≤(ea[7:0] eb[7:0]-8'h7f mov)≤8'hfe时出现此默认情况，如nrm中标有“n”的中心方框中所示。
[0127]
默认分数/尾数是和gq[0:7]，舍入到输出格式的适当位数。如果8'h00≥(ea[7:0] eb[7:0]-8'h7f mov)，那么发生eunfl并且结果是zero，其中指数是8'h00并且分数是23'h000000。如果ea[7:0] eb[7:0]-8'h7f mov)≥8'hff，那么发生eovfl并且结果是inf，其中指数是8'hff并且分数是23'h000000。
[0128]
如果a和b操作数都是zero，或者一个是zero且一个是nrm，那么结果为zero，其中指数是8'h00并且分数是15'h0000。如果a和b操作数都是inf，或者一个是inf且一个是nrm，那么结果是inf，其中指数是8'hff并且分数是7'h00。如果a和b操作数之一是zero且一个是inf，那么结果是nan，其中指数是8'hff并且分数是7h7f。如果a和b操作数之一是nan，另一个是{zro,nrm,inf}，那么结果是nan，其中指数是8'hff并且分数与nan操作数相同。如果a和b操作数都是nan，那么结果是nan，其中指数是8'hff并且分数是7'h7f。
[0129]
本文描述和说明了许多发明。虽然已经描述和说明了本发明的某些实施例、特征、属性和优点，但是应当理解的是，本发明的许多其它以及不同和/或相似的实施例、特征、属性和优点从描述和说明是显而易见的。因此，本文描述和说明的本发明的实施例、特征、属性和优点不是详尽的，并且应当理解的是，本发明的此类其它、相似的以及不同的实施例、特征、属性和优点都在本发明的范围内。
[0130]
实际上，本发明既不限于任何单个方面或其实施例，也不限于这些方面和/或实施例的任何组合和/或置换。而且，本发明的每个方面和/或其实施例可以单独使用或与本发明的其它方面和/或其实施例中的一个或多个组合使用。
[0131]
例如，在本发明的一个实施例中，一个或多个集成电路包括实现对数加法和累加(lac)操作以及乘法和累加(mac)操作的电路系统。例如，参考图12a和12b，在一个实施例中，用于浮点数据格式和对数数据格式的处理/操作的电路系统被包括在处理电路/组件中或在其中实现。模式或模式控制信号“mode”由模式控制电路系统输出以选择在处理或过滤操作/应用中采用哪种格式选项。在此，对数加法-累加器电路系统和数据路径在被启用时执行对数加法和累加操作(例如，如本文所讨论的)并且乘法器-累加器电路系统和数据路径在被启用时执行乘法和累加操作。模式选择电路系统控制(即，启用和/或禁用)对数加法-累加器电路系统和乘法器-累加器电路系统的可操作性，以选择用于处理例如与推理操作相关的图像数据的电路系统。在这方面，模式选择电路系统控制或确定处理的数据路径以包括对数加法-累加器电路系统或乘法器-累加器电路系统。
[0132]
在一个实施例中，模式选择电路系统可以是一次性可编程的；在另一个实施例中，模式选择电路系统是多于一次可编程的(即，多次)。模式选择电路系统可以例如在原位
(即，在集成电路的操作期间)、在制造时和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或在加电、启动、初始化、重新初始化、配置、重新配置等期间进行编程。例如，模式选择电路系统可以从包括一个或多个数据存储电路(例如，一个或多个存储器单元、寄存器、触发器、锁存器、存储器块/阵列)、一个或多个输入引脚/导体、(任何类型的)查找表lut、处理器或控制器和/或离散控制逻辑的内部或外部电路系统(即，在一个或多个集成电路外部-例如，主机计算机/处理器)接收模式选择信号。响应于此，模式选择电路系统可以使用这样的(一个或多个)信号来启用或禁用所选择的处理电路(视情况而定)，从而(例如，在原位和/或在加电、启动、初始化、重新初始化、配置、重新配置等时或在加电、启动、初始化、重新初始化、配置、重新配置等期间)实现处理模式之一(即，对数加法和累加操作或乘法和累加操作)。
[0133]
此外，本发明不限于(i)所说明的(一种或多种)特定的对数、定点和/或浮点格式、操作(例如，加法、减法等)、块/数据宽度、数据路径宽度、带宽、值、过程和/或算法，以及(ii)示例性逻辑或物理概述配置、示例性模块/电路系统配置和/或示例性verilog代码。实际上，本发明可以采用其它数学操作(除了对数加法之外或代替对数加法)，其中对数“乘法”块被扩展为执行除法(两个操作数的e/g相减)和/或对数“乘法”块扩展为执行平方根(将操作数的e/g右移一位)。
[0134]
值得注意的是，尤其是乘法器-累加器执行流水线的电路系统、结构、体系架构、功能和操作的细节在以下文献中进行了描述和/或说明：(1)美国非临时专利申请no.16/545,345，(2)美国非临时专利申请no.16/816,164，(3)美国临时专利申请no.62/831,413；(4)美国非临时专利申请no.16/900,319，(5)美国临时专利申请no.62/865,113，(6)美国非临时专利申请no.17/019,212，(7)美国临时专利申请no.62/900,044，(8)美国非临时专利申请no.17/031,631，和(9)美国临时专利申请no.62/909,293。这九(9)个专利申请通过引用整体并入本文。实际上，如上面所提到的，本发明可以采用多个执行或处理流水线(实现lac电路系统代替mac电路系统)来并发地处理数据以增加数据处理的吞吐量-例如，如美国非临时申请no.16/816,164中描述和/或说明的。
[0135]
而且，除此之外或作为其替代，本发明可以采用增强过滤器权重或系数的动态范围的电路系统、功能和操作，如美国专利申请no.17/074,670和美国临时专利申请no.62/930,601中描述和/或说明的。即，本发明可以使用电路系统和技术来增强'670和'601申请的过滤器权重或系数的动态范围。'670和'601申请通过引用整体并入。
[0136]
虽然已经在某些特定方面描述了本发明，但是对于本领域的技术人员来说，许多附加的修改和变化是显而易见的。因此应该理解的是，在不脱离本发明的范围和精神的情况下，可以以不同于具体描述的方式实践本发明。因此，本发明的实施例在所有方面都应当被认为是说明性的/示例性的而不是限制性的。例如，虽然输入数据/值的数据/值、过滤器权重和输出数据/值转换电路系统在说明性示例性实施例中描述了某个位宽，但这样的(一个或多个)位宽是示例性的。为简洁起见，那些其它精度将不单独说明，但是对于本领域技术人员来说基于例如本技术是非常清楚的。因此，本发明不限于(i)所示的(一种或多种)特定的定点数据格式(例如，整数格式(intxx)和块缩放的分数格式(例如，bsfxx)、块/数据宽度(fpxx、llxx等)、数据路径宽度、带宽、值、过程和/或算法，也不限于(ii)特定电路系统和/或整体流水线的示例性逻辑或物理概述配置，和/或示例性模块/电路系统配置，和/或
整体流水线。实际上，本发明不限于(i)所示的(一种或多种)特定的浮点格式、(一种或多种)特定的定点格式、操作(例如，加法、减法等)、块/数据宽度或长度、数据路径宽度、带宽、值、过程和/或算法，也不限于(ii)示例性逻辑或物理概述配置，和/或示例性模块/电路系统配置。
[0137]
而且，虽然某些示例性实施例的数据格式转换电路系统确定/识别该组过滤器权重的关联过滤器权重的最大指数，但是数据格式转换电路系统可以比较关联过滤器权重的指数以确定最小指数。在这个替代实施例中，过滤器权重的分数域的移动可以被修改(例如，对于具有较大指数的过滤器权重，左移)以适应公共指数域，该公共指数域是这组过滤器权重的关联过滤器权重的最小指数。
[0138]
值得注意的是，本文公开的各种电路、电路系统和技术可以使用计算机辅助设计工具来描述，并且可以根据它们的行为、寄存器转移、逻辑组件、晶体管、布局几何形状和/或其它特性来表达(或表示)为在各种计算机可读介质中实施的数据和/或指令。可以在其中实现此类电路、电路系统、布局和布线表达的文件和其它对象的格式包括但不限于支持行为语言(诸如c、verilog和hldl)的格式、支持寄存器级描述语言(如rtl)的格式，以及支持几何描述语言(诸如gdsii、gdsiii、gdsiv、cif、mebes)的格式，以及现在已知或以后开发的任何其它格式和/或语言。可以在其中实施这种格式化数据和/或指令的计算机可读介质包括但不限于各种形式的非易失性存储介质(例如，光、磁或半导体存储介质)和载波，其可以被用于通过无线、光学或有线信令介质或其任何组合传送此类格式化数据和/或指令。通过载波传送此类格式化数据和/或指令的示例包括但不限于经由一种或多种数据传送协议(例如，http、ftp、smtp等)在互联网和/或其它计算机网络上传送(上传、下载、电子邮件等)。
[0139]
实际上，当经由一种或多种计算机可读介质在计算机系统内被接收时，上述电路的此类数据和/或基于指令的表达可以由计算机系统内的处理实体(例如，一个或多个处理器)结合一个或多个其它计算机程序的执行来处理，所述一个或多个其它计算机程序包括但不限于网列表生成程序、布局和路由程序等，以生成此类电路的物理表现的表示或图像。此后，这种表示或图像可以被用在设备制造中，例如，通过使得能够生成被用于在设备制造过程中形成电路的各种组件的一个或多个掩模。
[0140]
而且，本文公开的各种电路、电路系统和技术可以经由使用计算机辅助设计和/或测试工具的模拟来表示。电路、电路系统、布局和布线和/或由此实现的技术的模拟可以由计算机系统实现，其中此类电路、电路系统、布局和由此实现的技术的特点和操作经由计算机系统被模仿、复制和/或预测。本发明还涉及由此实现的发明性电路、电路系统和/或技术的此类模拟，并且其因此旨在落入本发明的范围内。与此类模拟和/或测试工具对应的计算机可读介质也旨在落入本发明的范围内。
[0141]
值得注意的是，本文对“一个实施例”或“实施例”(等)的引用意味着结合该实施例描述的特定特征、结构或特点可以被包括、采用和/或结合在本发明的一个、一些或所有实施例中。说明书中短语“在一个实施例中”或“在另一个实施例中”(等)的使用或出现并不指相同的实施例，单独的或替代的实施例也不一定与一个或多个其它实施例相互排斥，也不限于单一的排他性实施例。这同样适用于术语“实施方式”。本发明既不限于任何单个方面或其实施例，也不限于这些方面和/或实施例的任何组合和/或置换。而且，本发明的每个方
面和/或其实施例可以单独使用或与本发明的其它方面和/或其实施例中的一个或多个组合使用。为简洁起见，本文未单独讨论和/或说明某些置换和组合。
[0142]
另外，本文描述为“示例性”的实施例或实施方式不应被解释为例如与其它实施例或实施方式相比是理想的、优选或有利的；相反，它旨在传达或指示一个或多个实施例是(一个或多个)示例实施例。
[0143]
虽然已经在某些特定方面描述了本发明，但是对于本领域技术人员来说，许多附加的修改和变化将是显而易见的。因此应该理解的是，在不脱离本发明的范围和精神的情况下，可以以不同于具体描述的方式实施本发明。因此，本发明的实施例在所有方面都应当被认为是说明性的/示例性的而不是限制性的。
[0144]
术语“包括”、“包含”和“具有”或其任何其它变体旨在覆盖非排他性包含，使得包括一系列零件或元素的过程、方法、电路、制品或者装置不仅包括那些零件或元素，而且还可以包括未明确列出或此类过程、方法、制品或装置固有的其它零件或元素。另外，本文中使用的术语“连接”、“连接的”应当广义地解释为包括直接或间接(例如，经由一个或多个导体和/或中间设备/元件(有源或无源)和/或经由电感或电容耦合))，除非另有说明(例如，使用术语“直接连接”或“直接连接的”)。
[0145]
本文中的术语“一个”和“一种”不表示数量的限制，而是表示至少一个所引用项的存在。另外，本文中的术语“第一”、“第二”等并不表示次序、数量或重要性，而是用于将一个元件/电路/特征与另一个区分开来。
[0146]
此外，术语“集成电路”尤其是指任何集成电路，包括例如通用或非特定集成电路、处理器、控制器、状态机、门阵列、soc、pga和/或fpga。术语“集成电路”也指任何集成电路(例如，处理器、控制器、状态机和soc)-包括嵌入式处理器、控制器、状态机、pga和/或fpga。
[0147]
另外，术语“电路系统”除其它外尤其是指电路(无论是集成的还是其它的)、一组此类电路、一个或多个处理器、一个或多个状态机、实现软件的一个或多个处理器，一个或多个门阵列、可编程门阵列和/或现场可编程门阵列，或一个或多个电路系统(无论是否集成的还是其它的)、一个或多个状态机、一个或多个处理器、实现软件的一个或多个处理器、一个或多个门阵列、可编程门阵列和/或现场可编程门阵列的组合。术语“数据”除其它外尤其是指模拟或数字形式的(一个或多个)电流或电压信号(复数或单数)，其可以是单个位(等)或多个位(等)。
[0148]
权利要求的限制不是以部件加功能或步骤加功能的形式写的。任何限制都不应当根据35 usc
§
112，或
§
112(f)进行解释，除非此类权利要求限制明确使用短语“用于
…
的部件”或“用于
…
步骤”后跟功能的声明，并且没有任何特定的结构。