存储器模块、计算系统以及计算系统的启动方法与流程

存储器模块、计算系统以及计算系统的启动方法
1.于2020年5月7日在韩国知识产权局提交的并且名称为“包括安装有处理装置的存储器模块的计算系统的启动方法”的第10
‑
2020
‑
0054780号韩国专利申请通过引用全部包含于此。
技术领域
2.实施例涉及包括安装有处理装置的存储器模块的计算系统的启动方法。


背景技术：

3.计算系统根据架构配置提供能力和功能。诸如高性能和/或图形算法的应用是数据密集型的和计算密集型的。


技术实现要素：

4.实施例针对一种存储器模块，所述存储器模块包括：印刷电路板；多个存储器装置，结合到印刷电路板；以及处理装置，结合到印刷电路板并连接到所述多个存储器装置。当所述存储器模块上电时，处理装置可对所述多个存储器装置执行存储器训练，在完成存储器训练之后生成模块就绪信号，并且将模块就绪信号发送到所述存储器模块的外部。
5.实施例还针对一种计算系统，所述计算系统包括：板；主机装置，安装在所述板上；存储器模块，安装在所述板上并连接到主机装置，存储器模块包括多个存储器装置和连接到所述多个存储器装置的处理装置；以及基本输入/输出系统(bios)存储器，被配置为存储用于启动所述计算系统的bios代码。当所述计算系统上电时，存储器模块的处理装置可对所述多个存储器装置执行存储器训练，在完成存储器训练之后生成模块就绪信号，并且将模块就绪信号发送到主机装置。
6.实施例还针对一种计算系统的启动方法，计算系统包括存储器模块，存储器模块包括连接到多个存储器装置的处理装置，所述方法包括：对计算系统上电；在对计算系统上电之后，通过存储器模块中的处理装置对所述多个存储器装置执行第一存储器训练，并且生成指示第一存储器训练的完成的模块就绪信号；在对计算系统上电之后，通过主机装置执行第一启动序列，主机装置执行包括在计算系统中的基本输入/输出系统(bios)存储器的bios代码；在执行第一启动序列之后，在主机装置中等待将从存储器模块接收模块就绪信号；以及在主机装置中接收模块就绪信号，并且基于模块就绪信号执行第二启动序列。
附图说明
7.通过参照附图详细描述示例实施例，对于本领域技术人员而言，特征将变得清楚，在附图中：
8.图1是概念性地示出根据示例实施例的包括安装有处理装置的存储器模块的计算系统的框图；
9.图2是示出图1的存储器模块的框图；
10.图3是示出根据示例实施例的启动计算系统的方法的流程图；
11.图4是用于具体描述由图3的存储器模块中的处理装置进行的第一存储器训练的流程图；
12.图5是具体示出由图3的cpu执行的第一启动序列的流程图；以及
13.图6是具体示出由图3的cpu执行的第二启动序列的流程图。
具体实施方式
14.图1是概念性地示出根据示例实施例的包括安装有处理装置的存储器模块的计算系统的框图。
15.参照图1，根据示例实施例的计算系统100可包括安装在板(或称为计算系统板)101上的主机装置(或主机)110、存储器模块120和基本输入/输出系统(bios)存储器150。主机装置110可通过存储器总线140连接到存储器模块120并与存储器模块120通信。
16.可使用表述“连接的”和/或“结合的”以及其派生词来描述一些示例。这些术语不意在彼此同义。例如，使用术语“连接的”和/或“结合的”的描述可指示两个或更多个元件彼此直接物理接触或电接触。此外，术语“连接”和/或“结合”可表示两个或更多个元件彼此不直接接触，但仍然彼此协作或交互。
17.主机装置110可以是例如计算装置(诸如，膝上型计算机、台式计算机、服务器计算机、工作站、便携式通信终端、个人数字助理(pda)、便携式多媒体播放器(pmp)、智能电话、平板pc和其他合适的计算机)、虚拟机或其虚拟计算装置。在一种实施方式中，主机装置110可以是包括在计算系统100中的组件的一部分(诸如，图形卡)。主机装置110可以是在计算系统100中执行通用计算机操作的功能块，并且可对应于中央处理器(cpu)、数字信号处理器(dsp)或应用处理器(ap)。在本说明书中，主机装置110可被称为cpu 110。
18.cpu 110可被配置为执行可由一个或多个机器执行的指令或软件、固件或它们的组合。cpu 110可包括任何数量的处理器核。例如，cpu 110可包括单核或者可包括多核(诸如，双核、四核和六核)。尽管在图1中示出包括一个cpu 110的计算系统100，但是根据实施例，计算系统100可包括多个cpu。cpu 110可通过各种接口(诸如，串行外围接口(spi)或低引脚数(lpc)总线)连接到bios存储器150。
19.bios存储器150可存储用于启动计算系统100的bios代码。bios存储器150可利用非易失性存储器装置来实现。非易失性存储器装置可利用电可擦除可编程只读存储器(eeprom)、闪存、电阻式ram(rram)、磁ram(mram)、相变ram(pram)、铁电ram(fram)、纳米浮栅存储器(nfgm)、聚合物ram(poram)或与其类似的存储器来实现。
20.bios代码可以是或可包括检测计算系统100的硬件(诸如，板101、存储器模块120、键盘和磁盘驱动器)并验证它们是否正常操作的开机自检(post)代码，和/或可以是post代码的一部分。bios代码可包括用于初始化存储器模块120的存储器参考代码(memory reference code，mrc)。mrc可包括被配置为允许cpu 110与存储器模块120正常地互操作的各种算法。
21.通过由cpu 110执行的mrc，存储在存储器模块120的串行存在检测(spd)存储器装置(或spd存储器)104中的spd数据可通过存储器总线140来读取，并且用于使用spd数据控制存储器模块120的频率、时序、驱动和详细操作参数可被设置。spd数据可包括存储器模块
120的类型、包括在存储器模块120中的存储器装置的类型、操作时序信息、制造信息、修订代码和序列号。存储器模块120的内置自检(bist)和/或存储器训练可通过mrc代码来执行。
22.为了简洁起见，存储器总线140被示出为通过cpu 110与存储器模块120的连接引脚106之间的一条信号线表示，但是它可通过多条信号线表示。存储器总线140可被实现为包括多条信号线的一个通道，或者可被实现为多个通道。此外，一个或多个存储器模块120可连接到每个通道。
23.存储器总线140可由传输命令/地址的命令/地址信号线和传输数据的数据线组成。此外，存储器总线140可包括信号从存储器模块120发送到cpu110所通过的模块就绪信号(图2中的rdy_dimm)线250(参见图2)。
24.模块就绪信号rdy_dimm指示：在计算系统100的启动操作期间，在存储器模块120中的处理装置130和存储器装置121至129之间执行存储器训练之后，由处理装置130进行的存储器训练完成。在存储器模块120的存储器装置121至129通过处理装置130被执行主要存储器训练之后，模块就绪信号rdy_dimm可用作指示cpu 110准备好执行次要存储器训练的基本信号。
25.存储器模块120可被配置为执行处理功能，并且可包括例如印刷电路板102以及结合到印刷电路板102的处理装置130、存储器装置121至129以及spd存储器装置104。存储器模块120可被实现为合适类型的存储器模块。例如，存储器模块120可被实现为双列直插式存储器模块(dimm)、寄存的dimm(registered dimm，rdimm)、低负载dimm(lrdimm)、全缓冲dimm(fbdimm)、小外形dimm(sodimm)等。
26.处理装置130可作为cpu 110的加速器或协处理器来操作。处理装置130可被实现为在其中各种功能块和/或多个ip被集成在一个半导体集成电路中的片上系统(soc)。ip表示可集成到soc中的电路、逻辑或它们的组合。
27.处理装置130可用作高效地执行cpu 110的特定功能的加速器，并且可包括作为专用于处理图形数据的功能块的图形处理器(gpu)、作为用于高效地执行ai计算和推断的块的神经处理器(npu)、和/或作为专用于数据传输的块的数据处理器(dpu)。
28.处理装置130可包括存储器控制器132，存储器控制器132控制到存储器装置121至129的数据发送和来自存储器装置121至129的数据接受。存储器控制器132可根据处理装置130的存储器请求来访问存储器装置121至129。根据示例实施例，存储器控制器132可根据cpu 110的存储器请求来访问存储器装置121至129。在这种情况下，存储器控制器132可被配置为允许由cpu 110控制的存储器装置121至129的访问对于处理装置130是透明的(transparent)。
29.存储器控制器132可包括存储器物理层接口(phy)234(参见图2)，存储器物理层接口(phy)234(参见图2)用于与存储器装置121至129接口连接(诸如，选择与存储器位置对应的行和列、将数据写入存储器位置或读取写入的数据)。
30.存储器装置121至129可在处理装置130中的存储器控制器132的控制下写入数据或读取数据。例如，存储器装置121至129可以是dram装置或易失性存储器装置(诸如，同步dram(sdram)、双倍数据速率sdram(ddr sdram)、低功率双倍数据速率sdram(lpddr sdram)、图形双倍数据速率sdram(gddr sdram)、ddr2 sdram、ddr3 sdram、ddr4 sdram、ddr5 sdram、宽i/o dram、高带宽存储器(hbm)、混合存储器立方体(hmc)等)中的任何一个。
在下文中，为了便于描述，存储器装置121至129统称为dram 121至129。
31.图2是示出图1的存储器模块的框图。
32.参照图2，存储器模块120可包括包含存储器控制器132的处理装置130和dram 121至129。存储器控制器132可包括寄存器控制字(register control word，rcw)230、训练电路232和存储器phy 234。
33.rcw 230可被设置以控制存储器模块120的初始化特性和/或操作特性。rcw 230可包括配置存储器控制器132使得存储器控制器132可与dram 121至129正常互操作的各种算法。例如，指示dram 121至129的频率、时序、驱动和详细操作参数的代码可被设置在rcw 230中。dram 121至129的存储器训练可根据rcw 230的代码来执行。
34.训练电路232可在存储器控制器132的控制下执行与dram 121至129的存储器核相关联的存储器核参数训练和/或针对除了存储器核之外的剩余外围电路的外围电路参数训练。训练电路232可确定dram 121至129的存储器核参数和/或外围电路参数的最佳参数。训练电路232可在存储器控制器132的控制下执行dram 121至129的存储器训练。
35.存储器phy 234可包括针对存储器控制器132与dram 121至129之间的高效通信所需的信号、频率、时序、驱动、详细操作参数和功能而设置的物理或电层和逻辑层。存储器phy 234可支持联合电子设备工程委员会(jedec)标准ddr和/或lpddr协议的特征。
36.存储器phy 234可通过存储器接口240将存储器控制器132连接到dram 121至129。为了简洁起见，存储器接口240被示出为连接到存储器控制器132与dram121至129之间的一条信号线，但是实际上可通过多条信号线连接。存储器接口240可包括用于将存储器控制器132连接到dram121至129的连接器。连接器可被实现为引脚、球(ball)、信号线或其他硬件组件。例如，可通过存储器接口240在存储器控制器132与dram 121至129之间发送和接收时钟信号、命令、地址、数据等。
37.dram 121至129中的每个可包括模式寄存器组(mrs)220、存储器核和除存储器核之外的其他外围电路。存储器核可包括存储器单元阵列、行解码器、列解码器以及感测放大器单元。存储器单元阵列可包括多条字线和多条位线、以及形成在字线与位线相交的点的多个存储器单元。在一种实施方式中，行解码器启用与行地址对应的字线，感测放大器单元感测并放大连接到启用的字线的存储器单元的数据并将该数据发送到位线，列解码器以突发模式(burst mode)递增地增加接收的列地址并选择与递增地增加的列地址对应的位线。
38.mrs 220可被编程为设置dram的多个操作选项、各种功能、特性和模式。当从存储器控制器132发出mrs命令时，可使用提供给存储器接口240的地址总线的适当位值对mrs 220进行编程。
39.例如，mrs 220可用于控制突发长度bl、cas延迟cl、写入均衡启用/禁用、数据端子参考电压(data terminal reference voltage，vrefdq)训练等。突发长度bl可被提供以设置可针对读取命令和/或写入命令访问的列位置的最大数量。cas延迟cl可被提供以定义读取命令与有效输出数据的第一位之间的时钟循环延时。写入均衡可被提供以在写入操作期间启用或禁用时钟信号与数据选通信号之间的偏斜补偿(skew compensation)。vrefdq训练可被提供以设置用于读取输入或输出到数据(dq)端子的数据的参考电压。可基于驱动连接到数据(dq)端子的输入/输出缓冲器的电源电压vddq来训练vrefdq训练。
40.此外，mrs 220可用于控制与dram的通用功能、特性和模式有关的延迟锁定环
(dll)重置、dll启用/禁用、输出驱动强度、附加延迟、终端数据选通(tdqs)启用/禁用、输入/输出缓冲器启用/禁用、cas延迟、动态终止(dynamic termination)、光循环冗余校验(crc)(light cyclic redundancy check)、多用途寄存器(mpr)位置功能、mpr操作功能、减速模式(gear down mode)、mpr读取格式、断电模式、vref监视、读取前导码训练模式、读取前导码功能、写入前导码功能、命令和地址(c/a)奇偶校验功能、crc错误状态、c/a奇偶校验错误状态、片上终结(on die termination，odt)功能、数据掩码功能、写入数据总线反转(dbi)功能、读取dbi功能、错误检测码(edc)保持模式等。
41.根据示例实施例，当计算系统100上电时，存储器模块120可通过存储器模块120内的处理装置130对dram 121至129执行第一存储器训练。同时，计算系统100可根据上电通过cpu 110执行启动操作，以执行bios代码的一部分。
42.存储器模块120的dram121至129的第二存储器训练可包括在用于通过cpu 110执行bios代码的启动操作中。在第二存储器训练的实施方式中，第一存储器训练可能已经完成(即，可在确认存储器模块120处于就绪状态之后执行第二存储器训练)，这可有益于减少计算系统100的启动时间。此外，通过向cpu 110通知存储器模块120的就绪状态，最小启动时间可被设置。
43.存储器模块120的存储器控制器132可在处理装置130对dram 121至129的第一存储器训练完成之后输出模块就绪信号rdy_dimm。训练电路232可通过执行dram 121至129的第一存储器训练，来生成指示存储器训练完成的模块就绪信号rdy_dimm。存储器模块120可通过存储器模块120的连接引脚106之中的未使用的引脚，将模块就绪信号rdy_dimm输出到存储器模块120的外部。根据示例实施例，存储器模块120可通过存储器模块120的连接引脚106之中的专用于模块就绪信号的引脚，输出模块就绪信号rdy_dimm。
44.从存储器模块120输出的模块就绪信号rdy_dimm可通过形成在计算系统100的板101上的专用信号线250发送到cpu 110。专用信号线250(或称为模块就绪信号rdy_dimm线)可被包括在存储器总线140中并且连接到cpu 110。
45.根据示例实施例，模块就绪信号rdy_dimm可通过形成在计算系统100的板101上的中断信号线被发送到cpu 110。cpu 110可包括系统管理模式(smm)，并且smm可允许cpu 110在用于监视和管理系统资源和功率使用的替代环境中操作(例如，执行特定系统级代码)。可通过系统管理中断(smi)进入smm。cpu 110可包括smi封装引脚，并且smi封装引脚可连接到中断信号线。cpu 110可通过中断信号线和smi封装引脚接收模块就绪信号rdy_dimm。重新使用板101中的现有中断信号线可节省板101中的大量占用空间，并且避免将附加导线延伸到cpu 110的成本。此外，避免附加导线可消除来自附加导线的存在的潜在电磁干扰(emi)。
46.图3是示出根据示例实施例的启动计算系统的方法的流程图。
47.参照与图1和图2相关的图3，在操作s100中，可向计算系统100供电，并且计算系统100可上电(s100)。操作s100可包括计算系统100被重置或者计算系统100的电力状态被转变的情况。根据示例实施例，当计算系统100上电时，为了计算系统100的正确操作，可执行对计算系统100的硬件组件上电复位(por)操作。例如，当提供给存储器模块120的电源电压电平稳定地保持恒定时，为了存储器模块120的正确操作，处理装置130和dram 121至129可执行por操作。
48.在计算系统100上电之后，计算系统100的启动操作可被划分为由存储器模块120中的处理装置130执行的第一启动操作s320和s322以及由cpu110执行从bios存储器150读取的bios代码的第二启动操作s330、s332、s334、s336和s338。处理装置130执行的第一启动操作可与cpu 110执行的第二启动操作中的一些第二启动操作被同时执行。cpu 110执行的第二启动操作中的剩余的第二启动操作可在检查存储器模块120的模块就绪状态之后进行。
49.在计算系统100上电之后，存储器模块120可通过处理装置130执行第一存储器训练(s320)。处理装置130中的存储器控制器132的训练电路232可对dram121至129执行训练。例如，可执行时钟训练、地址训练、写入/读取均衡、写入/读取重新居中训练(write/read re
‑
center training)等。将参照图4描述在操作s320中的由处理装置130进行的第一存储器训练的详细描述。
50.当由处理装置130进行的第一存储器训练s320完成时(即，在训练电路232中完成针对dram 121至129的第一存储器训练之后)，存储器模块120可生成指示第一存储器训练完成的模块就绪信号rdy_dimm(s322)。模块就绪信号rdy_dimm可被发送到cpu 110。
51.在计算系统100上电之后，cpu 110可对计算系统100执行第一启动序列(s330)。第一启动序列可被配置为读取关于cpu 110、存储器模块120和计算系统板101的存储的标识(id)信息。根据示例实施例，可从包括在存储器模块120中的spd存储器装置104读取存储的id信息，或者从bios存储器150读取存储的id信息。包括在bios存储器150中的bios代码可包括用于读取关于cpu 110、存储器模块120和计算系统板101的存储的id信息的指令。cpu 110可通过执行bios代码来提取cpu 110、存储器模块120和计算系统板101的id(例如，序列号)。将参照图5描述操作s330中的第一启动序列的详细描述。
52.在执行第一启动序列(s330)之后，cpu 110可检查是否从存储器模块120接收到模块就绪信号rdy_dimm(s332)。如果未接收到模块就绪信号rdy_dimm(s332：否)(即，如果存储器模块120中的处理装置130对dram 121至129的第一存储器训练未完成)，则如s332和s334循环所示，cpu 110可等待直到由处理装置130进行的第一存储器训练完成并且模块就绪信号rdy_dimm被接收到为止(s334)。
53.如果从存储器模块120接收到模块就绪信号rdy_dimm(s332：是)(即，如果存储器模块120中的处理装置130对dram 121至129的第一存储器训练完成)，则cpu 110可对计算系统100执行第二启动序列(s336)。第二启动序列可被配置为通过cpu 110初始化存储器模块120，并且对dram 121至129执行第二存储器训练。cpu 110对dram 121至129的第二存储器训练可类似于在操作s320中执行的处理装置130对dram 121至129的第一存储器训练。cpu 110对dram 121至129的第二存储器训练可包括例如时钟训练、地址训练、写入/读取均衡、写入/读取重新居中训练等。将参照图6描述操作s336中的第二启动序列的详细描述。
54.如果cpu 110对计算系统100的第二启动序列成功完成并且没有检测到硬件故障，则激活启动的计算系统100(s338)。计算系统100可执行各种计算功能。
55.在上述计算系统的启动方法中，在存储器模块120中的处理装置130与dram 121至129之间主要地执行存储器训练之后，在cpu 110与dram 121至129之间次要地执行存储器训练。由于dram 121至129的存储器训练被执行两次，因此，可以更充分地确保计算系统的稳定性。
56.图4是用于具体描述由图3的存储器模块中的处理装置进行的第一存储器训练(s320)的流程图。
57.参照图2、图3和图4，当计算系统100上电时，存储器模块120可上电(s310)。在存储器模块120上电之后，存储器控制器132可设置rcw 230以控制dram 121至129的初始化特性和/或操作特性(s401)。存储器控制器132可将指示dram 121至129的频率、时序、驱动和详细操作参数的代码存储在rcw 230中，以与dram 121至129正常地互操作。
58.dram 121至129可设置mrs 220，mrs 220设置dram 121至129的多个操作选项、各种功能、特性和模式(s402)。例如，用于设置突发长度bl、cas延迟cl、mpr操作功能、mpr读取格式、写入均衡、vrefdq训练、读取/写入dbi功能等的代码可被设置在mrs 220中。
59.存储器控制器132的训练电路232可通过存储器接口240执行用于控制信号ctl的时钟训练(s403)。控制信号ctl可包括片选信号cs、时钟启用信号cke、行地址选通信号ras、列地址选通信号cas和写入启用信号we。可执行时钟训练，使得从存储器控制器132发送的控制信号ctl与时钟信号clk可由dram121至129同步地接收。
60.存储器控制器132的训练电路232可通过存储器接口240执行用于命令cmd的时钟训练(s404)。命令cmd可包括预充电命令、激活命令、读取命令和写入命令。可执行时钟训练，使得从存储器控制器132发送的命令cmd可由dram 121至129与时钟信号clk同步地接收。
61.存储器控制器132可执行用于识别由dram 121至129通过存储器接口240接收的信号的接受(或接收)启用的训练(s405)。dram 121至129可向训练电路232提供识别接受从存储器控制器132发送的信号的接受启用信号。训练电路232可包括用于保持接收启用信号的断言(assertion)与来自存储器控制器132的信号的发送一致的缓冲和时序电路。可在接受启用训练处理期间确定训练电路232中的接受启用信号的断言时序。
62.存储器控制器132的训练电路232可对通过存储器接口240从dram 121至129输出的数据dq执行基本数据选通信号(dqs)训练(或称为读取dq/dqs基本训练)(s406)。当dram 121至129的数据选通信号dqs与数据dq一起被输出到存储器控制器132时，训练电路232可执行读取重新居中训练，使得数据选通信号(dqs)边沿在数据(dq)窗中居中。
63.可使用mrs 220的mpr操作功能和mpr读取格式，来执行操作s403中的用于控制信号ctl的时钟训练、操作s404中的用于命令cmd的时钟训练、操作s405中的用于接受启用的训练和/或操作s406中的用于数据dq的数据选通信号(dqs)训练。可通过读取mpr中的预设时序校准位序列，来执行用于控制信号ctl的时钟训练、用于命令cmd的时钟训练和接受启用训练。此外，可通过读取mpr中的预设数据模式，来训练用于数据dq的数据选通信号(dqs)训练。操作s403至s406的训练是使用mpr的外围电路(而不是使用dram 121至129的存储器核)的参数训练。
64.存储器控制器132的训练电路232可通过存储器接口240接收与dram121至129的写入操作相关联的写入均衡命令，并且执行写入均衡以补偿接收的时钟信号clk与数据选通信号dqs之间的偏斜(s407)。写入均衡是这样的功能：使用时钟信号clk对从存储器控制器132输出的数据选通信号dqs进行采样并且检测数据选通信号dqs与时钟信号clk之间的相位关系以调整数据选通信号dqs的延时。
65.存储器控制器132的训练电路232可针对通过存储器接口240输入到dram 121至
129的数据dq执行数据选通信号dqs的训练(或称为写入dq/dqs基本训练)(s408)。当数据选通信号dqs与数据dq一起从存储器控制器132输入时，dram 121至129可执行写入重新居中训练，使得数据选通信号(dqs)边沿在数据(dq)窗中居中。
66.存储器控制器132的训练电路232可执行减小通过存储器接口240输入到dram 121至129或从dram 121至129输出的数据dq之间的数据输入/输出时间差的写入/读取数据去偏斜操作(或称为发送/接收每比特去偏斜)(s409)。因为当在写入模式下写入数据dq之间的偏斜增加时，有效数据窗减小，所以dram 121至129可执行写入数据去偏斜操作以补偿数据偏斜，以便确保有效数据裕度。因为当在读取模式下读取数据dq之间的偏斜增加时，有效数据窗减小，所以dram 121至129可执行读取数据去偏斜操作以补偿数据偏斜，以便确保有效数据裕度。
67.存储器控制器132的训练电路232可执行vrefdq训练，以设置用于通过存储器接口240读取输入到dram 121至129或从dram 121至129输出的数据dq的参考电压(vrefdq)电平(s410)。dram 121至129可训练参考电压vrefdq的训练值、vrefdq的训练范围等。dram 121至129可执行vrefdq训练，使得参考电压(vrefdq)电平进入被示出为多个数据(dq)转变的重叠的数据(dq)眼图的中间。
68.为了存储器控制器132正确地识别从dram 121至129读取的数据，重要的是确定读取数据是有效的时的时间。为了使dram 121至129正确地识别从存储器控制器132接收的写入数据，重要的是确定写入数据是有效的时的时间。为此，指示在将数据dq输入到数据选通信号dqs之前或将数据dq从数据选通信号dqs输出之前数据dq是否是有效的预定前导码时间可被设置。存储器控制器132的训练电路232可对通过存储器接口240输入到dram 121至129或从dram121至129输出的数据dq执行高级数据选通信号(dqs)训练(或称为发送/接收dq/dqs高级训练)(s411)。
69.训练电路232可执行启用训练以使数据选通信号dqs能够在根据写入命令输入数据dq之前或在根据读取命令输出数据dq之前具有一个时钟周期或两个时钟周期前导码时间。用于数据选通信号dqs的启用训练可执行调整dll的延时的操作，直到启用信号的断言与数据选通信号dqs中的前导码指示匹配为止。
70.操作s408至s411的训练可以是使用dram 121至129的存储器核的核参数训练。训练电路232可完成dram 121至129的外围电路参数训练和核参数训练，并且将优化的外围电路参数和核参数存储在参数存储区域中。参数存储区域可以是例如扩展模式寄存器组(emrs)或单独的参数寄存器单元、或非易失性存储器(诸如，闪存、eprom、eeprom等)。dram 121至129可在设置有存储在参数存储区域中的优化的外围电路参数和核参数的环境下写入或读取数据。
71.图5是具体示出由图3的cpu执行的第一启动序列s330的流程图。
72.参照图1、图3和图5，在计算系统100上电之后，cpu 110可检测计算系统100的硬件配置。cpu 110可检测硬件配置之中的存储器模块120的配置(s501)。cpu 110可检查存储器模块120的类型和/或存储器属性。例如，cpu 110可从spd存储器装置检查存储器模块120的类型和/或存储器属性。存储器模块120的类型可以是rdimm、lrdimm、fbdimm和sodimm中的任何一种。存储器属性可由存储列(或称为存储排，rank)的数量、数据宽度、数据带宽等组成。例如，存储器属性可由1个存储列、x4、1600mhz等组成。
73.为了计算系统100的正确操作，cpu 110可在上电之后检查对计算系统100的硬件组件执行的上电复位(por)操作(s502)。具体地，cpu 110可检查对处理装置130和dram 121至129执行的por操作，以用于存储器模块120的正确操作。
74.cpu 110可对计算系统100的双倍数据速率(ddr)时钟进行初始化(s503)。cpu 110可检查计算系统100的电源电压vdd和存储器模块120的存储列(s504)。cpu 110可获得存储在包括在存储器模块120中的spd存储器装置104中的spd数据(s505)。spd数据可包括存储器模块120的类型、包括在存储器模块120中的存储器装置的类型、操作时序信息、制造信息、修订代码和序列号。
75.在计算系统100的上电之后，cpu执行的第一启动序列(s330)可包括检测存储器模块120的配置(s501)、检查por操作(s502)、初始化ddr时钟(s503)、检查电源电压vdd和存储器模块120的存储列(s504)以及获得spd数据(s505)。在本示例实施例中，cpu执行的第一启动序列s330被描述为五个操作，但是第一启动序列s330还可包括各种操作。
76.在执行第一启动序列(s330)之后，cpu 110可检查是否从存储器模块120接收到模块就绪信号rdy_dimm(s332)，等待直到接收到模块就绪信号rdy_dimm(s334)为止，并且在接收到模块就绪信号rdy_dimm时执行第二启动序列s336。
77.图6是具体示出由图3的cpu执行的第二启动序列s336的流程图。
78.参照图1、图3和图6，cpu 110可检查从存储器模块120接收到模块就绪信号rdy_dimm(s332：是)，并且测试计算系统100的组件(s601)。例如，cpu 110可对提供给计算系统100的组件的时钟执行粗略测试。cpu 110可执行粗略测试以使时钟信号的相位同步并保持恒定的操作频率。
79.cpu 110可对存储器模块120的dram121至129的输入/输出(io)接口进行初始化(s602)。此时，存储器模块120的存储器控制器132可被配置为允许由cpu 110控制的dram 121至129的输入/输出接口对于存储器模块120的处理装置130是透明的。
80.在对存储器模块120的dram 121至129的输入/输出接口进行初始化之后(s602)，cpu 110可对dram 121至129执行第二存储器训练。在一个示例中，通过cpu 110执行的第二存储器训练对于处理装置可以是透明的。cpu 110对dram 121至129进行的输入/输出接口初始化和第二存储器训练可类似于图4中描述的由存储器模块120的处理装置130对dram 121至129进行的第一存储器训练s320。
81.通过cpu 110对dram 121至129的输入/输出接口进行初始化(s602)可包括与以下操作类似的操作：图4的操作s401中的设置rcw 230使得存储器控制器132与dram 121至129的初始化特性和/或操作特性匹配的操作、以及操作s402中的设置对dram 121至129的多个操作选项、各种功能、特性和模式进行设置的mrs 220的操作。
82.此后，cpu 110可对dram 121至129执行第二存储器训练。cpu 110可对dram 121至129的控制信号ctl执行时钟训练(s603)。通过cpu 110对dram 121至129的控制信号ctl执行时钟训练(s603)可类似于图4的操作s403中的时钟训练操作，时钟训练操作被执行使得从存储器控制器132发送的控制信号ctl可与时钟信号clk被dram 121至129同步地接收。
83.cpu 110可对dram 121至129的命令cmd执行时钟训练(s604)。通过cpu 110对dram 121至129的命令cmd执行时钟训练(s604)可类似于图4的操作s404中的时钟训练操作，时钟训练操作被执行使得从存储器控制器132发送的命令cmd可与时钟信号clk被dram 121至
129同步地接收。
84.cpu 110可执行用于识别在dram 121至129中接收的信号的接受启用训练(s605)。通过cpu 110执行用于识别由dram 121至129接收的信号的接受启用训练(s605)可类似图4的操作s405中的接受启用训练操作，在接受启用训练操作中，识别接受从存储器控制器132发送的信号的接受启用信号的断言被执行以与来自存储器控制器132的信号的发送匹配。
85.cpu 110可对从dram121至129输出的数据dq执行基本数据选通信号(dqs)训练(s606)。通过cpu 110对从dram121至129输出的数据dq执行基本数据选通信号(dqs)训练(s606)可类似于图4的操作s406中的读取重新居中训练操作，读取重新居中训练操作被执行，使得当dram 121至129的数据选通信号dqs与数据dq一起被输出到存储器控制器132时，数据选通信号(dqs)边沿在数据(dq)窗中居中。
86.cpu 110可执行与dram 121至129的写入操作相关联的写入均衡(s607)。通过cpu 110执行与dram121至129的写入操作相关联的写入均衡(s607)可类似于以下操作：将图4的步骤s407的从存储器控制器132输出的数据选通信号dqs采样为时钟信号clk并且检测数据选通信号dqs与时钟信号clk之间的相位关系以调整数据选通信号dqs的延时。
87.cpu 110可对输入到dram121至129的数据dq执行数据选通信号dqs的训练(s608)。通过cpu 110对输入到dram121至129的数据dq执行数据选通信号dqs的训练(s608)可类似于以下操作：图4的操作s408中的执行写入重新居中训练使得当数据选通信号dqs与数据dq一起从存储器控制器132输入到dram121至129时，数据选通信号(dqs)边沿在数据(dq)窗中居中的操作。
88.cpu 110可执行写入/读取数据去偏斜操作以减小输入到dram 121至129或从dram121至129输出的数据dq之间的数据输入/输出时间差(s609)。通过cpu 110执行写入/读取数据去偏斜操作以减小输入到dram 121至129或从dram121至129输出的数据dq之间的数据输入/输出时间差(s609)可类似于图4的操作s409中的写入数据去偏斜操作和读取数据去偏斜操作。
89.cpu 110可执行vrefdq训练以设置用于读取输入到dram121至129或从dram121至129输出的数据dq的参考电压(vrefdq)电平(s610)。通过cpu 110执行vrefdq训练以设置用于读取输入到dram 121至129或从dram 121至129输出的数据dq的参考电压(vrefdq)电平(s610)可类似于图4的操作s410中的执行vrefdq训练使得参考电压(vrefdq)电平进入数据(dq)眼图的中间的操作。
90.cpu 110可执行数据选通信号(dqs)训练，以设置指示在数据dq输入到dram 121至129的数据选通信号dqs或数据dq从dram 121至129的数据选通信号dqs输出之前数据dq是否是有效的预定前导码时间(s611)。通过cpu 110执行数据选通信号(dqs)训练以设置指示在将数据dq输入到dram 121至129的数据选通信号dqs之前或将数据dq从dram 121至129的数据选通信号dqs输出之前数据dq是否是有效的预定前导码时间(s611)可类似于以下操作：图4的操作s411中的执行启用训练以允许数据选通信号dqs在根据写入命令输入数据dq之前或在根据读取命令输出数据dq之前具有一个时钟周期或两个时钟周期前导码时间并且调整dll的延迟直到启用信号的断言与数据选通信号dqs中的前导码指示匹配为止的操作。
91.存储器控制器132可通过cpu 110完成dram 121至129的第二存储器训练，并将
dram 121至129的优化的外围电路参数和核参数存储在参数存储区域中。
92.通过总结和回顾，应用(诸如，深度神经网络)可使用具有大的计算和存储器能力的计算系统来更准确地训练或学习不同的数据集。考虑到训练数据集的增加、模型参数的增加以及处理的中间结果的增加，这样的计算系统可包括配备有用于训练人工神经网络或人工智能的处理装置的存储器模块以及以存储器为中心的动态随机存取存储器(dram)。当计算系统被启动时，作为开机自检(post)的一部分，包括在计算系统中的存储器模块的训练和/或测试可被执行。
93.包括处理装置的存储器模块可使用存储器模块中的处理装置与dram之间的接口调谐操作，并且在处理装置与dram之间的接口调谐操作完成之后，主机装置可被通知。因此，包括安装有处理装置的存储器模块的计算系统可在启动时使用新的启动序列来实现。
94.如上所述，实施例可提供安装有处理装置的存储器模块、包括存储器模块的计算系统以及计算系统的启动方法。
95.在此公开了示例实施例，并且虽然采用了特定的术语，但是它们仅以一般的和描述性的含义来使用和解释，而不是为了限制的目的。在一些情况下，如本领域普通技术人员自提交本技术时将清楚的是，除非另外特别指示，否则结合特定实施例描述的特征、特性和/或元件可单独使用，或者可与结合其他实施例描述的特征、特性和/或元件组合使用。因此，本领域技术人员将理解的是，在不脱离如权利要求中阐述的本发明的精神和范围的情况下，可进行形式上和细节上的各种改变。