如何利用人工智能推进芯片开发?
一年前，zdnet 与google brain总监jeff dean 谈了有关该公司如何利用人工智能来推进其定制芯片内部开发以加速其软件的过程。dean指出，在某些情况下，人工智能的深度学习形式可以比人类做出更好的决策，以决定如何在芯片中布局电路。
本月，google 在arxiv文件服务器 上 发表 的一篇题为《阿波罗：可移植的体系结构探索》（apollo：transferable architecture exploration）的论文上，向世人揭示了一个名为apollo的研究项目。
阿波罗（apollo）代表着一个有趣的发展，超越了dean一年前在国际固态电路会议上的正式讲话中以及在他对zdnet的讲话中所暗示的含义。
在dean当时提供的示例中，机器学习可用于一些低级设计决策，即“布局和布线”。在位置和路线上，芯片设计人员使用软件来确定构成芯片操作的电路布局，类似于设计建筑物的平面图。
相比之下，在阿波罗，该计划执行的是论文作者yazdanbakhsh及其同事所说的“架构探索”，而不是平面图。
芯片的体系结构是芯片功能元素的设计，主要是决定它们如何相互作用以及软件程序员应如何访问这些功能元素。
例如，经典的intel x86处理器具有一定数量的片上内存，专用的算术逻辑单元和许多寄存器，等等。这些部分的组合方式赋予了所谓的英特尔架构以意义。
当被问及dean的描述时，yazdanbakhsh在电子邮件中告诉zdnet： “我会看到我们的工作和布局规划项目是正交且互补的。
yazdanbakhsh解释说：“架构探索比 计算栈中的 布局布线要高级得多，”他指的是康奈尔大学（cornell university）的christopher batten的演讲。
yazdanbakhsh表示：“我认为，在［架构探索］中，存在更高的性能改进余地。
yazdanbakhsh及其同事将apollo称为“第一个可移植的体系结构探索基础结构”，这是第一个程序，它在不同的芯片上工作的越多，越能更好地探索可能的芯片体系结构，从而将学到的知识转移到每个新任务上。
yazdanbakhsh和团队正在开发的芯片本身就是用于ai的芯片，称为加速器。该芯片与nvidia a100“ ampere” gpu，cerebras systems wse芯片以及目前投放市场的许多其他启动部件属于同一类。因此，使用ai设计运行ai的芯片具有很好的对称性。
鉴于任务是设计一个ai芯片，apollo程序正在探索的架构是适合运行神经网络的架构。这意味着很多线性代数，很多简单的数学单元执行矩阵乘法并对结果求和。
团队将挑战定义为找到适合给定ai任务的这些数学块的正确组合之一。他们选择了一个相当简单的ai任务，即一个称为mobilenet的卷积神经网络，这是一种资源有效的网络，由andrew g.howard和google的同事于2017年设计。此外，他们使用多个内部设计的网络测试了工作负载，以执行诸如对象检测和语义分段之类的任务。
这样，目标就变成了：对于芯片的体系结构，什么是正确的参数，以使得对于给定的神经网络任务，芯片满足诸如速度之类的某些标准？
搜索涉及对超过4.52亿个参数进行排序，包括将使用多少个数学单元（称为处理器元素），以及对于给定模型而言最佳的参数存储量和激活存储量。
apollo的优点是可以将各种现有的优化方法相提并论，以了解它们如何在优化新型芯片设计的体系结构中相互叠加。在这里，上图显示了相对结果。
apollo是一个框架，这意味着它可以采用文献中开发的多种方法进行所谓的黑盒优化，并且可以使这些方法适应特定的工作负载，并比较每种方法在解决目标方面的效果。
在另一个很好的对称性中，yazdanbakhsh采用了一些优化方法，这些方法实际上是为开发神经网络体系结构而设计的。其中包括google的quoc v.le及其同事于2019年开发的所谓进化法; christoph angermueller和其他人在google上基于模型的强化学习和所谓的基于群体的方法集成，目的是“设计” dna序列；和贝叶斯优化方法。因此，apollo包含了令人愉悦的对称性的主要层次，将为神经网络设计和生物合成设计的方法汇集在一起，以设计可用于神经网络设计和生物合成的电路。
比较所有这些优化，这就是apollo框架的亮点。它的整个存在目的是有条不紊地采用不同的方法，并指出最有效的方法。阿波罗（apollo）试验结果详细说明了进化方法和基于模型的方法如何优于随机选择和其他方法。
但是，阿波罗最引人注目的发现是，与蛮力搜索相比，运行这些优化方法使流程效率更高。例如，他们将基于群体的集成方法与他们所说的对体系结构方法的解决方案集的半穷尽搜索进行了比较。
yazdanbakhsh及其同事看到的是，基于人群的方法能够发现利用电路中权衡取舍的解决方案，例如计算与内存，而这通常需要特定领域的知识。由于基于人口的方法是一种博学的方法，因此它可以找到半穷举搜索无法找到的解决方案。
实际上，p3bo（基于人口的黑盒优化）发现的设计比3k样本搜索空间的半穷尽略好。我们观察到该设计使用非常小的内存大小（3mb）来支持更多的计算单元。这充分利用了视觉工作负载的计算密集型性质，而原始半详尽搜索空间中并未包含该功能。这证明了半穷举方法需要人工搜索空间工程，而基于学习的优化方法利用大的搜索空间来减少人工工作。
因此，apollo能够弄清楚不同的优化方法在芯片设计中的效果如何。但是，它还可以做更多的事情，那就是它可以运行所谓的迁移学习，以展示如何依次改进这些优化方法。
通过运行优化策略以将芯片设计提高一个设计点，例如以毫米为单位的最大芯片尺寸，这些实验的结果便可以作为输入输入到随后的优化方法中。apollo团队发现的是，通过利用初始或种子优化方法的最佳结果，各种优化方法可在诸如面积受限的电路设计之类的任务上提高其性能。
所有这些必须由以下事实括起来：为mobilenet或任何其他网络或工作负载设计芯片受设计过程对给定工作负载的适用性的限制。
实际上，其中一位作者berkin akin帮助开发了mobilenet版本mobilenet edge，他指出优化是芯片和神经网络优化的产物。
“神经网络架构必须了解目标硬件架构，才能优化整体系统性能和能源效率，” akin去年在与同事suyog gupta的论文中写道。
zdnet通过电子邮件与akin联络，问一个问题：与神经网络体系结构的设计隔离时，硬件设计有多有价值？
“很好的问题。”akim在电子邮件中回答。
akin说，apollo对于给定的工作负载可能就足够了，但是在芯片和神经网络之间进行的所谓的“共同优化”将带来其他好处。
这是akin的完整回覆：
当然，在某些用例中，我们正在为给定的一组固定神经网络模型设计硬件。这些模型可以是硬件目标应用领域中高度优化的代表性工作负载的一部分，也可以是定制加速器用户的要求。在这项工作中，我们正在解决这种性质的问题，我们使用ml为给定的工作负载套件找到最佳的硬件体系结构。但是，当然在某些情况下，可以灵活地共同优化硬件设计和神经网络体系结构。实际上，我们正在进行一些此类联合优化的工作，我们希望可以取得更好的权衡。
那么，最后的收获是，即使芯片设计受到ai的新工作量的影响，芯片设计的新过程也可能对神经网络的设计产生可衡量的影响。
阿尔卡特朗讯与中国移动推出灵云无线微基站
了解氮化铝陶瓷基板的金属化是否通过化学镀铜方式
比亚迪透露“刀片电池”未来将向其他车企供应 且预计今年6月将正式投放市场
一次Rust重写基础软件的实践
机智云完成亿元级人民币C1轮融资，华映资本领投
如何利用人工智能推进芯片开发?
魅族17采用曲面瀑布屏设计，将支持90Hz刷新率
国产彩电巨头长虹电视为何会走向没落?
舒印彪带来了一份《以国际标准推动高质量发展》的提案
5G对测试测量行业会产生哪些影响
魅族迎战双11,魅蓝E/E2放血降价300元
关于电纸书热潮之下需要的一些冷思考
亨通如何打破国外对PX和PTA的垄断，让中国人在生产领域不再被卡脖子？
网络充分共建共享，为5G网络建设打开新局面
三星S8热卖中，三星S9又来了！屏占比近100%+骁龙845+屏内指纹
新型混合动力汽车检测技术
黄牛开始预定红米note4，网友抢不到，黄牛却有货？
六通道CAN集线器连接can激光器的使用方法
全志A64四核ARM核心板主要应用及规格
区块链生态系统正在将数字资产推向主流
本月，google 在arxiv文件服务器 上 发表 的一篇题为《阿波罗：可移植的体系结构探索》（apollo：transferable architecture exploration）的论文上，向世人揭示了一个名为apollo的研究项目。
阿波罗（apollo）代表着一个有趣的发展，超越了dean一年前在国际固态电路会议上的正式讲话中以及在他对zdnet的讲话中所暗示的含义。
在dean当时提供的示例中，机器学习可用于一些低级设计决策，即“布局和布线”。在位置和路线上，芯片设计人员使用软件来确定构成芯片操作的电路布局，类似于设计建筑物的平面图。
相比之下，在阿波罗，该计划执行的是论文作者yazdanbakhsh及其同事所说的“架构探索”，而不是平面图。
芯片的体系结构是芯片功能元素的设计，主要是决定它们如何相互作用以及软件程序员应如何访问这些功能元素。
例如，经典的intel x86处理器具有一定数量的片上内存，专用的算术逻辑单元和许多寄存器，等等。这些部分的组合方式赋予了所谓的英特尔架构以意义。
当被问及dean的描述时，yazdanbakhsh在电子邮件中告诉zdnet： “我会看到我们的工作和布局规划项目是正交且互补的。
yazdanbakhsh解释说：“架构探索比 计算栈中的 布局布线要高级得多，”他指的是康奈尔大学（cornell university）的christopher batten的演讲。
yazdanbakhsh表示：“我认为，在［架构探索］中，存在更高的性能改进余地。
yazdanbakhsh及其同事将apollo称为“第一个可移植的体系结构探索基础结构”，这是第一个程序，它在不同的芯片上工作的越多，越能更好地探索可能的芯片体系结构，从而将学到的知识转移到每个新任务上。
yazdanbakhsh和团队正在开发的芯片本身就是用于ai的芯片，称为加速器。该芯片与nvidia a100“ ampere” gpu，cerebras systems wse芯片以及目前投放市场的许多其他启动部件属于同一类。因此，使用ai设计运行ai的芯片具有很好的对称性。
鉴于任务是设计一个ai芯片，apollo程序正在探索的架构是适合运行神经网络的架构。这意味着很多线性代数，很多简单的数学单元执行矩阵乘法并对结果求和。
团队将挑战定义为找到适合给定ai任务的这些数学块的正确组合之一。他们选择了一个相当简单的ai任务，即一个称为mobilenet的卷积神经网络，这是一种资源有效的网络，由andrew g.howard和google的同事于2017年设计。此外，他们使用多个内部设计的网络测试了工作负载，以执行诸如对象检测和语义分段之类的任务。
这样，目标就变成了：对于芯片的体系结构，什么是正确的参数，以使得对于给定的神经网络任务，芯片满足诸如速度之类的某些标准？
搜索涉及对超过4.52亿个参数进行排序，包括将使用多少个数学单元（称为处理器元素），以及对于给定模型而言最佳的参数存储量和激活存储量。
apollo的优点是可以将各种现有的优化方法相提并论，以了解它们如何在优化新型芯片设计的体系结构中相互叠加。在这里，上图显示了相对结果。
apollo是一个框架，这意味着它可以采用文献中开发的多种方法进行所谓的黑盒优化，并且可以使这些方法适应特定的工作负载，并比较每种方法在解决目标方面的效果。
在另一个很好的对称性中，yazdanbakhsh采用了一些优化方法，这些方法实际上是为开发神经网络体系结构而设计的。其中包括google的quoc v.le及其同事于2019年开发的所谓进化法; christoph angermueller和其他人在google上基于模型的强化学习和所谓的基于群体的方法集成，目的是“设计” dna序列；和贝叶斯优化方法。因此，apollo包含了令人愉悦的对称性的主要层次，将为神经网络设计和生物合成设计的方法汇集在一起，以设计可用于神经网络设计和生物合成的电路。
比较所有这些优化，这就是apollo框架的亮点。它的整个存在目的是有条不紊地采用不同的方法，并指出最有效的方法。阿波罗（apollo）试验结果详细说明了进化方法和基于模型的方法如何优于随机选择和其他方法。
但是，阿波罗最引人注目的发现是，与蛮力搜索相比，运行这些优化方法使流程效率更高。例如，他们将基于群体的集成方法与他们所说的对体系结构方法的解决方案集的半穷尽搜索进行了比较。
yazdanbakhsh及其同事看到的是，基于人群的方法能够发现利用电路中权衡取舍的解决方案，例如计算与内存，而这通常需要特定领域的知识。由于基于人口的方法是一种博学的方法，因此它可以找到半穷举搜索无法找到的解决方案。
实际上，p3bo（基于人口的黑盒优化）发现的设计比3k样本搜索空间的半穷尽略好。我们观察到该设计使用非常小的内存大小（3mb）来支持更多的计算单元。这充分利用了视觉工作负载的计算密集型性质，而原始半详尽搜索空间中并未包含该功能。这证明了半穷举方法需要人工搜索空间工程，而基于学习的优化方法利用大的搜索空间来减少人工工作。
因此，apollo能够弄清楚不同的优化方法在芯片设计中的效果如何。但是，它还可以做更多的事情，那就是它可以运行所谓的迁移学习，以展示如何依次改进这些优化方法。
通过运行优化策略以将芯片设计提高一个设计点，例如以毫米为单位的最大芯片尺寸，这些实验的结果便可以作为输入输入到随后的优化方法中。apollo团队发现的是，通过利用初始或种子优化方法的最佳结果，各种优化方法可在诸如面积受限的电路设计之类的任务上提高其性能。
所有这些必须由以下事实括起来：为mobilenet或任何其他网络或工作负载设计芯片受设计过程对给定工作负载的适用性的限制。
实际上，其中一位作者berkin akin帮助开发了mobilenet版本mobilenet edge，他指出优化是芯片和神经网络优化的产物。
“神经网络架构必须了解目标硬件架构，才能优化整体系统性能和能源效率，” akin去年在与同事suyog gupta的论文中写道。
zdnet通过电子邮件与akin联络，问一个问题：与神经网络体系结构的设计隔离时，硬件设计有多有价值？
“很好的问题。”akim在电子邮件中回答。
akin说，apollo对于给定的工作负载可能就足够了，但是在芯片和神经网络之间进行的所谓的“共同优化”将带来其他好处。
这是akin的完整回覆：
当然，在某些用例中，我们正在为给定的一组固定神经网络模型设计硬件。这些模型可以是硬件目标应用领域中高度优化的代表性工作负载的一部分，也可以是定制加速器用户的要求。在这项工作中，我们正在解决这种性质的问题，我们使用ml为给定的工作负载套件找到最佳的硬件体系结构。但是，当然在某些情况下，可以灵活地共同优化硬件设计和神经网络体系结构。实际上，我们正在进行一些此类联合优化的工作，我们希望可以取得更好的权衡。
那么，最后的收获是，即使芯片设计受到ai的新工作量的影响，芯片设计的新过程也可能对神经网络的设计产生可衡量的影响。
阿尔卡特朗讯与中国移动推出灵云无线微基站
了解氮化铝陶瓷基板的金属化是否通过化学镀铜方式
比亚迪透露“刀片电池”未来将向其他车企供应 且预计今年6月将正式投放市场
一次Rust重写基础软件的实践
机智云完成亿元级人民币C1轮融资，华映资本领投
如何利用人工智能推进芯片开发?
魅族17采用曲面瀑布屏设计，将支持90Hz刷新率
国产彩电巨头长虹电视为何会走向没落?
舒印彪带来了一份《以国际标准推动高质量发展》的提案
5G对测试测量行业会产生哪些影响
魅族迎战双11,魅蓝E/E2放血降价300元
关于电纸书热潮之下需要的一些冷思考
亨通如何打破国外对PX和PTA的垄断，让中国人在生产领域不再被卡脖子？
网络充分共建共享，为5G网络建设打开新局面
三星S8热卖中，三星S9又来了！屏占比近100%+骁龙845+屏内指纹
新型混合动力汽车检测技术
黄牛开始预定红米note4，网友抢不到，黄牛却有货？
六通道CAN集线器连接can激光器的使用方法
全志A64四核ARM核心板主要应用及规格
区块链生态系统正在将数字资产推向主流