如何利用基于视觉的边缘设备优化晶圆制造
工业4.0、工业物联网或智能工厂—无论使用哪个术语，都指向相同的目标：提高工厂车间的效率、可靠性和信息安全和功能安全。恩智浦不仅设计和生产下一代工业4.0应用核心的创新芯片，而且还集成了工业4.0概念，旨在进一步提高工厂效率。这篇博文将向您展示恩智浦如何将自身技术与basler公司先进的嵌入式视觉技术相结合，为我们的工厂打造全新的目视检查概念。
用例
恩智浦在全球范围内拥有多家晶圆工厂。每家工厂的质量和效率都处于极高水平。但是，我们一直在寻求方法来满足和超越日益严苛的半导体市场需求。在典型的硅晶圆制造流程中, 最后一步是在出厂前对晶圆进行精细包装并放入运输箱(wafer box晶圆盒)。
在封闭运输箱(wafer box晶圆盒)后并进行包装(充入氮气)前，操作员将进行目视检查。这项检查旨在确保运输箱(wafer box晶圆盒)中的晶圆处于正确位置(槽位)。这一检查非常重要，可以避免因为晶圆在运输过程中摆放不当而影响供应链下游。
在装箱(盒)过程中的出错概率非常低。因而，操作员很少会遇到错误。在如此低的出错率下，人类行为会导致较高的疏忽概率，即人工检查也无法发现这种罕见错误。作为我们持续改进活动的一部分，硅晶圆厂正在测试一种用于自动完成目视检查的新概念。这种自动化功能有望提高效率，并在运输箱(wafer box晶圆盒)出厂之前提供状态证明。
技术细节
为实现这一计划，我们与全球领先的计算机视觉应用制造商basler ag展开了正式合作。我们进行了密切协作来开发基于视觉的边缘设备，并成功利用两个公司之间强大的协同效应。basler在工厂自动化和嵌入式视觉解决方案方面拥有丰富的专业知识，并因此得到业界广泛认可，有能力打造完整的视觉应用。除了提供经济高效且功能强大的视觉系统外，basler还提供完整的应用软件，对我们的实际用例形成了很好的补充。恩智浦强大的工业级i.mx 8系列应用处理器确保实时算法高效运行所需的高性能。
在这个特定用例中，我们采用了basler附加摄像头套件daa2500-60mci-imx8-evk，该套件提供5百万像素的dart系列相机模块、线缆、镜头以及bcon for mipi到mini sas转接器，支持高达750 mb/s的数据传输速度。此外，basler还优化了驱动程序，可轻松与各种i.mx 8m评估板进行集成。
我们选择了恩智浦i.mx 8m mini评估板8mminilpd4-evk作为处理平台。这款评估板配备工业级 i.mx 8m mini quad应用处理器，其中以4个arm® cortex®-a53@1.6 ghz内核作为主cpu平台，并以1个arm cortex -m4@400 mhz内核作为低功耗/安全cpu，因此是高效计算图像处理的理想之选。此外，i.mx 8m mini评估板提供了合适的外设，可满足本概念验证的需求。它不仅支持mipi-csi摄像头迷你sas接头，还带有一个1gbit以太网端口，允许与工厂的制造执行系统(mes)直接进行通信。它是一个节能板，并有足够多的数字io信号，能够与车间的其他设备进行交互。
概念验证
i.mx 8m mini评估板以及basler附加摄像头套件安装在进行目视检查的站点。应用处理器已经运行了一个图像处理算法，由basler根据洁净室的特定照明条件进行了调整。该算法使用“经典”的图像处理方法，如分割和blob分析。为了通过以太网与mes后端通信，应用向mqtt代理发送/接收json消息。
要开始自动目视检查，将带有晶圆的运输箱放置在工业级背光平台的顶部。basler摄像头位于运输箱上方约一米处，并连接至i.mx 8m迷你板。一旦应用处理器接收到来自mes后端mqtt代理的消息，或者当操作员手动激活连接到评估板的数字输入时，它就会启动检查流程。
一旦图像被basler摄像头捕获并进行了预处理，实际图像处理算法就会搜索图像中的盒子，并将其对齐，执行后续步骤(以防盒子倾斜)。
在以下处理步骤中，该算法查找空插槽以及倾斜的晶圆盘或未完全插入插槽的磁盘。此外，对盒中的磁盘数进行统计。作为该图像处理例程的结果，i.mx 8m mini板向mes发送mqtt消息，检查结论如下：
如果晶圆未在错误位置，则显示ok消息；如果至少有一个晶圆在错误的位置，则显示nok消息。如显示nok消息，将拍摄一张新照片，再次检查第一个结果。
带有传输盒内晶圆数的消息。
包含标识哪些晶圆位置错误的索引的消息。
最后，分析晶圆的16位图像被传送到mes，并储存起来，供工厂处理追踪。
结论
嵌入式视觉技术在工厂自动化领域的应用呈不断上升趋势，其好处显而易见。由于外形尺寸不断变小，功耗越来越低，处理性能日益提高，用嵌入式技术替代大型基于pc的视觉系统变得越来越容易，从而确保打造精简且经济高效的解决方案。
我们与合作伙伴紧密合作，为工厂自动化带来创新的机器视觉解决方案。这种自动化视觉检测系统只是恩智浦和basler技术的强大协同作用解决工厂自动化领域问题的一个示例。
搅局者小米电视研发内幕曝光 创维死磕
ESD要如何去进行保护工作
防止单相接地时发生谐振过电压的措施盘点
IDC：2017年平板电脑逆势成长
新款手持式热像仪FLIR E8 Pro隆重上市
如何利用基于视觉的边缘设备优化晶圆制造
乐视生态为何会失败_乐视生态失败原因分析
宁德时代获德国交通部首张动力电池系统证书
高通5G基带X60搭载全新5G毫米波模组，支持更纤薄手机
Aupera与赛灵思携手研发FPGA视频云处理平台
Equinix携手Nvidia，推出私有化AI超级计算系统
荣耀V8手机怎么样 值不值得买
常见的Pythonic写法汇总
iphone8什么时候上市？iphone8最新消息：iPhone8可弯曲，入门7000元，你还买？
ADI与罗德与施瓦茨联手推动无线电池管理系统发展
华为nova4外观评测 到底怎么样
诺基亚Lumia920行货价曝光 4888元起售
增强型和耗尽型MOSFET之间的区别是什么？
2019新品科沃斯扫地机器人地宝T5 Fun！
基于发射器/接收器组成的汽车防盗警报系统设计
用例
恩智浦在全球范围内拥有多家晶圆工厂。每家工厂的质量和效率都处于极高水平。但是，我们一直在寻求方法来满足和超越日益严苛的半导体市场需求。在典型的硅晶圆制造流程中, 最后一步是在出厂前对晶圆进行精细包装并放入运输箱(wafer box晶圆盒)。
在封闭运输箱(wafer box晶圆盒)后并进行包装(充入氮气)前，操作员将进行目视检查。这项检查旨在确保运输箱(wafer box晶圆盒)中的晶圆处于正确位置(槽位)。这一检查非常重要，可以避免因为晶圆在运输过程中摆放不当而影响供应链下游。
在装箱(盒)过程中的出错概率非常低。因而，操作员很少会遇到错误。在如此低的出错率下，人类行为会导致较高的疏忽概率，即人工检查也无法发现这种罕见错误。作为我们持续改进活动的一部分，硅晶圆厂正在测试一种用于自动完成目视检查的新概念。这种自动化功能有望提高效率，并在运输箱(wafer box晶圆盒)出厂之前提供状态证明。
技术细节
为实现这一计划，我们与全球领先的计算机视觉应用制造商basler ag展开了正式合作。我们进行了密切协作来开发基于视觉的边缘设备，并成功利用两个公司之间强大的协同效应。basler在工厂自动化和嵌入式视觉解决方案方面拥有丰富的专业知识，并因此得到业界广泛认可，有能力打造完整的视觉应用。除了提供经济高效且功能强大的视觉系统外，basler还提供完整的应用软件，对我们的实际用例形成了很好的补充。恩智浦强大的工业级i.mx 8系列应用处理器确保实时算法高效运行所需的高性能。
在这个特定用例中，我们采用了basler附加摄像头套件daa2500-60mci-imx8-evk，该套件提供5百万像素的dart系列相机模块、线缆、镜头以及bcon for mipi到mini sas转接器，支持高达750 mb/s的数据传输速度。此外，basler还优化了驱动程序，可轻松与各种i.mx 8m评估板进行集成。
我们选择了恩智浦i.mx 8m mini评估板8mminilpd4-evk作为处理平台。这款评估板配备工业级 i.mx 8m mini quad应用处理器，其中以4个arm® cortex®-a53@1.6 ghz内核作为主cpu平台，并以1个arm cortex -m4@400 mhz内核作为低功耗/安全cpu，因此是高效计算图像处理的理想之选。此外，i.mx 8m mini评估板提供了合适的外设，可满足本概念验证的需求。它不仅支持mipi-csi摄像头迷你sas接头，还带有一个1gbit以太网端口，允许与工厂的制造执行系统(mes)直接进行通信。它是一个节能板，并有足够多的数字io信号，能够与车间的其他设备进行交互。
概念验证
i.mx 8m mini评估板以及basler附加摄像头套件安装在进行目视检查的站点。应用处理器已经运行了一个图像处理算法，由basler根据洁净室的特定照明条件进行了调整。该算法使用“经典”的图像处理方法，如分割和blob分析。为了通过以太网与mes后端通信，应用向mqtt代理发送/接收json消息。
要开始自动目视检查，将带有晶圆的运输箱放置在工业级背光平台的顶部。basler摄像头位于运输箱上方约一米处，并连接至i.mx 8m迷你板。一旦应用处理器接收到来自mes后端mqtt代理的消息，或者当操作员手动激活连接到评估板的数字输入时，它就会启动检查流程。
一旦图像被basler摄像头捕获并进行了预处理，实际图像处理算法就会搜索图像中的盒子，并将其对齐，执行后续步骤(以防盒子倾斜)。
在以下处理步骤中，该算法查找空插槽以及倾斜的晶圆盘或未完全插入插槽的磁盘。此外，对盒中的磁盘数进行统计。作为该图像处理例程的结果，i.mx 8m mini板向mes发送mqtt消息，检查结论如下：
如果晶圆未在错误位置，则显示ok消息；如果至少有一个晶圆在错误的位置，则显示nok消息。如显示nok消息，将拍摄一张新照片，再次检查第一个结果。
带有传输盒内晶圆数的消息。
包含标识哪些晶圆位置错误的索引的消息。
最后，分析晶圆的16位图像被传送到mes，并储存起来，供工厂处理追踪。
结论
嵌入式视觉技术在工厂自动化领域的应用呈不断上升趋势，其好处显而易见。由于外形尺寸不断变小，功耗越来越低，处理性能日益提高，用嵌入式技术替代大型基于pc的视觉系统变得越来越容易，从而确保打造精简且经济高效的解决方案。
我们与合作伙伴紧密合作，为工厂自动化带来创新的机器视觉解决方案。这种自动化视觉检测系统只是恩智浦和basler技术的强大协同作用解决工厂自动化领域问题的一个示例。
搅局者小米电视研发内幕曝光 创维死磕
ESD要如何去进行保护工作
防止单相接地时发生谐振过电压的措施盘点
IDC：2017年平板电脑逆势成长
新款手持式热像仪FLIR E8 Pro隆重上市
如何利用基于视觉的边缘设备优化晶圆制造
乐视生态为何会失败_乐视生态失败原因分析
宁德时代获德国交通部首张动力电池系统证书
高通5G基带X60搭载全新5G毫米波模组，支持更纤薄手机
Aupera与赛灵思携手研发FPGA视频云处理平台
Equinix携手Nvidia，推出私有化AI超级计算系统
荣耀V8手机怎么样 值不值得买
常见的Pythonic写法汇总
iphone8什么时候上市？iphone8最新消息：iPhone8可弯曲，入门7000元，你还买？
ADI与罗德与施瓦茨联手推动无线电池管理系统发展
华为nova4外观评测 到底怎么样
诺基亚Lumia920行货价曝光 4888元起售
增强型和耗尽型MOSFET之间的区别是什么？
2019新品科沃斯扫地机器人地宝T5 Fun！
基于发射器/接收器组成的汽车防盗警报系统设计