手机拍照需求带动移动图像传感器像素和面积的爆炸式增长
3月29日晚间，小米举办春季新品发布会，正式发布小米11 pro、小米11 ultra和小米11青春版，一同发布的还有小米路由器ax9000和小米手环6共五大新品。
其中小米11 pro起售价4999元，搭载骁龙888芯片，搭载了新型硅氧负极电池，支持67w有线快充+67w无线充电，也是小米首次搭载ip68防水级别的手机。小米11 ultra则在小米11 pro的基础上，成为了全球首款“三主摄”手机。
当晚最具话题性的技术，莫过于这两款机型的主摄模组都采用了与三星isocell合作18个月研发的5000万像素大底传感器gn2，感光面积达到1/1.12英寸，是iphone12 pro的近5倍大，超越索尼为华为定制的imx700（1/1.28英寸），并已经十分接近索尼黑卡相机rx100m7的一英寸大底。
“像素再高，也不如大底大像素传感器”——余承东
近年来，手机拍照的需求见长，带动了移动图像传感器像素和面积的爆炸式增长。
知名数码博主maomaobear在撰文中提到，手机拍照进化从11万开始，像素数不断提升，但是有过几个台阶。第一个台阶是200万像素，功能手机拍照进化到200万后停滞了很久，因为200万已经可以完成记录生活的需要。
智能手机兴起让手机拍照一路进化到了1200万又停滞了很久，至今苹果还是1200万像素。maomaobear分析原因是手机进化到1200万时，配合现在的镜头和ips，测试分辨率已经超过了3000线。这个水平已经超越了dc数码相机，甚至超越了早期残幅的单反。
期间，还有诺基亚用大cmos和高像素去解决变焦画质的问题，同时把全像素画质推到了新高度，但也随着诺基亚手机的失败而停滞。直到华为重新接过诺基亚的衣钵，再度提升像素数与cmos面积，开启了智能手机像素大跃进，从1200万跳到4800万，6400万，1.08亿。
不过武功再高，也怕菜刀。“像素再高，也不如大底大像素传感器”，这是华为余承东的原话。去年7月23日，余承东在其微博上发表了对于手机上搭载1亿像素cmos传感器的分析，他表示：“一亿像素实际拍照效果不如大底大像素的sensor。即便一亿像素通过多个小像素合成大像素，效果也还是有折扣与差距。拍照的效果并不是与像素数简单相关的，这是一个系统性工程。”
的确，对摄影感兴趣的朋友都知道，传感器面积越大，进光量越高，物理层面收集的图像信息越好，越有利于最终成像效果的呈现，2020年，智能手机cmos面积也开始进化，imx700已经进化到了1/1.28寸。
曾经的单反cmos传感器（上）和手机cmos传感器（下）比起来，尺寸是秒杀，就算手机的算法再厉害，画质也一样被秒杀。而gn2的恐怖参数，令它成为市售移动传感器面积第一。
gn2的参数有多恐怖？
根据官方公布信息，gn2单像素面积达到1.4μm，这个尺寸本就难觅敌手，这个参数在一定程度上决定了传感器夜景表现力。再加上支持像素四合一技术，可将四个像素合成当做一个像素使用，等效像素尺寸高达2.8μm，令感光性能更突出。
三星方面在今年2月底发布了这款传感器时表示，gn2的像素排列，还是三星传统的四合一拜尔排列。可以通过四合一做1250万的输出，也可以直接出5000万的图；还通过使用“智能重新镶嵌算法”重新排列彩色像素来支持1亿像素的输出。当然，实际的照片并非是一一对应的1亿像素，而是通过红绿蓝三个5000万像素的图层进行叠加后，进行放大与合成最终通过算法形成的1亿像素照片。
在强光下，5000万出图的品质是有保证的，因为单位像素1.4微米已经非常大，实际上强光下，三星isocell 技术用0.8微米已经可以保证单位画质了。
另外，三星gn2也是首款采用双像素增强技术（dual pixel pro）的传感器，配合全像素全向8核对焦，与多点 dtof 激光对焦系统，通过最多 64 点测距极暗光下也能对焦。雷军在发布会上也表示，搭配小米自研的“夜枭算法”，在接近无光的环境下也能拍出画面明亮的照片。
与此前的技术相比，gn2的绿色像素是对角拆分，红色与蓝色像素则继续保持垂直拆分，这让其像素顶部和底部、左侧和右侧均可以读取相位差。新的检测方式可以应对弱光环境或快速移动物体的快速准确自动对焦。
关于dual pixel pro，三星半导体官方在微博贴出一张技术解析图：
根据三星官方的意思，双像素增强技术是由双像素技术升级而来。双像素技术是模拟双眼对焦，实现左右相位差对焦；双像素增强技术，除了每个像素分为左右两半，还可以对一些像素进行对角线隔离，不仅可以左右相位差对焦，还根据图像传感器特点，实现上下相位差，提升对焦效果。藉由大底+对焦升级，提高弱光下，运动中的成片率，减少废片。这个技术最早在oppo的手机中使用，效果非常不错。。
三星isocell gn2还支持smart iso pro，能够智能的调节两种不同的感光度，这在三星目前的传感器中已经进行了支持。视频拍摄上支持1080p分辨率的480帧慢动作拍摄，在4k分辨率上则能提供120帧录制支持。
手机cmos传感器的两条技术路线
小米为用好这款“底大一级压死人”的传感器，也是煞费苦心。为其搭配了双原生iso fusion和stagger hdr技术，配合 12bit raw可以带来18级高动态范围表现。同时搭配8p镜头、ois光学防抖，支持1920fps超级慢动作，以确保全场景下的成像能力。
“三主摄”中的另外两位分别是主摄级imx586传感器，4800万像素输出配合1/2英寸大底，提供超广角128°视野范围，；长焦端同样采用imx586传感器，潜望式变焦号称实现了全球最高的120倍超远变焦。
视频方面，得益于三主摄相机系统，小米11 ultra首次支持全焦段8k视频拍摄，不论是广角、超广角还是长焦均可实现8k超清视频录制，并新增双机联录功能，取景框可接入另一部小米11 ultra/pro的相机画面，以不同视角分屏拍摄。
显然三星gn2传感器的使用，有助于小米11 pro/ultra的拍照能力提升。单从规格上来说，gn2比小米11使用的hmx就要强一些，毕竟这是最新款的顶级产品。其次也是两种不同的技术路线。
三星图像传感器当前有两条旗舰级生产线，一条是主攻大底高像素的三星hm系列传感器（产品有三星hmx、三星hm1和三星hm2）；一条是主攻大底的三星gn系列传感器（产品主要有三星gn1、三星gn2）。《中关村在线》整理了一张三星旗舰传感器参数表格：
三星旗舰传感器部分参数一览(图自：zol中关村在线)
可以看出在三星一系列的旗舰传感器中，gn2除了最大像素不占优势，在传感器尺寸和单像素面积上都是傲视群雄。尽管三星品牌市售手机未有搭载三星gn系列传感器，但不能否认三星gn系列重要参数上的恐怖。
上文也提到在cmos图像传感器的道路上，发展出了两条路线——其中一条是锁定4800万-5000万，增加单位像素面积，一条是锁定0.7微米-0.8微米单位面积，增加像素数。4800万的逻辑，是四合一后1200万，正好满足4k拍摄3840*2160的需求；而4800万或者5000万，可以满足8k拍摄的需求。整个cmos的面积利用可以最大化。
maomaobear认为，锁定0.7微米-0.8微米单位面积的逻辑，是强光下0.8微米足够了，再大画质也没有突破，而弱光可以四合一。这种逻辑可以实现强光下画质的最大化。“gn2显然是第一种逻辑下的结果，在最高分辨率下的画质，5000万也许不及1亿，但是在视频上，5000万会有比较大的优势。”
从之前的“一亿像素”，到现在的“大底”、“双像素增强技术”，三星带来了不少传感器技术的新玩法。也让手机厂商们除了索尼，多了另一个选择，那么除了小米，还有哪些智能手机厂商搭载了这枚传感器呢？
此前，vivo x50 pro+和vivo x60 pro+两款机型上采用了三星gn1，因此预计除了小米11 pro和ultra，vivo新旗舰机型也大概率会采用gn2传感器。此外realme众多机型都青睐三星传感器，也不排除2021年的realme旗舰采用新款传感器。但根据网上爆料来看，大概率将小米会拥有一段时间的独占期。
传小米自研芯片是isp
但有了大底传感器，拍照就能超越单反了吗？目前来看还是不可能，因为拍出好照片还有两个重要因素：镜头和图像信号处理器（isp）。
镜头在手机上目前是无解的，因为它对体积有刚性物理要求的，拍摄特定场景时用的 镜片可能就有手机那么厚了。
isp是image signal processor的缩写，主要用来对前端图像传感器输出信号处理的单元，以匹配不同厂商的图像传感器。通俗来理解就是，isp 所要做到的就是将“数字眼睛”的视力水平提高到“人类眼睛”的水平，让人眼看到数字图像时的效果尽可能接近人眼看到实景时的效果。isp除了负责图片锐化、降噪、优化色彩等工作，还肩负着实现相位、激光、反差等混合对焦运算以及提供对多摄像头支持等重任，是手机拍照中必不可少的关键一环。
网上传言，小米这次将发布的自研的芯片就是isp，数码博主 @数码闲聊站 等 也“实锤”小米全新自研澎湃芯片是独立 isp 芯片，不是 soc 芯片。
但昨晚（3月29日）的发布会小米还是卖了个关子，把自研芯片留到了今晚发布。
2020年9月，小米曾公开招聘isp工程师，打造自研isp的意图非常明显。联系到和三星共同研发cmos传感器一年多，期间搭配着isp的研发也十分合理。
@数码闲聊站 曾表示，高通 isp 芯片一年一更新，跟不上小米影像进步的速度，于是小米自己做起了 isp 芯片。这次芯片与小米近些年进步神速的影像技术有关。
不过，小米不是国内第一家自研isp的手机厂商，华为从海思麒麟950开始就集成了自研的isp，以美颜拍摄见长的美图手机也采用了富士通的独立isp芯片。
以高通骁龙 888 移动平台为例，搭载了 spectra 580，这是首个支持三 isp 的 qualcomm spectra 图像信号处理器，三 isp 支持摄像头进行三重并发和三重并行处理。如果小米的自研芯片真的是isp，那么搭载的手机将拥有小米自研的影像技术，独立于高通 soc 上集成的 isp 运行。
一个isp其实是一个soc核心，内部包含cpu、sup ip、if 等单元，可以运行各种算法程序，实时处理图像信号。isp的控制结构由isp逻辑和运行在上面的firmware两个部分组成，逻辑单元除了完成一部分算法处理外，还可以统计出当前图像的实时信息。firmware 通过获取isp 逻辑的图像统计信息进行重新计算，反馈控制lens、sensor和isp逻辑，以达到自动调节图像质量的目的。
责编：luffy liu
电子工程专辑综合自小米官网、中关村在线、techweb、pchome、cnmo、maomaobear、it之家报道
原文标题：小米11 pro/ultra搭载大底传感器gn2，或与自研isp芯片有关？
文章出处：【微信公众号：传感器技术】欢迎添加关注！文章转载请注明出处。
应用方案 | 用于制冷剂泄漏检测的气体传感器及应用方案
通用召回6.9万辆电动汽车：存在起火隐患
深元AI盒子在矿山安全生产中实现皮带跑偏、异物、煤流量、大块煤等识别
5G引领的全智能化让我们变得更宅
FPC柔性线路板回流焊焊接方案
手机拍照需求带动移动图像传感器像素和面积的爆炸式增长
华为5G技术领先性,华为打破局面重在新兴市场
MYDATA推出MY500焊膏喷印机
力控监控组态软件的基本结构
硬盘电路板维修基础
堵转扭矩和额定扭矩的区别
两年打磨可见真章？ 魅蓝5S性能测试
IC封测厂恶意抬价遭反击，显示屏厂联合抗议
蓝牙5.0芯片的优势是什么，主流的蓝牙5.0芯片有哪些
OPPO正式成立新兴移动终端事业部将面向5G+时代的关键布局
高通公司或会开发更强大的ARM计算机芯片与苹果竞争
变废为宝:药渣做家具 电池变矿石
NS4816音频功率放大器概述、特性及应用
LTC5596 RMS 功率检波器 ,工作功率100 MHz - 40 GHz,值得拥有!
手机电池的基础知识,cellphone batter
其中小米11 pro起售价4999元，搭载骁龙888芯片，搭载了新型硅氧负极电池，支持67w有线快充+67w无线充电，也是小米首次搭载ip68防水级别的手机。小米11 ultra则在小米11 pro的基础上，成为了全球首款“三主摄”手机。
当晚最具话题性的技术，莫过于这两款机型的主摄模组都采用了与三星isocell合作18个月研发的5000万像素大底传感器gn2，感光面积达到1/1.12英寸，是iphone12 pro的近5倍大，超越索尼为华为定制的imx700（1/1.28英寸），并已经十分接近索尼黑卡相机rx100m7的一英寸大底。
“像素再高，也不如大底大像素传感器”——余承东
近年来，手机拍照的需求见长，带动了移动图像传感器像素和面积的爆炸式增长。
知名数码博主maomaobear在撰文中提到，手机拍照进化从11万开始，像素数不断提升，但是有过几个台阶。第一个台阶是200万像素，功能手机拍照进化到200万后停滞了很久，因为200万已经可以完成记录生活的需要。
智能手机兴起让手机拍照一路进化到了1200万又停滞了很久，至今苹果还是1200万像素。maomaobear分析原因是手机进化到1200万时，配合现在的镜头和ips，测试分辨率已经超过了3000线。这个水平已经超越了dc数码相机，甚至超越了早期残幅的单反。
期间，还有诺基亚用大cmos和高像素去解决变焦画质的问题，同时把全像素画质推到了新高度，但也随着诺基亚手机的失败而停滞。直到华为重新接过诺基亚的衣钵，再度提升像素数与cmos面积，开启了智能手机像素大跃进，从1200万跳到4800万，6400万，1.08亿。
不过武功再高，也怕菜刀。“像素再高，也不如大底大像素传感器”，这是华为余承东的原话。去年7月23日，余承东在其微博上发表了对于手机上搭载1亿像素cmos传感器的分析，他表示：“一亿像素实际拍照效果不如大底大像素的sensor。即便一亿像素通过多个小像素合成大像素，效果也还是有折扣与差距。拍照的效果并不是与像素数简单相关的，这是一个系统性工程。”
的确，对摄影感兴趣的朋友都知道，传感器面积越大，进光量越高，物理层面收集的图像信息越好，越有利于最终成像效果的呈现，2020年，智能手机cmos面积也开始进化，imx700已经进化到了1/1.28寸。
曾经的单反cmos传感器（上）和手机cmos传感器（下）比起来，尺寸是秒杀，就算手机的算法再厉害，画质也一样被秒杀。而gn2的恐怖参数，令它成为市售移动传感器面积第一。
gn2的参数有多恐怖？
根据官方公布信息，gn2单像素面积达到1.4μm，这个尺寸本就难觅敌手，这个参数在一定程度上决定了传感器夜景表现力。再加上支持像素四合一技术，可将四个像素合成当做一个像素使用，等效像素尺寸高达2.8μm，令感光性能更突出。
三星方面在今年2月底发布了这款传感器时表示，gn2的像素排列，还是三星传统的四合一拜尔排列。可以通过四合一做1250万的输出，也可以直接出5000万的图；还通过使用“智能重新镶嵌算法”重新排列彩色像素来支持1亿像素的输出。当然，实际的照片并非是一一对应的1亿像素，而是通过红绿蓝三个5000万像素的图层进行叠加后，进行放大与合成最终通过算法形成的1亿像素照片。
在强光下，5000万出图的品质是有保证的，因为单位像素1.4微米已经非常大，实际上强光下，三星isocell 技术用0.8微米已经可以保证单位画质了。
另外，三星gn2也是首款采用双像素增强技术（dual pixel pro）的传感器，配合全像素全向8核对焦，与多点 dtof 激光对焦系统，通过最多 64 点测距极暗光下也能对焦。雷军在发布会上也表示，搭配小米自研的“夜枭算法”，在接近无光的环境下也能拍出画面明亮的照片。
与此前的技术相比，gn2的绿色像素是对角拆分，红色与蓝色像素则继续保持垂直拆分，这让其像素顶部和底部、左侧和右侧均可以读取相位差。新的检测方式可以应对弱光环境或快速移动物体的快速准确自动对焦。
关于dual pixel pro，三星半导体官方在微博贴出一张技术解析图：
根据三星官方的意思，双像素增强技术是由双像素技术升级而来。双像素技术是模拟双眼对焦，实现左右相位差对焦；双像素增强技术，除了每个像素分为左右两半，还可以对一些像素进行对角线隔离，不仅可以左右相位差对焦，还根据图像传感器特点，实现上下相位差，提升对焦效果。藉由大底+对焦升级，提高弱光下，运动中的成片率，减少废片。这个技术最早在oppo的手机中使用，效果非常不错。。
三星isocell gn2还支持smart iso pro，能够智能的调节两种不同的感光度，这在三星目前的传感器中已经进行了支持。视频拍摄上支持1080p分辨率的480帧慢动作拍摄，在4k分辨率上则能提供120帧录制支持。
手机cmos传感器的两条技术路线
小米为用好这款“底大一级压死人”的传感器，也是煞费苦心。为其搭配了双原生iso fusion和stagger hdr技术，配合 12bit raw可以带来18级高动态范围表现。同时搭配8p镜头、ois光学防抖，支持1920fps超级慢动作，以确保全场景下的成像能力。
“三主摄”中的另外两位分别是主摄级imx586传感器，4800万像素输出配合1/2英寸大底，提供超广角128°视野范围，；长焦端同样采用imx586传感器，潜望式变焦号称实现了全球最高的120倍超远变焦。
视频方面，得益于三主摄相机系统，小米11 ultra首次支持全焦段8k视频拍摄，不论是广角、超广角还是长焦均可实现8k超清视频录制，并新增双机联录功能，取景框可接入另一部小米11 ultra/pro的相机画面，以不同视角分屏拍摄。
显然三星gn2传感器的使用，有助于小米11 pro/ultra的拍照能力提升。单从规格上来说，gn2比小米11使用的hmx就要强一些，毕竟这是最新款的顶级产品。其次也是两种不同的技术路线。
三星图像传感器当前有两条旗舰级生产线，一条是主攻大底高像素的三星hm系列传感器（产品有三星hmx、三星hm1和三星hm2）；一条是主攻大底的三星gn系列传感器（产品主要有三星gn1、三星gn2）。《中关村在线》整理了一张三星旗舰传感器参数表格：
三星旗舰传感器部分参数一览(图自：zol中关村在线)
可以看出在三星一系列的旗舰传感器中，gn2除了最大像素不占优势，在传感器尺寸和单像素面积上都是傲视群雄。尽管三星品牌市售手机未有搭载三星gn系列传感器，但不能否认三星gn系列重要参数上的恐怖。
上文也提到在cmos图像传感器的道路上，发展出了两条路线——其中一条是锁定4800万-5000万，增加单位像素面积，一条是锁定0.7微米-0.8微米单位面积，增加像素数。4800万的逻辑，是四合一后1200万，正好满足4k拍摄3840*2160的需求；而4800万或者5000万，可以满足8k拍摄的需求。整个cmos的面积利用可以最大化。
maomaobear认为，锁定0.7微米-0.8微米单位面积的逻辑，是强光下0.8微米足够了，再大画质也没有突破，而弱光可以四合一。这种逻辑可以实现强光下画质的最大化。“gn2显然是第一种逻辑下的结果，在最高分辨率下的画质，5000万也许不及1亿，但是在视频上，5000万会有比较大的优势。”
从之前的“一亿像素”，到现在的“大底”、“双像素增强技术”，三星带来了不少传感器技术的新玩法。也让手机厂商们除了索尼，多了另一个选择，那么除了小米，还有哪些智能手机厂商搭载了这枚传感器呢？
此前，vivo x50 pro+和vivo x60 pro+两款机型上采用了三星gn1，因此预计除了小米11 pro和ultra，vivo新旗舰机型也大概率会采用gn2传感器。此外realme众多机型都青睐三星传感器，也不排除2021年的realme旗舰采用新款传感器。但根据网上爆料来看，大概率将小米会拥有一段时间的独占期。
传小米自研芯片是isp
但有了大底传感器，拍照就能超越单反了吗？目前来看还是不可能，因为拍出好照片还有两个重要因素：镜头和图像信号处理器（isp）。
镜头在手机上目前是无解的，因为它对体积有刚性物理要求的，拍摄特定场景时用的 镜片可能就有手机那么厚了。
isp是image signal processor的缩写，主要用来对前端图像传感器输出信号处理的单元，以匹配不同厂商的图像传感器。通俗来理解就是，isp 所要做到的就是将“数字眼睛”的视力水平提高到“人类眼睛”的水平，让人眼看到数字图像时的效果尽可能接近人眼看到实景时的效果。isp除了负责图片锐化、降噪、优化色彩等工作，还肩负着实现相位、激光、反差等混合对焦运算以及提供对多摄像头支持等重任，是手机拍照中必不可少的关键一环。
网上传言，小米这次将发布的自研的芯片就是isp，数码博主 @数码闲聊站 等 也“实锤”小米全新自研澎湃芯片是独立 isp 芯片，不是 soc 芯片。
但昨晚（3月29日）的发布会小米还是卖了个关子，把自研芯片留到了今晚发布。
2020年9月，小米曾公开招聘isp工程师，打造自研isp的意图非常明显。联系到和三星共同研发cmos传感器一年多，期间搭配着isp的研发也十分合理。
@数码闲聊站 曾表示，高通 isp 芯片一年一更新，跟不上小米影像进步的速度，于是小米自己做起了 isp 芯片。这次芯片与小米近些年进步神速的影像技术有关。
不过，小米不是国内第一家自研isp的手机厂商，华为从海思麒麟950开始就集成了自研的isp，以美颜拍摄见长的美图手机也采用了富士通的独立isp芯片。
以高通骁龙 888 移动平台为例，搭载了 spectra 580，这是首个支持三 isp 的 qualcomm spectra 图像信号处理器，三 isp 支持摄像头进行三重并发和三重并行处理。如果小米的自研芯片真的是isp，那么搭载的手机将拥有小米自研的影像技术，独立于高通 soc 上集成的 isp 运行。
一个isp其实是一个soc核心，内部包含cpu、sup ip、if 等单元，可以运行各种算法程序，实时处理图像信号。isp的控制结构由isp逻辑和运行在上面的firmware两个部分组成，逻辑单元除了完成一部分算法处理外，还可以统计出当前图像的实时信息。firmware 通过获取isp 逻辑的图像统计信息进行重新计算，反馈控制lens、sensor和isp逻辑，以达到自动调节图像质量的目的。
责编：luffy liu
电子工程专辑综合自小米官网、中关村在线、techweb、pchome、cnmo、maomaobear、it之家报道
原文标题：小米11 pro/ultra搭载大底传感器gn2，或与自研isp芯片有关？
文章出处：【微信公众号：传感器技术】欢迎添加关注！文章转载请注明出处。
应用方案 | 用于制冷剂泄漏检测的气体传感器及应用方案
通用召回6.9万辆电动汽车：存在起火隐患
深元AI盒子在矿山安全生产中实现皮带跑偏、异物、煤流量、大块煤等识别
5G引领的全智能化让我们变得更宅
FPC柔性线路板回流焊焊接方案
手机拍照需求带动移动图像传感器像素和面积的爆炸式增长
华为5G技术领先性,华为打破局面重在新兴市场
MYDATA推出MY500焊膏喷印机
力控监控组态软件的基本结构
硬盘电路板维修基础
堵转扭矩和额定扭矩的区别
两年打磨可见真章？ 魅蓝5S性能测试
IC封测厂恶意抬价遭反击，显示屏厂联合抗议
蓝牙5.0芯片的优势是什么，主流的蓝牙5.0芯片有哪些
OPPO正式成立新兴移动终端事业部将面向5G+时代的关键布局
高通公司或会开发更强大的ARM计算机芯片与苹果竞争
变废为宝:药渣做家具 电池变矿石
NS4816音频功率放大器概述、特性及应用
LTC5596 RMS 功率检波器 ,工作功率100 MHz - 40 GHz,值得拥有!
手机电池的基础知识,cellphone batter