固态硬盘坏块的管理方法以及对SSD有何影响
本文阐述坏块是如何产生的，ssd又是通过什么样的手段来发现和管理坏块，厂商建议的坏块管理策略存在什么样的问题，什么样的管理方法会更优，格式化硬盘会不对导致坏块表丢失，ssd返修后产生哪些安全隐患。坏块是如何产生的，ssd又是通过什么样的手段来发现和管理坏块，厂商建议的坏块管理策略存在什么样的问题，什么样的管理方法会更优，格式化硬盘会不对导致坏块表丢失，ssd返修后产生哪些安全隐患，本文逐一进行阐述。
概述
坏块管理设计理念，关系到ssd可靠性和效率。nand flash厂商给出的坏块管理做法未必非常合理，在进行产品设计时，如果对一些异常条件考虑的不周的话，常常会导致一些预料之外的坏块产生。例如，在测试多家不同主控ssd后发现因异常掉电而产生新增坏块的问题非常普遍，用搜索引擎搜索“异常掉电产生坏块”或者类似的关键词，会发现这个问题不仅仅存在于测试过程中，实际发生在终端用户身上的问题也非常之多。
谁来管理坏块
对于没有专门闪存文件系统的主控来说，坏块可以通过ssd controller的固件来管理，对于专门的闪存文件系统来说，通过专门的闪存文件系统来或driver来管理坏块。
坏块（bad block）分为三种：
1、出厂坏块，或初始坏块，即出厂时因不符合厂商标准或厂商抽测过无法达到厂商公布标准的块，在出厂时已经被厂商标识为坏块；有些出厂坏块可以被erase，有些不可以被erase；
2、使用过程中因为磨损造成的新增坏块或使用坏块；
3、因异常掉电等原因被主控误判的假性坏块；
新增坏块并非全部是因磨损造成的，如果ssd没有异常掉电保护功能，因异常掉电可能会导致主控误判坏块或者真正的新增坏块产生。在没有异常掉电保护的情况下，如果lower page已经编程成功，而在upper page编程过程中突然掉电，必然会导致lower page中的数据发送错误，如果数据错误数量超过ssd ecc纠错能力，那么就会在读取时出现错误，block会被主控判为“bad block”并标识到bad block table中。
新增的坏块有些是可以被erase的，而且，新增坏块被erase后重新进行数据读写擦操作未必会再次出错，因为出错与否与写入数据的pattern也有关系，使用某种pattern出错，更换另一种pattern有可能不会出错。
出厂坏块在整个device中所占的比率
咨询过几家nand flash原厂，给出比较通用的说法是：出厂坏块的比率不超过2%，并且厂商会留一部分的余量，确保即使在达到厂商承诺的p/e 次数最大限度时，仍然有不超过2%的坏块比率，好像保证2%并非一件很容易的事情，拿到某家新样品时的坏块比率超过了2%，实际测试为2.55%
坏块的判定方法
1、出厂坏块的判断方法
坏块的扫描基本都是扫描厂商指定地址所对应的byte是否有ffh标志，没有ffh则为坏块。坏块标识的位置每个厂商大致相同，对于slc和mlc来说，位置不同，以micron为例：
1.1 对于小页（528byte）的slc来说，每个block的第一个page的spare area中的第六个byte是否有ffh标志，如果没有就是坏块；
1.2 对于大页（大于等于2112byte）的slc来说，每个block的第一个page的spare area的第一个和第六个byte是否有ffh标志，如果没有就是坏块；
1.3 对于mlc来说，出厂坏块是通过扫描每个block的第一个page和最后一个page的spare area区域的第一个或第二个byte是否为0xff标志，是0xff，就是好快，没有0xff就是坏块。
借用hynix datasheet中的一张图来说明：
坏块里面是什么数据？全0还是全1？测试看到的结果如下图示，当然，这未必是真相，出厂坏块可能真实如此，但新增坏块就未必了，否则通过“坏块”做数据隐藏岂不是无法实现：
出厂坏块能否擦除掉？
有些是“可以”擦除掉，有些则被厂商禁止擦除，所谓的“可以”擦除仅仅是指可以通过发送擦除命令将坏块标识改掉，而不是建议可以使用坏块。
厂商强烈建议是不要擦除坏块，坏块标志一旦被擦除，是无法“恢复”回来的，在坏块上写入数据是有风险的。
2、使用过程中，新增坏块的判定方法
新增坏块是通过状态寄存器的反馈结果来判断对nand flash的操作是否成功，当program或者erase时，如果状态寄存器反馈为fail，则ssd主控会将此block列为坏块。
具体来说：
2.1、当执行擦除指令时出错；
2.2、当执行写命令时出错；
2.3、当执行读取命令时出错；当执行读取命令时，如果bit的错误数超过了ecc的纠错能力，该block将被判为坏块。
坏块管理的方法
坏块是通过建立和更新坏块表（bad block table：bbt）来进行管理的。坏块表的做法并没有统一的规范和做法，有些工程师用一个表来管理出厂坏块和新增坏块，有些工程师则会把两个表分开管理，有些工程师则把初始坏块作为单独的表，出厂坏块加新增坏块作为另外一个表。
对于坏块表的内容，表达方式也不尽一致，有些会表达的比较粗略，例如：使用0表示好快，用1表示坏块或者反之。而有些工程师则会使用更详细的描述方式，如：使用00表示出厂坏块，01表示program失败时的坏块，10表示read失败时产生的坏块，11表示erase失败时产生的坏块。
坏块表一般会在独立的区域进行保存（如：block0，page0和block1，page1），每次通电后直接读取bbt，效率比较高，考虑到nand flash本身也会损坏，有可能导致bbt的丢失，因此，通常会将bbt做备份处理，备份多少份每家也不同，有人备份2份，也有人备份8份，通常情况下，可以借助概率论的表决系统进行计算，不管怎样，最起码也要2份以上吧。
坏块管理策略一般包括：坏块跳过策略和坏块替换策略；
坏块跳过策略
1、对于初始坏块，坏块跳过会通过bbt将对应的坏块跳过，直接将数据存入下一个好块。
2、对于新增的坏块，将此坏块更新到bbt中，将坏块中的有效数据转存到下一个好块中，以后每次再做相应的read、program或者erse时直接跳过此坏块。
坏块替换策略（某nand flash厂商建议的做法）
坏块替换，是指使用预留区中的好块来替换使用过程中产生的坏块。假设，在program时，第n个page出现错误，那么在坏块替换策略下，会将page0到page（n-1）中的数据拷贝到预留区的空闲block（例如block d）的相同位置，然后将数据寄存器中第n个page的数据写入block d中的page n。
厂商的建议的做法是将整个数据区域划分为两部分，一部分是用户可见区域，用于用户正常的数据操作，另一部分为替换坏块专门准备的备用区域，用于存储替换坏块的数据以及保存坏块表，备用区域的比例为整个容量的2%。
当有坏块产生时，ftl会将bad block地址重新映射到保留区好块地址，而不是直接跳过坏块到下一个好块，在每次对逻辑地址写操作之前，都会先计算哪些物理地址可以写，哪些地址是坏块，如果是坏块，就将数据写入对应保留区的地址。
兵哥没有看到关于2%的预留区域是否需要包含在op区域之内还是额外的区域之类的建议，也没有看到2%的保留区域是动态还是静态的描述，加入是独立的区域且是静态区域，那么这种做法会有如下弊端：
1、 直接保留2%的区域留作坏块替换，会造成可用容量的减少，浪费了空间，同时，由于可用块数量少，加快了可用坏的平均磨损次数；2、假设可用区域坏块超过2%时，也就是说预留替换的区域全部被替换完，再产生的坏块将无法处理，ssd将因此而面临寿命终结。
坏块替换策略（部分ssd厂商的做法）
事实上，在真正的产品设计中，很少见到有单独预留2%比率作为坏块替换区域的做法，一般情况下，会使用op（over provison）区free block来替代在使用过程中新增的坏块，以垃圾回收为例，当垃圾回收机制运行时，先将需要回收的block中的有效page数据搬迁到free block中，然后对此block进行erase操作，假设此时erase状态寄存器反馈erase失败，则坏块管理机制会将此block地址更新到新增坏块列表中，同时，将坏块中的有效数据页写入到op区的free block中，更新坏块管理表，下次写入数据时，直接跳过坏块到下一个可用块。
op大小不同厂商的设定是不同的，应用场景不同，对可靠性要求不同，op大小也会不同，op和稳定性之间存在取舍关系，op越大，在持续写入的过程中，垃圾回收可用空间越大，性能就越稳定，表现出的性能曲线就越平滑，反之，op越小，性能稳定性就越差，当然，用户可用空间就越大，可用空间大就意味着成本更低。
一般而言，op可以设定为5%-50%，7%的op是常见的比例，与厂商建议的2%固定的区块不同的是，7%并不是固定的某些block做op，而是动态分布于所有的block中，这样更加有利于磨损平衡策略。
ssd维修的后患
对于大多数没有拥有主控技术的ssd厂商而言，如果产品返修，通常的做法是更换故障器件后进行重新量产操作，此时，新增坏块列表将会丢失，丢失新增坏块表就意味着没有更换的nand flash中其实已经存在坏块，操作系统或者敏感数据有可能会被写入到坏块区域，很有可能造成用户操作系统崩溃。即使对于有主控的厂商而言，是否会替用户保存已经存在的坏块列表，要看厂商面对的用户的态度了。
坏块产是否会影响ssd的读写速度和稳定性
出厂坏块在bitline上会被独立出来，因此不会影响其他block的擦写速度，但是，如果整个ssd的新增坏块足够多的话，整盘可用block减少，会导致垃圾回收次数增加，同时，op容量减少，会严重影响垃圾回收效率，因此，坏块增加到一定级别会对ssd的性能稳定性产生影响，尤其是在持续对ssd进行写入操作时，因为系统进行垃圾回收，会导致性能下降，ssd性能曲线会出现较大幅度波动。
fqj
SIP封装测试
季节交替时期除螨很重要！家用除螨仪热销排行TOP5
小米汽车科技可穿戴设备新专利用于控制车辆的控件
华为Mate40手握5G和摄影两大王牌 屹立旗舰之巅
全彩3D打印后续处理办法
固态硬盘坏块的管理方法以及对SSD有何影响
光驱怎么选择
苹果全新Macbook Pro系列相当有诚意的芯片阵容
AR技术如何助力核电站加固安全的防线？
图像传感器为视频监控带来了新趋势
Java提供了哪些注释语句
5G很风光很好，怎么赚钱仍然是一个很大的问号
全球首个5G室内数字系统的火车站长啥样
怎样成为前端工程师
比较器和运放有什么区别
上海力争2021年量产12nm芯片
东芝将开始研讨关于PLC的可行性
魅族Flyme6系统：新增云同步时光机特色功能
电脑硬盘是什么作用
大屏手机除了小米max以外，魅族这款也可以
概述
坏块管理设计理念，关系到ssd可靠性和效率。nand flash厂商给出的坏块管理做法未必非常合理，在进行产品设计时，如果对一些异常条件考虑的不周的话，常常会导致一些预料之外的坏块产生。例如，在测试多家不同主控ssd后发现因异常掉电而产生新增坏块的问题非常普遍，用搜索引擎搜索“异常掉电产生坏块”或者类似的关键词，会发现这个问题不仅仅存在于测试过程中，实际发生在终端用户身上的问题也非常之多。
谁来管理坏块
对于没有专门闪存文件系统的主控来说，坏块可以通过ssd controller的固件来管理，对于专门的闪存文件系统来说，通过专门的闪存文件系统来或driver来管理坏块。
坏块（bad block）分为三种：
1、出厂坏块，或初始坏块，即出厂时因不符合厂商标准或厂商抽测过无法达到厂商公布标准的块，在出厂时已经被厂商标识为坏块；有些出厂坏块可以被erase，有些不可以被erase；
2、使用过程中因为磨损造成的新增坏块或使用坏块；
3、因异常掉电等原因被主控误判的假性坏块；
新增坏块并非全部是因磨损造成的，如果ssd没有异常掉电保护功能，因异常掉电可能会导致主控误判坏块或者真正的新增坏块产生。在没有异常掉电保护的情况下，如果lower page已经编程成功，而在upper page编程过程中突然掉电，必然会导致lower page中的数据发送错误，如果数据错误数量超过ssd ecc纠错能力，那么就会在读取时出现错误，block会被主控判为“bad block”并标识到bad block table中。
新增的坏块有些是可以被erase的，而且，新增坏块被erase后重新进行数据读写擦操作未必会再次出错，因为出错与否与写入数据的pattern也有关系，使用某种pattern出错，更换另一种pattern有可能不会出错。
出厂坏块在整个device中所占的比率
咨询过几家nand flash原厂，给出比较通用的说法是：出厂坏块的比率不超过2%，并且厂商会留一部分的余量，确保即使在达到厂商承诺的p/e 次数最大限度时，仍然有不超过2%的坏块比率，好像保证2%并非一件很容易的事情，拿到某家新样品时的坏块比率超过了2%，实际测试为2.55%
坏块的判定方法
1、出厂坏块的判断方法
坏块的扫描基本都是扫描厂商指定地址所对应的byte是否有ffh标志，没有ffh则为坏块。坏块标识的位置每个厂商大致相同，对于slc和mlc来说，位置不同，以micron为例：
1.1 对于小页（528byte）的slc来说，每个block的第一个page的spare area中的第六个byte是否有ffh标志，如果没有就是坏块；
1.2 对于大页（大于等于2112byte）的slc来说，每个block的第一个page的spare area的第一个和第六个byte是否有ffh标志，如果没有就是坏块；
1.3 对于mlc来说，出厂坏块是通过扫描每个block的第一个page和最后一个page的spare area区域的第一个或第二个byte是否为0xff标志，是0xff，就是好快，没有0xff就是坏块。
借用hynix datasheet中的一张图来说明：
坏块里面是什么数据？全0还是全1？测试看到的结果如下图示，当然，这未必是真相，出厂坏块可能真实如此，但新增坏块就未必了，否则通过“坏块”做数据隐藏岂不是无法实现：
出厂坏块能否擦除掉？
有些是“可以”擦除掉，有些则被厂商禁止擦除，所谓的“可以”擦除仅仅是指可以通过发送擦除命令将坏块标识改掉，而不是建议可以使用坏块。
厂商强烈建议是不要擦除坏块，坏块标志一旦被擦除，是无法“恢复”回来的，在坏块上写入数据是有风险的。
2、使用过程中，新增坏块的判定方法
新增坏块是通过状态寄存器的反馈结果来判断对nand flash的操作是否成功，当program或者erase时，如果状态寄存器反馈为fail，则ssd主控会将此block列为坏块。
具体来说：
2.1、当执行擦除指令时出错；
2.2、当执行写命令时出错；
2.3、当执行读取命令时出错；当执行读取命令时，如果bit的错误数超过了ecc的纠错能力，该block将被判为坏块。
坏块管理的方法
坏块是通过建立和更新坏块表（bad block table：bbt）来进行管理的。坏块表的做法并没有统一的规范和做法，有些工程师用一个表来管理出厂坏块和新增坏块，有些工程师则会把两个表分开管理，有些工程师则把初始坏块作为单独的表，出厂坏块加新增坏块作为另外一个表。
对于坏块表的内容，表达方式也不尽一致，有些会表达的比较粗略，例如：使用0表示好快，用1表示坏块或者反之。而有些工程师则会使用更详细的描述方式，如：使用00表示出厂坏块，01表示program失败时的坏块，10表示read失败时产生的坏块，11表示erase失败时产生的坏块。
坏块表一般会在独立的区域进行保存（如：block0，page0和block1，page1），每次通电后直接读取bbt，效率比较高，考虑到nand flash本身也会损坏，有可能导致bbt的丢失，因此，通常会将bbt做备份处理，备份多少份每家也不同，有人备份2份，也有人备份8份，通常情况下，可以借助概率论的表决系统进行计算，不管怎样，最起码也要2份以上吧。
坏块管理策略一般包括：坏块跳过策略和坏块替换策略；
坏块跳过策略
1、对于初始坏块，坏块跳过会通过bbt将对应的坏块跳过，直接将数据存入下一个好块。
2、对于新增的坏块，将此坏块更新到bbt中，将坏块中的有效数据转存到下一个好块中，以后每次再做相应的read、program或者erse时直接跳过此坏块。
坏块替换策略（某nand flash厂商建议的做法）
坏块替换，是指使用预留区中的好块来替换使用过程中产生的坏块。假设，在program时，第n个page出现错误，那么在坏块替换策略下，会将page0到page（n-1）中的数据拷贝到预留区的空闲block（例如block d）的相同位置，然后将数据寄存器中第n个page的数据写入block d中的page n。
厂商的建议的做法是将整个数据区域划分为两部分，一部分是用户可见区域，用于用户正常的数据操作，另一部分为替换坏块专门准备的备用区域，用于存储替换坏块的数据以及保存坏块表，备用区域的比例为整个容量的2%。
当有坏块产生时，ftl会将bad block地址重新映射到保留区好块地址，而不是直接跳过坏块到下一个好块，在每次对逻辑地址写操作之前，都会先计算哪些物理地址可以写，哪些地址是坏块，如果是坏块，就将数据写入对应保留区的地址。
兵哥没有看到关于2%的预留区域是否需要包含在op区域之内还是额外的区域之类的建议，也没有看到2%的保留区域是动态还是静态的描述，加入是独立的区域且是静态区域，那么这种做法会有如下弊端：
1、 直接保留2%的区域留作坏块替换，会造成可用容量的减少，浪费了空间，同时，由于可用块数量少，加快了可用坏的平均磨损次数；2、假设可用区域坏块超过2%时，也就是说预留替换的区域全部被替换完，再产生的坏块将无法处理，ssd将因此而面临寿命终结。
坏块替换策略（部分ssd厂商的做法）
事实上，在真正的产品设计中，很少见到有单独预留2%比率作为坏块替换区域的做法，一般情况下，会使用op（over provison）区free block来替代在使用过程中新增的坏块，以垃圾回收为例，当垃圾回收机制运行时，先将需要回收的block中的有效page数据搬迁到free block中，然后对此block进行erase操作，假设此时erase状态寄存器反馈erase失败，则坏块管理机制会将此block地址更新到新增坏块列表中，同时，将坏块中的有效数据页写入到op区的free block中，更新坏块管理表，下次写入数据时，直接跳过坏块到下一个可用块。
op大小不同厂商的设定是不同的，应用场景不同，对可靠性要求不同，op大小也会不同，op和稳定性之间存在取舍关系，op越大，在持续写入的过程中，垃圾回收可用空间越大，性能就越稳定，表现出的性能曲线就越平滑，反之，op越小，性能稳定性就越差，当然，用户可用空间就越大，可用空间大就意味着成本更低。
一般而言，op可以设定为5%-50%，7%的op是常见的比例，与厂商建议的2%固定的区块不同的是，7%并不是固定的某些block做op，而是动态分布于所有的block中，这样更加有利于磨损平衡策略。
ssd维修的后患
对于大多数没有拥有主控技术的ssd厂商而言，如果产品返修，通常的做法是更换故障器件后进行重新量产操作，此时，新增坏块列表将会丢失，丢失新增坏块表就意味着没有更换的nand flash中其实已经存在坏块，操作系统或者敏感数据有可能会被写入到坏块区域，很有可能造成用户操作系统崩溃。即使对于有主控的厂商而言，是否会替用户保存已经存在的坏块列表，要看厂商面对的用户的态度了。
坏块产是否会影响ssd的读写速度和稳定性
出厂坏块在bitline上会被独立出来，因此不会影响其他block的擦写速度，但是，如果整个ssd的新增坏块足够多的话，整盘可用block减少，会导致垃圾回收次数增加，同时，op容量减少，会严重影响垃圾回收效率，因此，坏块增加到一定级别会对ssd的性能稳定性产生影响，尤其是在持续对ssd进行写入操作时，因为系统进行垃圾回收，会导致性能下降，ssd性能曲线会出现较大幅度波动。
fqj
SIP封装测试
季节交替时期除螨很重要！家用除螨仪热销排行TOP5
小米汽车科技可穿戴设备新专利用于控制车辆的控件
华为Mate40手握5G和摄影两大王牌 屹立旗舰之巅
全彩3D打印后续处理办法
固态硬盘坏块的管理方法以及对SSD有何影响
光驱怎么选择
苹果全新Macbook Pro系列相当有诚意的芯片阵容
AR技术如何助力核电站加固安全的防线？
图像传感器为视频监控带来了新趋势
Java提供了哪些注释语句
5G很风光很好，怎么赚钱仍然是一个很大的问号
全球首个5G室内数字系统的火车站长啥样
怎样成为前端工程师
比较器和运放有什么区别
上海力争2021年量产12nm芯片
东芝将开始研讨关于PLC的可行性
魅族Flyme6系统：新增云同步时光机特色功能
电脑硬盘是什么作用
大屏手机除了小米max以外，魅族这款也可以