基于NAND闪存的固态盘由于其性能优于机械磁盘而被广泛部署在存储系统中,但由于写放大以及闪存介质磨损等原因,减少写操作可提高固态盘的性能与可靠性。此外,统计表明常见的数据集中普遍存在重复数据,利用数据去重技术可以有效减少写入固态盘的数据量,改善其性能与可靠性。但是传统的基于固态盘的数据去重开销较大,会成为固态盘的性能瓶颈。针对上述问题,设计了基于开放通道固态盘的数据去重系统D-pblk,它可利用主机端高性能处理器快速计算指纹,减少指纹计算开销。D-pblk采用了双指纹哈希校验策略,首先采用CRC32计算弱指纹过滤大部分非重复数据,并当数据可能重复时,再采用SHA-1计算强指纹准确识别数据是否重复,从而减小指纹计算开销,并且D-pblk能充分利用主机端的计算资源,加速指纹的计算,降低数据去重在数据写请求关键路径上带来的延迟。此外,D-pblk还实现了双环形缓冲区策略,有效解决了去重后的数据大小可能无法匹配写一个闪存页大小的问题。经实验测试表明,基于开放通道固态盘的数据去重系统D-pblk对常见的6种工作负载,去重率在4.61%到31.63%之间。相较于未进行数据去重的系统,在基本不影响读性能的情况下,D-pblk系统可减少开放通道固态盘的实际写流量最高达41%,写性能最高提升29%。