低密度奇偶校驗(yàn)碼應(yīng)用于存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)研究
本文選題:高密度光存儲(chǔ)系統(tǒng) + 固態(tài)硬盤 ; 參考:《華中科技大學(xué)》2013年博士論文
【摘要】:隨著社會(huì)的發(fā)展和進(jìn)步,信息技術(shù)的發(fā)展速度也越來越快,尤其是互聯(lián)網(wǎng)的快速發(fā)展和個(gè)人數(shù)碼產(chǎn)品的廣泛應(yīng)用使得人們獲取信息的方式由最早的紙記筆錄方式發(fā)展到數(shù)年前的多媒體時(shí)代,再演變到現(xiàn)在每個(gè)人都是信息發(fā)布源的“自媒體”時(shí)代。信息的爆炸式增長也對(duì)信息的存儲(chǔ)造成了巨大的壓力,這種壓力來自兩方面,一是飛速增長的信息量對(duì)存儲(chǔ)容量的要求越來越高,二是數(shù)據(jù)本身的價(jià)值越來越高,甚至遠(yuǎn)遠(yuǎn)超過信息存儲(chǔ)媒介的價(jià)值,因此對(duì)存儲(chǔ)系統(tǒng)可靠性的要求也越來越高。 隨著人們對(duì)大容量存儲(chǔ)系統(tǒng)的可靠性提出了新的要求,原有的各種編碼技術(shù)開始捉襟見肘。光盤和磁介質(zhì)硬盤中的里德·索羅門碼(Reed-Solomon Codes, RS)、單層單元固態(tài)硬盤中的循環(huán)檢驗(yàn)碼(Bose-Chaudhuri-Hocquenghem Codes, BCH)以及分布式存儲(chǔ)系統(tǒng)中的糾刪碼均已經(jīng)到達(dá)或接近其極限,迫切需要一種新的編碼。低密度奇偶校驗(yàn)碼(Low-density Parity-check Codes, LDPC)雖然有著已知最接近香農(nóng)限的糾錯(cuò)能力,但因其編譯碼過程比較復(fù)雜,在其發(fā)現(xiàn)初期并未進(jìn)入實(shí)際應(yīng)用領(lǐng)域。而隨著近年來半導(dǎo)體技術(shù)的飛速發(fā)展,人們已經(jīng)可以實(shí)現(xiàn)基于超大規(guī)模集成電路的LDPC碼編譯碼工作,因此繼實(shí)際應(yīng)用于通信領(lǐng)域后,LDPC碼必將在存儲(chǔ)領(lǐng)域得到廣泛應(yīng)用。本文正是基于這種考慮,對(duì)LDPC碼在各種存儲(chǔ)環(huán)境下的應(yīng)用展開了前瞻性研究。 目前,光存儲(chǔ)系統(tǒng)雖然面臨硬盤存儲(chǔ)系統(tǒng)的嚴(yán)峻挑戰(zhàn)但仍然憑借自己批量復(fù)制成本極低、保存時(shí)間長達(dá)百年并且不存在誤刪除可能性的優(yōu)勢(shì),在存儲(chǔ)市場(chǎng)仍然占據(jù)著一席之地。由于新一代高密度光盤存儲(chǔ)系統(tǒng)的數(shù)據(jù)密度遠(yuǎn)遠(yuǎn)高于DVD等早期低密度光存儲(chǔ)系統(tǒng),因此廣泛用于光盤的RS碼在將不能很好的滿足新一代高密度光盤的應(yīng)用;而隨機(jī)構(gòu)造型LDPC碼可以通過計(jì)算機(jī)篩選最優(yōu)的構(gòu)造矩陣,因此可以代替RS碼更好地為人們提供基于高密度光存儲(chǔ)系統(tǒng)的可靠存儲(chǔ)服務(wù),本論文首先對(duì)高密度光存儲(chǔ)中應(yīng)用隨機(jī)構(gòu)造LDPC碼的可行性及其實(shí)用性進(jìn)行了深入論證,說明隨機(jī)構(gòu)造的LDPC碼確實(shí)可以用于高密度光盤存儲(chǔ)系統(tǒng),并且能夠有效提高高密度光盤存儲(chǔ)系統(tǒng)的可靠性和有效存儲(chǔ)容量。 固態(tài)硬盤則是近年來迅速興起的新型硬盤,憑借其高速度、高IOPS以及完全抗震等傳統(tǒng)磁介質(zhì)硬盤無法實(shí)現(xiàn)的特性很快的占領(lǐng)了一部分商用存儲(chǔ)系統(tǒng)和個(gè)人存儲(chǔ)系統(tǒng)的市場(chǎng)。但是,由于固態(tài)硬盤存儲(chǔ)介質(zhì)自身的特點(diǎn),它存在著耐久度不高、讀寫不對(duì)稱等致命缺陷。代數(shù)結(jié)構(gòu)的非隨機(jī)構(gòu)造LDPC碼則因其編譯碼開銷較小,能提供極佳的糾錯(cuò)能力,大碼長的編譯碼,因此非常適合應(yīng)用于固態(tài)硬盤。本論文從構(gòu)造適合固態(tài)硬盤存儲(chǔ)系統(tǒng)的代數(shù)結(jié)構(gòu)非隨機(jī)LDPC碼的角度對(duì)固態(tài)硬盤存儲(chǔ)系統(tǒng)進(jìn)行了深入研究,并得出可以通過縮短技術(shù)以犧牲一定碼率為代價(jià)構(gòu)造出適合固態(tài)硬盤存儲(chǔ)系統(tǒng)的合理構(gòu)造的準(zhǔn)循環(huán)LDPC碼以幫助提高固態(tài)硬盤的可靠性。此外,本文還針對(duì)固態(tài)硬盤存儲(chǔ)系統(tǒng)面臨的另一大挑戰(zhàn)——耐久度不高的問題,提出通過細(xì)粒度數(shù)據(jù)重構(gòu)的方式有效延長多級(jí)單元(Multi Level Cell, MLC)和三級(jí)單元(Trinary Level Cell, TLC)固態(tài)硬盤的使用壽命。 分布式存儲(chǔ)系統(tǒng)是存儲(chǔ)系統(tǒng)發(fā)展史上的一大突破,它不僅將磁盤陣列(Redundant Array Of Independent Disks, RAID)的優(yōu)點(diǎn)——基于廉價(jià)桌面硬盤搭建高性能高可靠性的存儲(chǔ)系統(tǒng)——進(jìn)一步發(fā)揚(yáng)光大,還可以通過網(wǎng)絡(luò)將不同的存儲(chǔ)子系統(tǒng)相互連接,甚至可以搭建基于廣域網(wǎng)的高性能存儲(chǔ)系統(tǒng)。但是,以往對(duì)分布式存儲(chǔ)的研究主要集中于可靠性方面,對(duì)分布式存儲(chǔ)的效率和經(jīng)濟(jì)價(jià)值的研究較少。相對(duì)于目前廣泛應(yīng)用于分布式存儲(chǔ)系統(tǒng)中的水平糾刪碼和垂直糾刪碼,LDPC碼有著糾錯(cuò)能力更強(qiáng)并且譯碼工作是線性時(shí)間開銷等特點(diǎn),因此同樣非常適合成為新一代分布式存儲(chǔ)系統(tǒng)的糾錯(cuò)碼。本文在對(duì)LDPC碼進(jìn)行深入研究后,將其應(yīng)用領(lǐng)域延伸至分布式存儲(chǔ)系統(tǒng),首先研究了適合分布式存儲(chǔ)系統(tǒng)的LDPC碼分塊方法,隨后提出由于糾刪碼策略和復(fù)制策略的綜合成本不同,可以由分布式存儲(chǔ)子系統(tǒng)通過博弈的方法優(yōu)化存儲(chǔ)策略,并在通過博弈論的數(shù)學(xué)方法證明夏普里值的存在性后,給出了分布式存儲(chǔ)系統(tǒng)LDPC碼糾刪策略和復(fù)制策略之間的納什均衡解。 綜上所述,本文系統(tǒng)地研究了LDPC碼應(yīng)用于存儲(chǔ)領(lǐng)域中的各項(xiàng)關(guān)鍵技術(shù),解決了LDPC碼在光存儲(chǔ)、固態(tài)硬盤存儲(chǔ)和分布式存儲(chǔ)系統(tǒng)中的應(yīng)用難題,并取得了實(shí)質(zhì)性進(jìn)展,進(jìn)一步擴(kuò)展了LDPC碼的應(yīng)用范圍。
[Abstract]:With the development and progress of the society, the development of information technology is becoming faster and faster. In particular, the rapid development of the Internet and the wide application of personal digital products make people get information from the earliest form of paper record to the multimedia times a few years ago. The explosive growth of information has also caused enormous pressure on the storage of information. This pressure comes from two aspects. One is that the rapid growth of information is becoming more and more demanding for storage capacity. The two is that the value of the data itself is higher and higher, even far more than the value of the information storage medium, so the storage system is reliable. The demand for sex is getting higher and higher.
As people put forward new requirements for the reliability of large capacity storage systems, the original coding techniques begin to be difficult. Reid Soromenma (Reed-Solomon Codes, RS) in disk and magnetic media hard disk, cyclic test code (Bose-Chaudhuri-Hocquenghem Codes, BCH) in single layer solid state hard disk and distributed storage system The erasure codes in the system have reached or close to their limits, and there is an urgent need for a new code. Low-density Parity-check Codes (LDPC) has the error correction ability known closest to Shannon limit, but its coding and decoding process is complex and has not entered the actual application field at the beginning of its occurrence. With the rapid development of semiconductor technology, LDPC code encoding and decoding based on large scale integrated circuits can be realized, so LDPC code will be widely used in the storage field after application in the field of communication. This paper is based on this consideration, the application of LDPC code in various storage environments is prospectively studied.
At present, although the optical storage system is facing the severe challenge of the hard disk storage system, it still has the advantage of saving time for a hundred years and does not have the possibility of deleting it, and still occupies a place in the storage market. The data density of the new generation of high-density optical disk storage system is far higher than DVD and so on. The early low density optical storage system, so the RS code widely used in optical disk will not satisfy the application of the new generation of high-density optical disk, while the mechanism modeling LDPC code can screen the optimal structure matrix by computer, so it can replace the RS code to provide people with the reliable storage service based on the high density optical storage system better. In this paper, the feasibility and practicability of the random construction of LDPC codes in high-density optical storage are discussed in this paper. It shows that the random structure of LDPC code can be used in the high density optical disk storage system and can effectively improve the reliability and effective storage capacity of the high-density optical disk storage system.
Solid-state hard disk is a new type of hard disk which has springing up rapidly in recent years. With its high speed, high IOPS and completely aseismic traditional magnetic medium hard disk can not realize the characteristics quickly occupy a part of the commercial storage system and personal storage system market. However, because of the characteristics of the solid hard disk storage medium itself, it has a durability. The non random structural LDPC code of algebraic structure is very suitable for application to solid state hard disk because of its low coding and decoding overhead, which can provide excellent error correction ability and large code length. Therefore, this paper is based on the construction of the solid hard disk storage system for the algebraic structure of the non random LDPC code. The storage system has been studied deeply, and the quasi cyclic LDPC code which is suitable for the solid state hard disk storage system can be constructed by shortening the technology at the cost of a certain bit rate to help improve the reliability of the solid disk. In addition, this paper also aims at another challenge facing the solid-state hard disk storage system - durability. The high problem is to prolong the service life of the Multi Level Cell (MLC) and the three stage unit (Trinary Level Cell, TLC) solid state hard disk by means of fine grained data reconfiguration.
Distributed storage system is a breakthrough in the history of storage system development. It not only makes the advantages of disk array (Redundant Array Of Independent Disks, RAID) - based on cheap desktop hard disk to build high performance and high reliability storage system - further development, and can also connect different storage subsystems to each other through the network. It can even build a high performance storage system based on wide area network. However, the previous research on distributed storage is mainly focused on reliability, and there are few studies on the efficiency and economic value of distributed storage. Compared with the horizontal erasure code and vertical erasure code widely used in distributed storage systems, LDPC codes have a correction. More error ability and decoding work are linear time overhead and so on, so it is also very suitable for a new generation of distributed storage system error correction code. After the in-depth study of LDPC code, this paper extends its application field to distributed storage system. First, the LDPC code block method suitable for distributed storage system is studied. Due to the different comprehensive cost of erasure code and replication strategy, the distributed storage subsystem can optimize the storage strategy by game method, and after proving the existence of SHARP in SHARP through game theory, the Nash equilibrium solution between the erasure strategy of the distributed storage system and the replication strategy is given.
To sum up, this paper systematically studies the key technologies used in the storage field of LDPC code, and solves the problem of application of LDPC code in optical storage, solid-state hard disk storage and distributed storage system. It has made substantial progress and further expanded the application model of LDPC code.
【學(xué)位授予單位】:華中科技大學(xué)
【學(xué)位級(jí)別】:博士
【學(xué)位授予年份】:2013
【分類號(hào)】:TP333
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 張?jiān)?速度快容量大的新型存儲(chǔ)系統(tǒng)[J];世界電子元器件;1997年09期
2 楊春燕;用SAN構(gòu)筑現(xiàn)代企業(yè)信息存儲(chǔ)系統(tǒng)的優(yōu)勢(shì)[J];內(nèi)蒙古電力技術(shù);2002年S1期
3 ;專家觀點(diǎn)[J];中國計(jì)算機(jī)用戶;2006年43期
4 ;HDS AMS 2000系列的創(chuàng)新之道[J];通信世界;2009年08期
5 金文新;;大型高校圖書館計(jì)算機(jī)網(wǎng)絡(luò)集成系統(tǒng)建設(shè)[J];情報(bào)科學(xué);2009年04期
6 李靜;;淺談HIS系統(tǒng)對(duì)服務(wù)器和存儲(chǔ)設(shè)備的要求及設(shè)計(jì)方案[J];信息與電腦(理論版);2009年11期
7 劉剛;張海濤;李瑞東;張強(qiáng);;一種基于模塊化設(shè)計(jì)的NAS集群存儲(chǔ)系統(tǒng)[J];微計(jì)算機(jī)信息;2011年05期
8 于耳;;建立面向應(yīng)用的存儲(chǔ)系統(tǒng)[J];中國教育網(wǎng)絡(luò);2011年06期
9 ;數(shù)字視頻存儲(chǔ)系統(tǒng)[J];光學(xué)精密工程;1977年06期
10 張明明;;為信息傳輸設(shè)備保駕護(hù)航——訪EMC公司中國區(qū)產(chǎn)品經(jīng)理馬永亨先生[J];上海微型計(jì)算機(jī);1998年Z1期
相關(guān)會(huì)議論文 前10條
1 趙志剛;;存儲(chǔ)系統(tǒng)在企業(yè)信息化中的應(yīng)用[A];2005年安徽通信論文集[C];2006年
2 朱平;朱建濤;高劍剛;蔣金虎;;高性能計(jì)算存儲(chǔ)關(guān)鍵技術(shù)研究[A];2010年第16屆全國信息存儲(chǔ)技術(shù)大會(huì)(IST2010)論文集[C];2010年
3 周博;宿紹瑩;陳曾平;;基于CPCI總線的寬帶雷達(dá)數(shù)據(jù)傳輸存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];全國第二屆信號(hào)處理與應(yīng)用學(xué)術(shù)會(huì)議?痆C];2008年
4 周功業(yè);周江;陳希;陳進(jìn)才;;寄生存儲(chǔ)原理及實(shí)現(xiàn)機(jī)制[A];第15屆全國信息存儲(chǔ)技術(shù)學(xué)術(shù)會(huì)議論文集[C];2008年
5 汪黎;章文嵩;楊學(xué)軍;;Cfslight:一個(gè)新型的輕量級(jí)對(duì)象存儲(chǔ)集群文件系統(tǒng)[A];2006年全國開放式分布與并行計(jì)算學(xué)術(shù)會(huì)議論文集(一)[C];2006年
6 聶明;;構(gòu)建海量存儲(chǔ)系統(tǒng) 提升媒體競爭力[A];中國新聞技術(shù)工作者聯(lián)合會(huì)2008年學(xué)術(shù)年會(huì)論文集(下)[C];2008年
7 黃曉峰;張杰;;礦井信息中心存儲(chǔ)系統(tǒng)設(shè)計(jì)[A];安全高效礦井機(jī)電裝備及信息化技術(shù)——陜西省煤炭學(xué)會(huì)學(xué)術(shù)年會(huì)論文集(2011)[C];2011年
8 王克敏;張璽;胡江凱;王毅濤;;NWP資料歸檔方法及其存儲(chǔ)系統(tǒng)的應(yīng)用[A];中國氣象學(xué)會(huì)2006年年會(huì)“中尺度天氣動(dòng)力學(xué)、數(shù)值模擬和預(yù)測(cè)”分會(huì)場(chǎng)論文集[C];2006年
9 劉湛明;吳柳堅(jiān);;數(shù)字電視臺(tái)的建設(shè)[A];2007第二屆全國廣播電視技術(shù)論文集2(下)[C];2007年
10 羅香玉;李傳佑;汪蕓;;糾刪碼容錯(cuò)組的布局策略研究[A];第18屆全國多媒體學(xué)術(shù)會(huì)議(NCMT2009)、第5屆全國人機(jī)交互學(xué)術(shù)會(huì)議(CHCI2009)、第5屆全國普適計(jì)算學(xué)術(shù)會(huì)議(PCC2009)論文集[C];2009年
相關(guān)重要報(bào)紙文章 前10條
1 朗飛;IBM“冰立方”就像搭積木[N];中國計(jì)算機(jī)報(bào);2006年
2 郭濤;MediaGrid既不是SAN也不是NAS[N];中國計(jì)算機(jī)報(bào);2007年
3 本報(bào)記者 張峰;知己知彼建存儲(chǔ)(上)[N];網(wǎng)絡(luò)世界;2006年
4 森林;NAS資源存儲(chǔ)系統(tǒng)[N];中國電腦教育報(bào);2002年
5 Hifn(漢帆)杭州信息技術(shù)有限公司 馬劍杰;自動(dòng)精簡配置:提升存儲(chǔ)利用率有絕招[N];中國計(jì)算機(jī)報(bào);2009年
6 ;IBM收購存儲(chǔ)解決方案公司[N];計(jì)算機(jī)世界;2007年
7 本報(bào)記者 徐恒;面臨機(jī)遇 中國新型存儲(chǔ)業(yè)合作求創(chuàng)新[N];中國電子報(bào);2011年
8 李想 徐晉;福州電業(yè)局研發(fā)個(gè)人文件安全存儲(chǔ)系統(tǒng)[N];中國電力報(bào);2006年
9 ;HDS推出企業(yè)入門級(jí)存儲(chǔ)系統(tǒng)[N];計(jì)算機(jī)世界;2005年
10 ;戴爾EMC打造新一代高容量存儲(chǔ)系統(tǒng)[N];人民郵電;2004年
相關(guān)博士學(xué)位論文 前10條
1 王鵬;低密度奇偶校驗(yàn)碼應(yīng)用于存儲(chǔ)系統(tǒng)的關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2013年
2 羅東健;大規(guī)模存儲(chǔ)系統(tǒng)高可靠性關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
3 黃繼鵬;高速高可靠小型數(shù)字視頻存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];中國科學(xué)院研究生院(長春光學(xué)精密機(jī)械與物理研究所);2012年
4 陸承濤;存儲(chǔ)系統(tǒng)性能管理問題的研究[D];華中科技大學(xué);2010年
5 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
6 聶雪軍;內(nèi)容感知存儲(chǔ)系統(tǒng)中信息生命周期管理關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2010年
7 王玉林;多節(jié)點(diǎn)容錯(cuò)存儲(chǔ)系統(tǒng)的數(shù)據(jù)與緩存組織研究[D];電子科技大學(xué);2010年
8 施展;基于本體的存儲(chǔ)系統(tǒng)管理研究[D];華中科技大學(xué);2011年
9 劉科;內(nèi)容感知存儲(chǔ)系統(tǒng)中的信息檢索關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2012年
10 姜明華;基于冗余智能存儲(chǔ)通道的存儲(chǔ)系統(tǒng)關(guān)鍵技術(shù)研究[D];華中科技大學(xué);2011年
相關(guān)碩士學(xué)位論文 前10條
1 陸正武;面向流媒體應(yīng)用存儲(chǔ)系統(tǒng)的研究與實(shí)現(xiàn)[D];華中科技大學(xué);2004年
2 杜睿;基于IP-SAN技術(shù)的石化企業(yè)數(shù)據(jù)集中存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華東理工大學(xué);2010年
3 金強(qiáng);基于HBase的RDF存儲(chǔ)系統(tǒng)的研究與設(shè)計(jì)[D];浙江大學(xué);2011年
4 余智敏;數(shù)字化圖書館的數(shù)據(jù)存儲(chǔ)技術(shù)的研究[D];武漢理工大學(xué);2006年
5 陶博舟;磁盤陣列快照系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];華中科技大學(xué);2007年
6 張小艷;基于嵌入式技術(shù)的USB存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];內(nèi)蒙古大學(xué);2011年
7 蔣亞群;基于DLX體系結(jié)構(gòu)的微處理器核的設(shè)計(jì)與實(shí)現(xiàn)[D];中國人民解放軍國防科學(xué)技術(shù)大學(xué);2002年
8 楊晴宇;大幅面航攝儀高速海量數(shù)據(jù)傳輸及存儲(chǔ)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];北京郵電大學(xué);2011年
9 亓偉;關(guān)系數(shù)據(jù)庫存儲(chǔ)子系統(tǒng)研究與實(shí)現(xiàn)[D];清華大學(xué);2005年
10 宋迎迎;數(shù)字館藏評(píng)價(jià)指標(biāo)體系研究[D];鄭州大學(xué);2006年
,本文編號(hào):1996985
本文鏈接:http://www.wukwdryxk.cn/kejilunwen/jisuanjikexuelunwen/1996985.html