本申請(qǐng)涉及數(shù)據(jù)壓縮，尤其涉及數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì)。
背景技術(shù)：
1、目前全閃存儲(chǔ)成本較高，且存在擦寫(xiě)次數(shù)有限的問(wèn)題，通過(guò)壓縮技術(shù)，可以減少數(shù)據(jù)占用空間，節(jié)省存儲(chǔ)成本，提高存儲(chǔ)效率，且通過(guò)壓縮后使得落盤(pán)數(shù)據(jù)更少，能夠有效減少io（input/output，輸入/輸出）操作，降低寫(xiě)放大，提升整體吞吐量，大幅度減少了相同體量的數(shù)據(jù)在落盤(pán)時(shí)的擦寫(xiě)次數(shù)，從而減少閃存磨損，延長(zhǎng)ssd（solid?state?drive，固態(tài)硬盤(pán)）的使用壽命。
2、相關(guān)技術(shù)中，通過(guò)外插qat（quick?assist?technology，快速輔助技術(shù)）壓縮卡實(shí)現(xiàn)壓縮功能，這種借助于壓縮卡的壓縮，通常通過(guò)在存儲(chǔ)系統(tǒng)的主機(jī)io路徑上增加一個(gè)特定模塊，用于與壓縮卡進(jìn)行交互，例如，存儲(chǔ)系統(tǒng)在接收到主機(jī)下發(fā)的寫(xiě)io后，經(jīng)過(guò)一系列處理到達(dá)與壓縮卡交互的模塊，由該模塊提交給壓縮卡，等待io被壓縮卡處理完，再返回到存儲(chǔ)系統(tǒng)的主機(jī)io流程，進(jìn)行后續(xù)處理，直至數(shù)據(jù)落盤(pán)，然而，這種方式對(duì)壓縮卡的依賴(lài)性極強(qiáng)，屬于實(shí)時(shí)壓縮，一旦壓縮卡發(fā)生故障，則無(wú)法進(jìn)行數(shù)據(jù)壓縮。
3、因此，如何在數(shù)據(jù)壓縮過(guò)程中降低存儲(chǔ)設(shè)備對(duì)硬件壓縮卡的依賴(lài)是當(dāng)前亟需解決的問(wèn)題。
技術(shù)實(shí)現(xiàn)思路
1、本申請(qǐng)?zhí)峁┝艘环N數(shù)據(jù)管理方法、裝置、設(shè)備及介質(zhì)，以至少解決相關(guān)技術(shù)中在數(shù)據(jù)壓縮過(guò)程中降低存儲(chǔ)設(shè)備對(duì)硬件壓縮卡的依賴(lài)的問(wèn)題。
2、本申請(qǐng)?zhí)峁┝艘环N數(shù)據(jù)管理方法，所述方法包括：
3、響應(yīng)于主機(jī)發(fā)送的數(shù)據(jù)寫(xiě)入請(qǐng)求，判斷所述數(shù)據(jù)寫(xiě)入請(qǐng)求的待寫(xiě)入數(shù)據(jù)是否符合在線(xiàn)壓縮條件；
4、若所述待寫(xiě)入數(shù)據(jù)符合在線(xiàn)壓縮條件，則對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行在線(xiàn)壓縮處理，獲取第一壓縮數(shù)據(jù)，并將所述第一壓縮數(shù)據(jù)寫(xiě)入磁盤(pán)；
5、若所述待寫(xiě)入數(shù)據(jù)不符合在線(xiàn)壓縮條件，則將所述待寫(xiě)入數(shù)據(jù)寫(xiě)入磁盤(pán)，以及當(dāng)觸發(fā)后臺(tái)數(shù)據(jù)壓縮時(shí)，對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行后臺(tái)壓縮處理，獲取第二壓縮數(shù)據(jù)，將所述待寫(xiě)入數(shù)據(jù)更新為第二壓縮數(shù)據(jù)。
6、本申請(qǐng)還提供了一種數(shù)據(jù)管理裝置，所述裝置包括：
7、條件判斷模塊，用于響應(yīng)于主機(jī)發(fā)送的數(shù)據(jù)寫(xiě)入請(qǐng)求，判斷所述數(shù)據(jù)寫(xiě)入請(qǐng)求的待寫(xiě)入數(shù)據(jù)是否符合在線(xiàn)壓縮條件；
8、在線(xiàn)壓縮模塊，用于若所述待寫(xiě)入數(shù)據(jù)符合在線(xiàn)壓縮條件，則對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行在線(xiàn)壓縮處理，獲取第一壓縮數(shù)據(jù)，并將所述第一壓縮數(shù)據(jù)寫(xiě)入磁盤(pán)；
9、后臺(tái)壓縮模塊，用于若所述待寫(xiě)入數(shù)據(jù)不符合在線(xiàn)壓縮條件，則將所述待寫(xiě)入數(shù)據(jù)寫(xiě)入磁盤(pán)，以及當(dāng)觸發(fā)后臺(tái)數(shù)據(jù)壓縮時(shí)，對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行后臺(tái)壓縮處理，獲取第二壓縮數(shù)據(jù)，將所述待寫(xiě)入數(shù)據(jù)更新為第二壓縮數(shù)據(jù)。
10、本申請(qǐng)還提供了一種電子設(shè)備，包括：存儲(chǔ)器，用于存儲(chǔ)計(jì)算機(jī)程序；處理器，用于執(zhí)行計(jì)算機(jī)程序時(shí)實(shí)現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。
11、本申請(qǐng)還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)程序，其中，計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。
12、本申請(qǐng)還提供了一種計(jì)算機(jī)程序產(chǎn)品，包括計(jì)算機(jī)程序，計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)上述任一種數(shù)據(jù)管理方法的步驟。
13、通過(guò)本申請(qǐng)，通過(guò)判斷待寫(xiě)入數(shù)據(jù)是否符合在線(xiàn)壓縮條件，對(duì)于符合壓縮條件的數(shù)據(jù)，進(jìn)行在線(xiàn)壓縮處理，對(duì)于不符合壓縮條件的數(shù)據(jù)，直接將該數(shù)據(jù)寫(xiě)入磁盤(pán)，并在后臺(tái)進(jìn)行壓縮處理，可以避免在線(xiàn)壓縮帶來(lái)的額外延遲。通過(guò)在線(xiàn)壓縮和后臺(tái)壓縮的結(jié)合，使得存儲(chǔ)設(shè)備能夠在實(shí)時(shí)性能和存儲(chǔ)效率之間取得動(dòng)態(tài)平衡，且，通過(guò)在線(xiàn)壓縮和后臺(tái)壓縮相配合的方式，將壓縮功能與主機(jī)io流程的耦合關(guān)系進(jìn)行弱化，消除了對(duì)硬件壓縮卡的依賴(lài)。
1.一種數(shù)據(jù)管理方法，其特征在于，所述方法包括：
2.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法，其特征在于，所述方法還包括：
3.根據(jù)權(quán)利要求2所述的數(shù)據(jù)管理方法，其特征在于，所述當(dāng)觸發(fā)后臺(tái)數(shù)據(jù)壓縮時(shí)，對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行后臺(tái)壓縮處理，包括：
4.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法，其特征在于，所述對(duì)所述待寫(xiě)入數(shù)據(jù)進(jìn)行后臺(tái)壓縮處理，獲取第二壓縮數(shù)據(jù)，包括：
5.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法，其特征在于，所述判斷所述數(shù)據(jù)寫(xiě)入請(qǐng)求的待寫(xiě)入數(shù)據(jù)是否符合在線(xiàn)壓縮條件，包括：
6.根據(jù)權(quán)利要求1所述的數(shù)據(jù)管理方法，其特征在于，所述方法還包括：
7.根據(jù)權(quán)利要求6所述的數(shù)據(jù)管理方法，其特征在于，所述對(duì)所述待讀取數(shù)據(jù)進(jìn)行解壓縮處理，包括：
8.一種數(shù)據(jù)管理裝置，其特征在于，所述裝置包括：
9.一種電子設(shè)備，其特征在于，包括：
10.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)程序，其中，所述計(jì)算機(jī)程序被處理器執(zhí)行時(shí)實(shí)現(xiàn)如權(quán)利要求1至7任一項(xiàng)所述數(shù)據(jù)管理方法的步驟。