科普 | 流式備份,又快又穩又便捷的數據備份模式!
發(fā)布人:Marketing 發(fā)布日期:2025-04-22 11:03:14 點(diǎn)擊數:1262
用戶(hù)在數據備份技術(shù)上的核心訴求從未改變:既要速度快,又要運行穩,管理更簡(jiǎn)單。要同時(shí)體驗到這三方面的優(yōu)勢,與備份方式密切相關(guān)——你使用的是中轉備份,還是流式備份?本文我們將用通俗的方式帶你深入了解這兩種備份的本質(zhì)區別。
1 技術(shù)原理對比,路徑?jīng)Q定效率
一、中轉備份
流程:
① 啟用預置在業(yè)務(wù)服務(wù)器的備份腳本,從源端讀取備份數據。
② 生成臨時(shí)備份文件,寫(xiě)入業(yè)務(wù)服務(wù)器本地的中轉存儲空間/中轉硬盤(pán)。
③ 從中轉存儲空間中讀出臨時(shí)備份文件。
④ 傳輸至遠端備份目標。
解讀:
? ? ?備份數據在中轉節點(diǎn)來(lái)回傳輸,消耗大量的磁盤(pán) IO,擠占業(yè)務(wù) IO,成為系統的性能瓶頸。
? ? ?臨時(shí)備份文件占用大量存儲空間,容易導致本地硬盤(pán)空間不足,引發(fā)業(yè)務(wù)故障及備份失敗。
? ? ?需要根據應用類(lèi)型編寫(xiě)對應的備份腳本,難以迭代升級,人工運維工作量大,出錯概率高。
? ? ?有些實(shí)現方式需要“掛盤(pán)”,不僅傳輸效率低、暴露更多系統端口、且不支持源端去重壓縮。
? ? ?對于數據量大的應用,不僅備份速度慢,而且中轉存儲空間大,難以通過(guò)這種模式來(lái)備份。
二、流式備份
流程:
① 實(shí)時(shí)獲取已生成的備份數據,如:數據文件 / binlog / redo log 等。
② 將采集到的備份數據,通過(guò)網(wǎng)絡(luò )發(fā)送到備份系統,寫(xiě)入到目標存儲。
在此備份過(guò)程中,支持斷點(diǎn)續傳、多線(xiàn)程上傳、源端重刪、壓縮、加密等,確保備份數據的一致性和高性能傳輸。
解讀:
? ? ?備份數據全程在應用服務(wù)器內存中處理,無(wú)需本地中轉落盤(pán)。
? ? ?策略配置在管理端預置,下發(fā)到備份 Agent 中按時(shí)自動(dòng)執行。
? ? ?無(wú)需定制任何備份腳本,有利于應用系統和備份系統的版本迭代更新。
? ? ?支持多種類(lèi)型的數據傳輸安全機制,確保數據的安全性和可靠性。
? ? ?備份數據的處理效率更高,支持豐富的備份高級特性,運維管理簡(jiǎn)單。
| 類(lèi)比說(shuō)明,以倉庫中的貨物出站為例:
中轉備份如同一個(gè)老式倉庫,需要開(kāi)辟臨時(shí)堆場(chǎng),用推車(chē)將一件件貨物從倉庫中取出,臨時(shí)暫存到堆場(chǎng)中,再用推車(chē)裝上發(fā)貨車(chē)輛,發(fā)往目的地。工作節點(diǎn)多、易出錯、占用空間大、運營(yíng)成本高。
流式備份則是一個(gè)高科技倉庫,使用自動(dòng)化傳送帶,貨物從倉庫直達發(fā)貨車(chē)輛,貨物直接裝車(chē),發(fā)往目的地。不額外占用空間,工作節點(diǎn)少、不等待、效率高、鏈路短、運營(yíng)成本低。
2 實(shí)現流式備份,需要跨越技術(shù)鴻溝
表面上看,“邊傳邊備份”很理想,但要真正做到“流式”,其實(shí)背后挑戰重重:
總結來(lái)說(shuō):開(kāi)發(fā)一套高效的流式備份功能,不僅需要強大的研發(fā)實(shí)力支撐,還需要長(cháng)期的技術(shù)投入,在已有流式框架的基礎上,適配更多的應用類(lèi)型,才能保持產(chǎn)品的市場(chǎng)競爭力。
3 鼎甲 DBackup,流式備份的踐行者
對于流式備份的實(shí)現方式,也存在不同的認知和解讀。如果在實(shí)際使用中發(fā)現:仍需要基于腳本、手動(dòng)配置存儲路徑、各種繁瑣的調參、本地空間經(jīng)常爆滿(mǎn)等。大概率是通過(guò)封裝第三方類(lèi)似 Rsync 工具來(lái)實(shí)現的偽流式方案。
偽流式備份方案,基于低效的校驗算法、低效的壓縮算法、且難以實(shí)現多線(xiàn)程/多通道備份,性能整體表現低下。采用這種實(shí)現模式,無(wú)非是不想精心研究和鉆研技術(shù),而是想快速適配應用??此铺峁┝藨玫膫浞菽芰?,實(shí)則是半成品,后續維護的成本會(huì )大大增加。
作為國產(chǎn)數據保護的頭部廠(chǎng)商,鼎甲早已落地成熟的流式備份方案,并廣泛應用于政企、金融、電信等關(guān)鍵行業(yè)。我們不是“腳本 + 緩存 + 中轉”的偽流式,而是真正實(shí)現了:
鼎甲核心技術(shù)實(shí)力包括:
? XBSA:連接應用與備份存儲,提升新應用的適配效率。
? EOBS:提供標準化的對象存儲接口,無(wú)縫對接新興應用。
? EPFS:基于文件系統 Native 接口,多線(xiàn)程高速傳輸。
? 自研框架:保障全鏈路的效率和可靠性,保證版本迭代和版本升級。
? 流式重刪:流式備份過(guò)程中即實(shí)現重刪,減少備份鏈路帶寬占比。我們在文檔和 PPT 中寫(xiě)明的每一項功能,都是經(jīng)過(guò)真實(shí)場(chǎng)景驗證的——真正做到“所見(jiàn)即所得”。