作為一種 Schema Free 文檔數(shù)據(jù)庫，MongoDB 因其靈活的數(shù)據(jù)模型，支撐業(yè)務快速迭代研發(fā)，廣受開發(fā)者歡迎并被廣泛使用。在企業(yè)使用 MongoDB 承載應用的過程中，會因為業(yè)務上云/跨云/下云/跨機房遷移/跨地域遷移、或數(shù)據(jù)庫版本升級、數(shù)據(jù)庫整合、數(shù)據(jù)庫拆分、容災等業(yè)務場景，存在 MongoDB 遷移或同步的業(yè)務訴求。

在 MongoDB 遷移的過程中，其遷移時間、遷移數(shù)據(jù)準確性及遷移過程中業(yè)務的停機要求無疑是影響遷移能否成功的關鍵因素。由此，如何選擇合適的遷移工具，提供高效、安全、準確的遷移能力至關重要。

01 傳統(tǒng)數(shù)據(jù)遷移方案

傳統(tǒng)的 MongoDB 遷移一般基于 mongodump 及 mongorestore 等導入導出工具進行數(shù)據(jù)搬遷，使用這種搬遷工具一般存在如下問題：

停機時間長：由于 mongodump/mongorestore 不支持增量數(shù)據(jù)的采集復制，在 MongoDB 遷移期間，要求業(yè)務停機，停服時間通常高達數(shù)小時/上天，對業(yè)務的挑戰(zhàn)極大。特別當遷移難度較高時，通常反復多次遷移，業(yè)務停服時間更不可控。

可靠性不高：不提供遷移過程的觀測、診斷與修復能力，遷移過程中出現(xiàn)錯誤一般需要重新遷移，遷移難度較高。

數(shù)據(jù)準確性難保障：此類工具因不提供對應的質量檢測能力，所以遷移的數(shù)據(jù)質量一般難以保障。

大數(shù)據(jù)量遷移挑戰(zhàn)：因其容災能力不足，不能很好支撐大數(shù)據(jù)量、大表的遷移。

02 NineData 數(shù)據(jù)遷移方案

為解決用戶面臨的 MongoDB 遷移問題，玖章算術旗下的云原生智能數(shù)據(jù)管理平臺 NineData 推出了 MongoDB 業(yè)務不停服數(shù)據(jù)遷移能力。NineData 實現(xiàn)了完全自動化的全量數(shù)據(jù)遷移，以及增量數(shù)據(jù)的采集復制能力。其中，增量數(shù)據(jù)遷移能力，能夠在結構遷移及全量數(shù)據(jù)遷移期間，實時監(jiān)聽采集源 MongoDB 數(shù)據(jù)變更產(chǎn)生的 oplog，并在完成全量遷移后，將變更數(shù)據(jù)實時復制到目標 MongoDB，實現(xiàn)源/目標 MongoDB 的動態(tài)復制。基于變更數(shù)據(jù)遷移能力，在 MongoDB 數(shù)據(jù)遷移過程中，業(yè)務可以正常提供服務，無需停服。最終，業(yè)務可根據(jù)需要選擇對應時間點切換到目標 MongoDB，具體流程如下圖。

NineData數(shù)據(jù)遷移方案

除了提供業(yè)務不停服的遷移能力外，NineData 提供的 MongoDB 還具有如下能力：

?? 大數(shù)據(jù)量或大表的遷移能力

基于智能分片、動態(tài)攢批、并發(fā)遷移、表級斷點續(xù)傳等多種技術能力，提供強勁遷移能力。

?? 數(shù)據(jù)一致性對比

NineData 提供了 MongoDB 的數(shù)據(jù)對比能力，能夠進行高效的一致性對比，快速識別差異數(shù)據(jù)，并提供對應的訂正腳本，快速訂正修復差異內容，有效保障遷移數(shù)據(jù)質量。

?? 可觀測可干預能力

NineData 提供詳細的遷移狀態(tài)、進展及詳情信息，當出現(xiàn)遷移異常時，會提供多種診斷修復能力，幫助您保障任務穩(wěn)定性。同時，提供遷移限流能力，您可根據(jù)業(yè)務需要，自定義遷移速度，保障 MongoDB 的穩(wěn)定性。

03 一分鐘啟動全自動化遷移

雖然提供了比較強大的 MongoDB 遷移能力，但是 NineData 使用起來非常簡單，只需要花 1 分鐘時間完成任務配置，即可以完全自動化完成數(shù)據(jù)的遷移及同步過程。下面我們來看下整個任務的配置過程：

3.1 配置復制任務

NineData 配置復制任務

基于上述操作，完成復制數(shù)據(jù)源、復制對象及復制類型的選擇后，即可快速啟動 MongoDB 的全自動化遷移。當完成任務啟動后，NineData 會自動進行全量數(shù)據(jù)遷移及增量數(shù)據(jù)復制。

當數(shù)據(jù)遷移完成后，也可以配置對應的數(shù)據(jù)對比進行數(shù)據(jù)一致性的校驗，快速發(fā)現(xiàn)、定位并修復差異數(shù)據(jù)。下面會對剛才遷移的 mongodb 數(shù)據(jù)進行數(shù)據(jù)一致性校驗。

3.2 全量數(shù)據(jù)對比

NineData全量數(shù)據(jù)對比

如圖片所示，針對剛才遷移的 MongoDB 數(shù)據(jù)可以通過配置運行數(shù)據(jù)對比任務，進行精準、完整的數(shù)據(jù)對比。數(shù)據(jù)對比過程中，NineData 會對每個 Document 的內容進行精準對比，并快速發(fā)現(xiàn)差異內容，并針對性提供訂正腳本。

至此，當數(shù)據(jù)遷移完成、數(shù)據(jù)校驗及業(yè)務驗證通過后，業(yè)務可以選擇一個低峰期進行 MongoDB 的停機切換，切換到新的數(shù)據(jù)庫，至此完成整個遷移過程。

04 寫在最后

當然，除了 MongoDB 遷移外，NineData 支持 MongoDB 實例間的長期復制，可應用于數(shù)據(jù)容災、讀寫分離、測試數(shù)據(jù)構建等業(yè)務場景。同時，NineData 也已支持數(shù)十種常見數(shù)據(jù)庫的遷移復制。NineData 提供即開即用的 SAAS 模式，及企業(yè)專屬集群模式，滿足企業(yè)最高的數(shù)據(jù)安全合規(guī)要求。當前，NineData 已在運營商、金融、制造業(yè)、地產(chǎn)、電商等多個行業(yè)完成大規(guī)模應用實踐。

NineData提供了高效、安全、準確的MongoDB遷移方案。與傳統(tǒng)的遷移工具相比，NineData實現(xiàn)了業(yè)務不停服的全量數(shù)據(jù)遷移和增量數(shù)據(jù)的采集復制能力，解決了停機時間長、可靠性低、數(shù)據(jù)準確性難保障等問題。此外，NineData還提供大數(shù)據(jù)量遷移能力、數(shù)據(jù)一致性對比和可觀測可干預能力。配置和啟動任務簡單快速，實現(xiàn)了自動化的遷移過程。無論是在遷移還是同步過程中，NineData都能提供穩(wěn)定的服務，幫助用戶輕松完成MongoDB數(shù)據(jù)遷移。

審核編輯 黃宇