返回文章列表
玄貓（BlackCat）

MongoDB 監控管理備份還原技術解析

本文探討 MongoDB 的監控、管理、備份和還原技術，涵蓋 `mongostat`、`mongotop` 等監控工具，`serverStatus`、`dbStats` 等 Shell 指令，以及 `mongodump`、`mongorestore`、`mongoexport`、`mongoimport`

資料函式庫 DevOps
MongoDB 監控 備份 還原 mongoexport mongoimport

MongoDB 提供豐富的工具和指令集，方便 DBA 監控資料函式庫效能、管理資料函式庫狀態，並執行必要的備份和還原操作。mongostat 和 mongotop 等工具可以即時監控資料函式庫和集合層級的讀寫活動，serverStatus、dbStats 和 collStats 等 Shell 指令則能提供更詳細的資料函式庫狀態和儲存資訊。mongodump 和 mongorestore 工具組可有效進行資料函式庫層級的備份和還原，而 mongoexport 和 mongoimport 則能以 JSON 或 CSV 格式匯出和匯入資料，提供更彈性的資料管理方式。除了工具和指令的應用，文章也強調 MongoDB 安全管理的重要性，包括啟用身份驗證、實施根據角色的存取控制、加密通訊和資料、使用防火牆限制流量，以及定期安全稽核等關鍵措施，以確保資料函式庫的安全性和穩定性。

MongoDB 監控工具與實用指令介紹

MongoDB 提供了多種工具和 Shell 指令來監控資料函式庫的運作狀態和效能。這些工具和指令能夠幫助管理員及時發現並解決潛在的問題，確保資料函式庫的穩定性和高效運作。

mongostat：監控 MongoDB 資料函式庫操作

mongostat 是一個用於監控 MongoDB 資料函式庫操作的工具。它能夠提供即時的資料函式庫操作統計資訊，如插入、查詢、更新、刪除等操作的次數。要使用 mongostat，需要在 MongoDB 工具的安裝目錄下的 bin 目錄中執行該命令。

使用範例：

mongostat

執行後，mongostat 會持續輸出與 MongoDB 資料函式庫操作相關的統計資料。當進行資料函式庫操作（如查詢、插入、更新或刪除）時，mongostat 的輸出會即時更新，顯示相應操作的次數變化。

程式碼解密：

mongostat
  1. mongostat 命令：啟動 mongostat 工具，開始監控 MongoDB 資料函式庫操作。
  2. 持續輸出：mongostat 會持續輸出統計資料，直到手動停止。
  3. 操作統計：輸出的資料包括插入、查詢、更新、刪除等操作的次數。

mongotop：監控 MongoDB 集合層級的讀寫活動

mongotop 是另一個重要的 MongoDB 工具，用於監控 MongoDB 例項在集合層級上的讀寫活動。它提供了每個集合的讀寫操作統計資訊。要使用 mongotop，同樣需要在 MongoDB 工具的安裝目錄下的 bin 目錄中執行該命令。

使用範例：

mongotop

執行後，mongotop 會持續輸出與 MongoDB 集合讀寫活動相關的統計資料。當進行資料函式庫操作時，mongotop 的輸出會即時更新，顯示相應集合的讀寫活動變化。

程式碼解密：

mongotop
  1. mongotop 命令：啟動 mongotop 工具，開始監控 MongoDB 集合層級的讀寫活動。
  2. 持續輸出：mongotop 會持續輸出統計資料，直到手動停止。
  3. 集合層級統計：輸出的資料包括每個集合的讀寫操作統計資訊。

MongoDB Shell 指令

除了上述工具外，MongoDB 還提供了多個 Shell 指令來取得資料函式庫和集合的詳細資訊。這些指令需要在 MongoDB Shell 中執行。

serverStatus：取得 MongoDB 例項狀態

serverStatus 指令用於取得 MongoDB 例項的當前狀態資訊。

使用範例：
db.runCommand({serverStatus: 1})

程式碼解密：

db.runCommand({serverStatus: 1})
  1. db.runCommand({serverStatus: 1})：執行 serverStatus 指令，取得 MongoDB 例項的狀態資訊。
  2. 狀態資訊：傳回的資訊包括 MongoDB 例項的執行狀態、各項效能指標等。

dbStats：取得資料函式庫儲存資訊

dbStats 指令用於取得指定資料函式庫的儲存資訊。

使用範例：
db.runCommand({dbStats: 1})

程式碼解密：

db.runCommand({dbStats: 1})
  1. db.runCommand({dbStats: 1})：執行 dbStats 指令，取得當前資料函式庫的儲存資訊。
  2. 儲存資訊：傳回的資訊包括資料函式庫的儲存空間使用情況、資料量等。

collStats：取得集合儲存資訊

collStats 指令用於取得指定集合的儲存資訊。

使用範例：
db.runCommand({collStats: "BPBCatalogCollection"})

程式碼解密：

db.runCommand({collStats: "BPBCatalogCollection"})
  1. db.runCommand({collStats: "BPBCatalogCollection"})：執行 collStats 指令，取得指定集合（在此例中為 BPBCatalogCollection）的儲存資訊。
  2. 集合儲存資訊：傳回的資訊包括集合的儲存空間使用情況、資料量等。

其他實用指令

  • buildInfo：取得當前 mongod 版本的建置資訊。
  • hostInfo：取得 mongod 或 mongos（在分片叢集中）的系統資訊。
  • listCommands：列出當前 mongod 或 mongos 版本支援的所有資料函式庫相關指令。
  • ping：檢查伺服器是否回應指令，用於診斷伺服器狀態。

這些工具和指令為 MongoDB 的監控和管理提供了強大的支援，能夠幫助管理員更好地瞭解資料函式庫的執行狀態和效能，從而進行有針對性的最佳化和管理。

MongoDB 資料函式倉管理與備份還原工具

MongoDB 提供了多種強大的工具來進行資料函式庫的管理與維護，涵蓋了日誌檢視、備份與還原等重要功能。本文將探討 getLog 命令的使用方法，以及如何利用 mongodump 和 mongorestore 工具進行資料函式庫的備份與還原。

使用 getLog 命令檢視 MongoDB 日誌

getLog 是 MongoDB Shell 中的一個非常實用的管理命令，用於列印最近的 1024 條由 mongod 事件記錄的日誌。該命令可以接受三個不同的引數值，分別對應不同的日誌檢視需求。

db.adminCommand({getLog: "<value>"})

在上述命令中，<value> 可以是以下三種型別之一：

  • "*"：列出所有可用的日誌型別。
  • "global"：顯示所有最近的日誌條目。
  • "startupWarnings"：顯示在 mongod 啟動過程中產生的警告或錯誤日誌。

內容解密：

  1. db.adminCommand({getLog: "*"})：此命令用於查詢所有可用的日誌型別，幫助管理員瞭解可以檢視哪些型別的日誌。
  2. db.adminCommand({getLog: "global"})：透過此命令，管理員可以取得最近的所有日誌條目，有助於即時監控資料函式庫的執行狀態。
  3. db.adminCommand({getLog: "startupWarnings"})：該命令專門用於檢視 mongod 啟動時產生的警告或錯誤日誌，便於排查啟動過程中的問題。

使用 mongodump 進行 MongoDB 資料函式庫備份

mongodump 是 MongoDB 提供的一個備份工具，能夠輕鬆地對資料函式庫進行備份。基本的使用方法如下：

mongodump --host=<hostname> --port=<port-number> --db=<db-name> --collection=<collection-name> --out=<output-path>

內容解密：

  1. --host=<hostname>：指定 MongoDB 伺服器的主機名稱，預設為 localhost。
  2. --port=<port-number>：指定 MongoDB 伺服器的連線埠，預設為 27017。
  3. --db=<db-name>：指定要備份的資料函式庫名稱。
  4. --collection=<collection-name>：可選引數，用於指定要備份的集合名稱。如果未指定，則會備份資料函式庫中的所有集合。
  5. --out=<output-path>：指定備份檔案的輸出路徑。

使用 mongorestore 還原 MongoDB 資料函式庫

當需要還原資料函式庫時，可以使用 mongorestore 工具。基本的使用方法如下：

mongorestore --host=<hostname> --port=<port-number> --db=<db-name> <db-dump-path>

內容解密：

  1. --host=<hostname> 和 --port=<port-number>：與 mongodump 中的引數相同，用於指定 MongoDB 伺服器的主機名稱和連線埠。
  2. --db=<db-name>：指定要還原資料的資料函式庫名稱。
  3. <db-dump-path>：指定由 mongodump 生成的備份檔案路徑。

MongoDB 資料備份與還原技術解析

在 MongoDB 的管理與維護過程中，資料備份與還原是至關重要的環節。本文將探討如何使用 mongorestore、mongoexport 和 mongoimport 等工具來進行資料的備份、還原、匯出及匯入。

使用 mongorestore 還原 MongoDB 資料函式庫

mongorestore 是 MongoDB 提供的用於還原資料函式庫備份的工具。從版本 4.4 開始，mongorestore 成為獨立發行的工具，不再與 MongoDB 伺服器捆綁在一起。

基本使用方式

mongorestore --host=<hostname> --port=<port-number> --db=<db-name> --username=<user> --authenticationDatabase=admin <db-dump-path>

其中：

  • <hostname>：MongoDB 伺服器的主機名稱。
  • <port-number>：MongoDB 伺服器的連線埠號碼，預設為 27017。
  • <db-name>：需要還原的資料函式庫名稱。
  • <user>：具有存取許可權的使用者名稱。
  • <db-dump-path>：資料函式庫備份檔案的存放路徑。

實際操作步驟

  1. 導航至 MongoDB Tools 的 bin 目錄：例如 C:\Program Files\MongoDB\Tools\100\bin。
  2. 執行 mongorestore 命令：
    mongorestore --host=localhost --port=27017 --db=BPBCatalogDB-Backup "D:\Manu\bpb-db-dump"
  3. 驗證還原結果：使用 MongoDB Compass 檢視還原後的資料函式庫、集合及檔案內容。

程式碼解密：

mongorestore --host=localhost --port=27017 --db=BPBCatalogDB-Backup "D:\Manu\bpb-db-dump"

此命令用於將位於 D:\Manu\bpb-db-dump 的資料函式庫備份還原至名為 BPBCatalogDB-Backup 的資料函式庫中。

  • --host=localhost 指定了 MongoDB 伺服器的主機名稱為本機。
  • --port=27017 指定了連線埠為預設的 27017。
  • --db=BPBCatalogDB-Backup 指定了目標資料函式庫名稱。

使用 mongoexport 匯出 MongoDB 資料

mongoexport 工具允許使用者將 MongoDB 資料匯出為 JSON 或 CSV 格式。

基本使用方式

mongoexport --host=<hostname> --port=<port-number> --db=<db-name> --collection=<collection-name> --type=<output-type> --out=<output-path>

其中：

  • <collection-name>：需要匯出的集合名稱。
  • <output-type>：輸出檔案的格式，如 JSON 或 CSV。
  • <output-path>：輸出檔案的存放路徑及檔案名稱。

實際操作步驟

  1. 導航至 MongoDB Tools 的 bin 目錄。
  2. 執行 mongoexport 命令：
    mongoexport --host=localhost --port=27017 --db=BPBCatalogDB --collection=BPBCatalogCollection --type=json --out="D:\Manu\bpb-db-export\BPBCatalogCollection.json"
  3. 驗證匯出結果：檢查輸出目錄中的檔案內容。

程式碼解密：

mongoexport --host=localhost --port=27017 --db=BPBCatalogDB --collection=BPBCatalogCollection --type=json --out="D:\Manu\bpb-db-export\BPBCatalogCollection.json"

此命令將 BPBCatalogDB 資料函式庫中的 BPBCatalogCollection 集合匯出為 JSON 格式，並儲存於指定路徑。

  • --collection=BPBCatalogCollection 指定了要匯出的集合。
  • --type=json 指定了輸出格式為 JSON。
  • --out 指定了輸出檔案的路徑及名稱。

使用 mongoimport 匯入 MongoDB 資料

與 mongoexport 相對應，mongoimport 用於將 JSON 或 CSV 格式的資料匯入至 MongoDB。

基本使用方式

mongoimport --host=<hostname> --port=<port-number> --db=<db-name> --collection=<collection-name> <file-path>

其中：

  • <file-path>：匯入檔案的路徑。

實際操作步驟與程式碼解密類別似於 mongoexport，差別在於輸入的檔案路徑及匯入的目標集合。

MongoDB安全管理與備份還原技術深度解析

MongoDB備份與還原工具實務應用

在進行MongoDB資料管理時，備份與還原是至關重要的環節。MongoDB提供了多種工具來實作這些功能，包括mongodump、mongorestore、mongoexport和mongoimport。

使用mongoimport匯入資料

在進行資料匯入時，mongoimport是一個非常實用的工具。以下是一個具體的使用範例：

mongoimport --host=localhost --port=27017 --db=BPBCatalogDB-Import --collection=BPBCatalogCollection --type=json "D:\Manu\bpb-db-export\BPBCatalogCollection.json"

內容解密：

  1. mongoimport指令基礎：此指令用於將JSON或CSV檔案中的資料匯入到MongoDB資料函式庫中。
  2. --host與--port引數：指定MongoDB服務執行的主機位址和埠號，本例中為本地端的27017埠。
  3. --db與--collection引數：定義目標資料函式庫名稱（BPBCatalogDB-Import）和集合名稱（BPBCatalogCollection）。
  4. --type引數：指定匯入檔案的格式，本例中為JSON格式。
  5. 檔案路徑：最後一個引數是匯入檔案的完整路徑，需根據實際情況進行修改。

MongoDB安全管理關鍵技術

保障MongoDB的安全需要從多個層面著手，以下是幾個重要的安全措施：

啟用身份驗證機制

MongoDB提供了多種身份驗證方法，確保只有授權的使用者才能存取資料函式庫。在連線MongoDB時，需要使用--username、--password和--authenticationDatabase等選項進行身份驗證。

實施根據角色的存取控制（RBAC）

透過為使用者分配不同的角色，可以精確控制他們對資料函式庫的存取許可權。這包括使用MongoDB內建的角色或自定義角色，並透過createUser和createRole命令進行管理。

加密通訊通道與資料

使用TLS/SSL加密MongoDB的通訊，可以保護資料在傳輸過程中的安全。同時，啟用WiredTiger儲存引擎的「靜態加密」功能，可以對儲存的資料進行加密，進一步提升安全性。

使用防火牆限制流量

透過防火牆規則限制對MongoDB伺服器的存取，只允許授權的應用程式連線，可以有效防止未授權的存取。

定期進行安全稽核

定期檢查MongoDB的安全組態，包括使用者許可權、角色分配和網路存取控制，可以及時發現並修復潛在的安全風險。

問題與討論

  1. mongod的運作原理是什麼？請詳細說明。
  2. 如何理解daemon或背景程式的概念？
  3. 從命令列啟動MongoDB有哪些步驟？
  4. 為什麼需要定期監控MongoDB執行個體？這樣做有什麼好處？
  5. 列出七種有助於監控和診斷MongoDB的工具和命令。
  6. 如何進行MongoDB備份？
  7. 在進行mongoexport時，可以使用哪兩種主要格式？
  8. 列出三種使MongoDB執行個體更安全的方法。