MongoDB 無法排序：Sort operation used more than the maximum 33554
更新於 發佈於 閱讀時間約 3 分鐘
當使用以下語法對 Log 這個 Collection 依照 CreateTime 做倒序查詢
db.Log.find().sort({CreateTime: -1})MongoDB 回傳了以下 Error Msg
Error: error: {
"ok" : 0,
"errmsg" : "Executor error during find command: OperationFailed: Sort operation used more than the maximum 33554432 bytes of RAM. Add an index, or specify a smaller limit.",
"code" : 96,
"codeName" : "OperationFailed"
}發生原因
MongoDB 在排序時會將資料全部載入記憶體，之後在記憶體中進行排序，而預設開放給排序的記憶體只有 32 MB，因此在大量資料排序時就會引發該錯誤。
解決方案
建立索引
此範例為對 Log 這個 Collection 的 CreateTime 建立降冪排序的 Index
db.Log.createIndex({"CreateTime":-1})可以用以下指令來查詢此 Collection 上有多少組 Index
db.Log.getIndexes()
增加索引會導致寫入資料速度變慢，且由於需要額外儲存 Index 資訊，會增加儲存資料所佔的空間，但對排序與搜尋有著正向的效能提升，若該欄位時常使用 where 與 sort 則建議可加上索引提高效能。
增加排序可用的記憶體空間
此範例為增加至 320 MB
db.adminCommand({setParameter:1,internalQueryExecMaxBlockingSortBytes:335544320})若在不增加索引的狀況下修改預設記憶體大小，會導致排序時佔用更多記憶體空間進而影響到資料庫效能，不是一個治標的做法，建議僅在能確保使用量與不適合加入索引時謹慎使用此方案。
結論
在此案例裡，我採取的解決方案是雙管齊下，目的是確保指令可以正確執行，而增加記憶體上限是評估 MongoDB 主機記憶體總大小尚可負擔，可依照需求彈性決定是否對 Collection 上 Index 而同時確保可正常排序查詢
參考資料
為什麼會看到廣告
留言
留言分享你的想法！
你可能也想看
Google News 追蹤
※ 具備三項工具：
編輯器
終端機
瀏覽器
※ 步驟一：建立資料夾
mkdir mongodb-demo
cd mongodb-demo
code .
※ 步驟二：初始化，建立package.json
npm init -y
※ 步驟三：安裝網頁伺服器 – Express
因為
※ Mongoose官網
※ 認識Mongoose
Mongoose 是提供給 Node.js 使用的 MongoDB ODM。透過 Mongoose，我們可以用物件導向語法，以更直覺的方式操作 MongoDB 資料庫。
※ Mongoose安裝
※ 建立資料夾：
mkdir mo
※建置 MongoDB 資料庫，可以有兩種方式：
上 MongoDB 官網，把 MongoDB 的軟體下載下來，在本地安裝資料庫。
使用 MongoDB Atlas，這是 MongoDB 官方提供的全球雲端文件資料庫服務。
兩者的功能和操作上是相同的，在本地安裝與啟動資料庫會有連線速度上的優勢
👨💻簡介
在資料庫管理和系統維護中，備份是非常重要的一環。對於使用 MongoDB 的開發者和資料庫管理員來說，mongodump 是一個非常實用的命令行工具，能夠快速且輕鬆地完成資料庫的備份和恢復。無論是進行資料遷移、系統升級，還是面對突發的故障，mongodump 都能提供穩定的資料保護
對於程式卡頓的問題，如何分析程式碼占用多少記憶體，如何釋放或改寫，可以先用python內建的tracemalloc模組來追蹤 Python 分配的記憶體區塊。
本文將介紹最簡單的用法，來分析一段程式碼占用了多少記憶體。
結果呈現
印出當前使用的記憶體，與峰值記憶體使用量。
程式範例
i
給定一個輸入非負整樹陣列nums，請找出k值，使得陣列中恰好有k個元素大於等於 k。如果無解，回傳-1。尋找k值的方法包括排序法和二分搜尋法，時間複雜度都為O(n log n)，空間複雜度為O(1)。關鍵知識點是當解空間具有遞增或遞減的性質時，可以用二分搜尋法加快搜尋效率。
本文介紹了 MyISAM 和 InnoDB 儲存引擎原理的區別和比較，並從讀取效率和寫入效率、結構、任務以及操作等方面探討了兩者的差異。
本篇文章將教你如何在Kubernetes cluster內部署一個MongoDB，包括取得Manifests、建立Volume、部署實務、基本操作和結論。透過操作演示，讓你瞭解在實務上如何成功建立MongoDB，並進行基本操作。
※ 什麼是MongoDB？
MongoDB是一個開源、跨平台的非關聯式資料庫，屬於一種文件導向（Document-oriented database）的資料庫管理系統，也就是 NoSQL 數據庫管理系統（DBMS）。
※ 什麼是非關聯式資料庫（NoSQL）？
非關聯式資料庫（NoSQL）的意思
※ 具備三項工具：
編輯器
終端機
瀏覽器
※ 步驟一：建立資料夾
mkdir mongodb-demo
cd mongodb-demo
code .
※ 步驟二：初始化，建立package.json
npm init -y
※ 步驟三：安裝網頁伺服器 – Express
因為
※ Mongoose官網
※ 認識Mongoose
Mongoose 是提供給 Node.js 使用的 MongoDB ODM。透過 Mongoose，我們可以用物件導向語法，以更直覺的方式操作 MongoDB 資料庫。
※ Mongoose安裝
※ 建立資料夾：
mkdir mo
※建置 MongoDB 資料庫，可以有兩種方式：
上 MongoDB 官網，把 MongoDB 的軟體下載下來，在本地安裝資料庫。
使用 MongoDB Atlas，這是 MongoDB 官方提供的全球雲端文件資料庫服務。
兩者的功能和操作上是相同的，在本地安裝與啟動資料庫會有連線速度上的優勢
👨💻簡介
在資料庫管理和系統維護中，備份是非常重要的一環。對於使用 MongoDB 的開發者和資料庫管理員來說，mongodump 是一個非常實用的命令行工具，能夠快速且輕鬆地完成資料庫的備份和恢復。無論是進行資料遷移、系統升級，還是面對突發的故障，mongodump 都能提供穩定的資料保護
對於程式卡頓的問題，如何分析程式碼占用多少記憶體，如何釋放或改寫，可以先用python內建的tracemalloc模組來追蹤 Python 分配的記憶體區塊。
本文將介紹最簡單的用法，來分析一段程式碼占用了多少記憶體。
結果呈現
印出當前使用的記憶體，與峰值記憶體使用量。
程式範例
i
給定一個輸入非負整樹陣列nums，請找出k值，使得陣列中恰好有k個元素大於等於 k。如果無解，回傳-1。尋找k值的方法包括排序法和二分搜尋法，時間複雜度都為O(n log n)，空間複雜度為O(1)。關鍵知識點是當解空間具有遞增或遞減的性質時，可以用二分搜尋法加快搜尋效率。
本文介紹了 MyISAM 和 InnoDB 儲存引擎原理的區別和比較，並從讀取效率和寫入效率、結構、任務以及操作等方面探討了兩者的差異。
本篇文章將教你如何在Kubernetes cluster內部署一個MongoDB，包括取得Manifests、建立Volume、部署實務、基本操作和結論。透過操作演示，讓你瞭解在實務上如何成功建立MongoDB，並進行基本操作。
※ 什麼是MongoDB？
MongoDB是一個開源、跨平台的非關聯式資料庫，屬於一種文件導向（Document-oriented database）的資料庫管理系統，也就是 NoSQL 數據庫管理系統（DBMS）。
※ 什麼是非關聯式資料庫（NoSQL）？
非關聯式資料庫（NoSQL）的意思