Найти самый большой размер документа в MongoDB
Можно ли найти самый большой размер документа в MongoDB?
db.collection.stats() показывает средний размер, который не является действительно представительным, потому что в моем случае размеры могут значительно отличаться.
Ответы на вопрос(3)
Примечание: это попытается сохранить весь набор результатов в памяти (из.toArray) Осторожно на больших наборах данных. Не использовать в производстве! Abishek»Ответ s имеет преимущество работы с курсором, а не с массивом в памяти.
Если вы также хотите _id, попробуйте это. Учитывая коллекцию под названием "Запросы" :
// Creates a sorted list, then takes the max
db.requests.find().toArray().map(function(request) { return {size:Object.bsonsize(request), _id:request._id}; }).sort(function(a, b) { return a.size-b.size; }).pop();
// { "size" : 3333, "_id" : "someUniqueIdHere" }
and perhaps dangerously incorrect. , Я'посмотрим, смогу ли я обновить в ближайшее время.toArray() на большой коллекции может произойти сбой клиента. Вы можете'10 тБ данных в клиентпамять, а затем попытатьсяmap Это. Вы должны повторить это и позволить драйверу обрабатывать пакетирование.Если ты'работа с огромной коллекцией, загрузка всего этого сразу в память не будет работать, так как выДля этого потребуется больше оперативной памяти, чем размер всей коллекции.
Вместо этого вы можете обрабатывать всю коллекцию партиями, используя следующий пакет, который я создал:https://www.npmjs.com/package/mongodb-largest-documents
Все, что вам нужно сделать, это предоставить строку подключения MongoDB и имя коллекции. Скрипт выведет первые X самых больших документов, когда он закончит обход всей коллекции в пакетном режиме.
cursor.on('data', ...) подход сравнить спринятый ответ? Это быстрее? Это потребляет меньше памяти?Вы можете использовать небольшой скрипт оболочки, чтобы получить это значение.
Примечание. После этого будет выполнено полное сканирование таблицы.
var max = 0;
db.test.find().forEach(function(obj) {
var curr = Object.bsonsize(obj);
if(max < curr) {
max = curr;
}
})
print(max);
$documentSizeоператор в запросе MongoDB и$sizeделает что-то совсем другое. Единственным реальным способом в большинстве драйверов на стороне клиента, включая javascript, является использование помощника на стороне клиента.