Шпаргалка по mongodb: e-commerce, миграция, часто применяемые операции и немного о транзакциях

[daruwanov]

Отличная Статья! Спасибо Большое.

[Tur1st]

не подскажите как поступить, при большом объеме данных в документе, когда размер индекса больше чем объем оперативной памяти, и при создание простого запроса, например

db.test.find().count()

съедаеться вся память и сервер начинает дико тормозить

[FuN_ViT]

Горизонтальный шардинг docs.mongodb.org/manual/core/sharding-introduction

[r4nd0m]

Оптимизация базы данных начинается с поиска причин. Сходу шардить — обычно приводит к распространению пробемы на несколько серверов.

[Tur1st]

ну причину я написал выше, нехватка объема оперативной памяти, даже после перехода на третью версию монги, которая значительно ужала объем данных, все равно процесс работы с большим объемом данных по отношению к моему серверу не представляется возможным. При работе монго занимает всю память и больше ее не освобождает. Сколько бы не писали что монго умная система и сама распределяем ресурсы, я этого не заметил и другие процессы на этом сервере просто не отвечали.

[r4nd0m]

Это следствие, а не причина. Mне бы в первую очередь стало интересно почему индекс такой большой.

[Tur1st]

индекс большой из за большого количества записей, в документе 3 индекса, один стандартный "_id_" и два кастомных, int и string(40), количество записей было где около 500млн

[r4nd0m]

А что выводит db.test.stats().indexSizes?

[Tur1st]

размер такой,

{
   "_id_": 4139540480,
   "word_1": 2916057088,
   "doc_id_1": 1290551296 
}

[r4nd0m]

_id используется? Eсли нет, то пересоздать коллекцию c autoIndexId: false

[zxcabs]

Можно попробовать перейти на www.tokutek.com/tokumx-for-mongodb

[xGromMx]

Под windows я что-то поддержки не увидел.

[excoder]

Фундаментально! Спасибо!

[the_unbridled_goose]

Внушительных размеров работа проделана! Спасибо за статью.