импортировать дамп викиданных json в mongodb

Я скачал сжатый дамп wikidata json размером 7 ГБ. Я извлек его и его 122 ГБ! каков наилучший способ получить эти данные в монго?

Мой реальный вариант использования: я просто хочу запросить эти данные в python. Есть ли лучший вариант?

PS: я использую свой ноутбук.


person MD Luffy    schedule 02.05.2017    source источник
comment
Я работаю над инструментом для импорта дампа Викиданных в CouchDB. , может быть полезно. Однако я использую его для подмножеств дампа; для полного дампа он, вероятно, должен быть рефакторингом для использования массива API, я могу попробовать в ближайшие дни, если это интересно.   -  person maxlath    schedule 03.05.2017


Ответы (1)


После получения файла JSON вы можете просто использовать команду загрузки в MongoDB:

mongoimport --db dbName --collection collectionName --file fileName.json --jsonArray
person Ayman Salama    schedule 15.09.2018