2013-03-06 2 views
1

Так у меня есть файл JSON, который имеет несколько записей, глядя, как это ...Импорт больших файлов в формате JSON MongoDB

{"2597401":[{ 
"jobID":"2597401", 
"account":"TG-CCR120014", 
"user":"c", 
"pkgT":{"pgi/7.2-5":{"libA":["libpgc.so"],"flavor":["default"]}}, 
"startEpoch":"1338497979", 
"runTime":"1022", 
"execType":"user:binary", 
"exec":"/share/home/01482/c/appker/ranger/NPB3.3.1/NPB3.3-MPI/bin/ft.D.64", 
"numNodes":"4", 
"sha1":"5a79879235aa31b6a46e73b43879428e2a175db5", 
"execEpoch":1336766742, 
"execModify":"Fri May 11 15:05:42 2012", 
"startTime":"Thu May 31 15:59:39 2012", 
"numCores":"64", 
"sizeT":{"bss":"1881400168","text":"239574","data":"22504"}}, 

{"jobID":"2597401", 
"account":"TG-CCR120014", 
"user":"c", 
"pkgT":{"pgi/7.2-5":{"libA":["libpgc.so"],"flavor":["default"]}}, 
"startEpoch":"1338497946", 
"runTime":"33", 
"execType":"user:binary", 
"exec":"/share/home/01482/c/appker/ranger/NPB3.3.1/NPB3.3-MPI/bin/cg.C.64", 
"numNodes":"4", 
"sha1":"caf415e011e28b7e4e5b050fb61cbf71a62a9789", 
"execEpoch":1336766735, 
"execModify":"Fri May 11 15:05:35 2012", 
"startTime":"Thu May 31 15:59:06 2012", 
"numCores":"64", 
"sizeT":{"bss":"29630984","text":"225749","data":"20360"}}, 

{"jobID":"2597401", 
"account":"TG-CCR120014", 
"user":"c", 
"pkgT":{"pgi/7.2-5":{"libA":["libpgc.so"],"flavor":["default"]}}, 
"startEpoch":"1338500447", 
"runTime":"145", 
"execType":"user:binary", 
"exec":"/share/home/01482/appker/ranger/NPB3.3.1/NPB3.3-MPI/bin/mg.D.64", 
"numNodes":"4", 
"sha1":"173de32e1514ad097b1c051ec49c4eb240f2001f", 
"execEpoch":1336766756, 
"execModify":"Fri May 11 15:05:56 2012", 
"startTime":"Thu May 31 16:40:47 2012", 
"numCores":"64", 
"sizeT":{"bss":"456954120","text":"426186","data":"22184"}}, 

{"2597401":[{.... 

Каждая запись находится на одной линии. Таким образом, общий формат файла JSON выглядит следующим образом:

{"1111111: [{"jobID":value,"account":value,"user":value,"pkgT":{value:{"libA":[VALUES],"flavor":[value]}},"startEpoch":value,"runTime":value,"execType":value,"exec":value,"numNodes":value,"sha1":value,"execEpoch":value,"execModify":value,"startTime":value,"numCores":value,"sizeT":{"bss":value,"text":value,"data":value}} 

Я пытаюсь использовать mongoimport импортировать их в базу данных с помощью следующей команды:

mongoimport --db dbName --collection collectionName fileName --jsonArray 

Я читал, что каждая запись должна быть на своей собственной линии, какой она есть. Однако, когда я импортирую файл, он импортирует его как один документ (aka record). Как я могу заставить mongo интерпретировать этот файл как содержащий несколько записей вместо одного огромного документа? Спасибо за вашу помощь!!!

ответ

1

Я смог исправить это. У меня были фигурные скобки, окружающие весь текст в файле. Когда я удалил их, он успешно импортировал записи по отдельности.