Массовая ошибка API при индексации данных в elasticsearch

Я хочу импортировать некоторые данные в elasticsearch, используя массовый API. это сопоставление, которое я создал с помощью инструментов разработчика Kibana:

PUT /main-news-test-data
{
  "mappings": {
    "properties": {
      "content": {
        "type": "text"
      },
      "title": {
        "type": "text"
      },
      "lead": {
        "type": "text"
      },
      "agency": {
        "type": "keyword"
      },
      "date_created": {
        "type": "date"
      },
      "url": {
        "type": "keyword"
      },
      "image": {
        "type": "keyword"
      },
      "category": {
        "type": "keyword"
      },
      "id":{
        "type": "keyword"
      }
    }
  }
}

и это мои объемные данные:

{ "index" : { "_index" : "main-news-test-data", "_id" : "1" } }
{
  "content":"\u0641\u0647\u06cc\u0645\u0647 \u062d\u0633\u0646\u200c\u0645\u06cc\u0631\u06cc: \u0627\u06af\u0631\u0686\u0647 \u062f\u0631 \u0647\u06cc\u0627\u0647\u0648\u06cc ",
        "title":"\u06a9\u0627\u0631\u0647\u0627\u06cc \u0642\u0627\u0644\u06cc\u0628\u0627\u0641",
        "lead":"\u062c\u0627\u0645\u0639\u0647 > \u0634\u0647\u0631\u06cc -.",
        "agency":"13",
        "date_created":1494518193,
        "url":"http://www.khabaronline.ir/(X(1)S(bud4wg3ebzbxv51mj45iwjtp))/detail/663749/society/urban",
        "image":"uploads/2017/05/11/1589793661.jpg",
        "category":"15",
        "id":"2981643"
}
{ "index" : { "_index" : "main-news-test-data", "_id" : "2" } }
{ 
....

но когда я хочу опубликовать данные, я получаю эту ошибку:

{
  "error" : {
    "root_cause" : [
      {
        "type" : "illegal_argument_exception",
        "reason" : "Malformed action/metadata line [3], expected START_OBJECT but found [VALUE_STRING]"
      }
  "status" : 400
}

в чем проблема? Я использовал как PowerShell, так и метод POST в инструментах разработки Kibana, но в обоих случаях я получаю одну и ту же ошибку.


bulk-load elasticsearch elasticsearch-bulk-api
person lydal    schedule 15.09.2020    source источник
comment
В документах JSON не должно быть новых символов строки, кроме как в конце каждой строки.   -  person Val    schedule 15.09.2020
comment
@Iydal, у вас была возможность просмотреть мой ответ, с нетерпением жду ваших отзывов :)   -  person ESCoder    schedule 15.09.2020
comment
@BhavyaGupta да, это сработало! Благодарность   -  person lydal    schedule 15.09.2020
comment
@Iydal рад, что смог быть вам полезен :)   -  person ESCoder    schedule 15.09.2020

Ответы (1)


arrow_upward
2
arrow_downward

Данные должны быть указаны в одной строке следующим образом:

{ "index" : { "_index" : "main-news-test-data", "_id" : "1" } }
{ "content":"\u0641\u0647","title":"\u06a9" }

Пожалуйста, обратитесь к этому SO answer

Попробуйте следующий формат массового JSON. Я также протестировал этот массовый запрос API локально, и теперь он работает отлично:

{ "index" : { "_index" : "main-news-test-data", "_id" : "1" } }
{"content":"\u0641\u0647\u06cc\u0645\u0647 \u062d\u0633\u0646\u200c\u0645\u06cc\u0631\u06cc: \u0627\u06af\u0631\u0686\u0647 \u062f\u0631 \u0647\u06cc\u0627\u0647\u0648\u06cc ", "title":"\u06a9\u0627\u0631\u0647\u0627\u06cc \u0642\u0627\u0644\u06cc\u0628\u0627\u0641", "lead":"\u062c\u0627\u0645\u0639\u0647 > \u0634\u0647\u0631\u06cc -.", "agency":"13", "date_created":1494518193, "url":"http://www.khabaronline.ir/(X(1)S(bud4wg3ebzbxv51mj45iwjtp))/detail/663749/society/urban", "image":"uploads/2017/05/11/1589793661.jpg", "category":"15", "id":"2981643"}

Не забудьте добавить новую строку в конце содержания.

person ESCoder    schedule 15.09.2020