Вопросы по теме 'logstash-file'

Вход в файл Logstash: sincedb_path
После перезапуска Logstash время от времени наблюдалось, что Logstash дублирует события журнала. Интересно, как правильно применить параметры конфигурации start_position , sincedb_path , sincedb_write_interval . Что происходит, когда в одном...
18371 просмотров

logstash неожиданно остановился
Я настроил logstash с архитектурой Redis для обработки своих журналов. Как я это организовал: logstash ---> redis ---> logstash ---> elasticsearch но проблема заключается в том, что после разбора почти 1,25 миллиона журналов...
249 просмотров

Фильтр Java для Logstash
Вы знаете, что для Logstash есть фильтр Ruby, который позволяет мне писать код на Ruby, и обычно он включается в файл конфигурации следующим образом. filter { ruby { code => "...." } } Теперь у меня есть два файла...
1592 просмотров

Logstash не читает ввод файла, не печатает на консоль
Новое в логсташе. Я пытаюсь прочитать простой ввод и вывести его в командное окно. Версия логсташа: 2.2.2 Ниже мой файл .conf input { file { path => "/my-file-path/logstash-test-data.log" start_position =>...
2142 просмотров
schedule 03.03.2024

Создание нового поля с помощью logstash
У меня есть файл с именем "Job Code.txt" job_id=0001,description=Ship data from server to elknode1,result=OK job_id=0002,description=Ship data from server to elknode2,result=Error: Msg... job_id=0003,description=Ship data from server to...
464 просмотров
schedule 28.10.2023

Оптимизация перевода словаря в logstash
Я использую logstash для анализа данных из файла csv и отправки их в elasticsearch. У меня есть словарь с 600 тысячами строк, который использует одно из полей в качестве ключа для сопоставления его со строкой значений. В настоящее время я использую...
1427 просмотров
schedule 12.03.2023

Как загрузить бинарные файлы с помощью Logstash
Как загружать бинарные файлы (pdf, xls, другие...) с помощью Logstash и не изменять их содержимое. В настоящее время я пытаюсь загрузить с input { file { path => "C:/path/files/*" type => "gesamt" start_position =>...
1200 просмотров
schedule 23.09.2022

Не удалось прочитать файл из Logstash
Я новичок в logstash и пытаюсь работать с Logstash. На данный момент я просто хочу прочитать файл журнала и поместить его в другой файл. Но выходной файл не создается. Ниже представлена ​​конфигурация, которую я использую в файле logstash.conf:...
371 просмотров
schedule 30.03.2022

Удаление ненужных полей в файле конфигурации Logstash
Я создаю программу установки ELK, и она работает нормально, однако я попадаю в ситуацию, когда я хочу удалить определенные поля из данных системного журнала во время обработки через logstash , например remove_field & remove_tag , которые я...
631 просмотров

Просмотр результатов Logstash в Kibana зависит от папок журналов
я новый пользователь logstash и kibana, я пытаюсь просмотреть свои журналы в кибане, разделенные в зависимости от папки, в которой я запускаю службу logstash, содержащую мой канал, как показано ниже input { file { { type =>...
29 просмотров

как использовать просроченный фильтр - logstash
Я работаю в просроченном фильтре. Я прочитал руководство по просроченному фильтру в logstash. затем я сделал образец файла конфигурации и csv, чтобы проверить работу просроченного фильтра. Но, похоже, это не работает. Нет никаких изменений в...
761 просмотров

Многострочный журнал не в правильном порядке
У меня есть журнал, который выглядит так: 1613635264 host1 AAA 0.11 0.09 0.12 16 13 1613635264 host1 BBB 0.21 0.23 176141 1613635264 host2 AAA 2.08 1.76 1.38 4 3 1613635264 host2 BBB 6.21 0.12 228981 1613635264 host3 AAA 0.58 1.12 1.75 16 0...
19 просмотров
schedule 09.11.2022