Вопросы по теме 'logstash'
Logstash: поиск вложенных гроков? Разбирать поле на несколько полей?
У меня есть записи в журнале, которые выглядят так...
2014-02-25 00:00:03,936 INFO - something happened...bla bla bla
2014-02-25 00:00:03,952 INFO - ***Request Completed*** [ 78.002] mS [http://cloud.mydomain.local/schedule/search?param=45]...
14.01.2024
logstash записывает те же журналы с косой чертой
У меня есть журналы IIS в следующем формате:
172.24.54.12, -, 1/16/2016, 0:00:25, W3SVC1, DWEB420NTV, 172.24.55.45, 0, 62, 284, 200, 0, GET, /keepalive.html, -,
172.24.54.11, -, 1/16/2016, 0:00:29, W3SVC1, DWEB420NTV, 172.24.55.45, 15, 62, 284,...
10.11.2023
шаблон grok для извлечения данных из сообщения журнала
Недавно я начал анализировать стек ELK для обработки логов. В этом мне нужно получить некоторые данные из моего сообщения журнала в виде полей, чтобы сделать эти журналы более продуктивными. Пример сообщения журнала:
05:25:11,405 DEBUG...
02.12.2023
Как сохранить logstash, даже когда я выхожу с удаленного сервера
Я подключаюсь к удаленному хосту через вход по ssh и запускаю logstash с помощью следующей команды
$./logstash -f first-pipeline.conf
Однако после того, как я выхожу с сервера, logstash перестает работать. Как сделать так, чтобы он...
04.12.2023
шаблон grok для пользовательской конфигурации logstash
^(?:%{LOGLEVEL:level}):\s*%{DATA:message}\s*(?:%{JAVACLASS:caller_class})\s+\[%{WORD:loglevel}\]\s+(\[\s*\S+\s+%{BASE10NUM:tstamp}.*?\]\s+)+(\[\s*\S+\s+%{BASE10NUM:memory}\S*\s+\S+\s+%{BASE10NUM:total}.*?\])
это мой шаблон grok отсюда...
18.12.2023
Сопоставление logstash geoip.location с geo_point не работает
Я вижу, что в моих сопоставлениях по умолчанию geoip.location сопоставляется с типом geo_point:
GET myserver:9200/_template
{
"logstash": {
"order": 0,
"version": 50001,
"template": "logstash-*",...
06.12.2023
Настройка logstash для работы с несколькими входами
В настоящее время у меня установлен Logstash 5.5.1 и работает на Windows Server 2012 r2 с использованием плагина jdbc для базы данных SQL Server. В моем файле .conf есть входные данные с оператором Select и выходные данные elasticsearch по...
13.01.2024
Служба FileBeat не запускается из-за конфигурации yml
Это мой файл filebeat.yml… я получаю сообщение об ошибке: 1053 всякий раз, когда я запускаю службу filebeat. может быть какая-то ошибка я делаю в этом файле, пожалуйста, поправьте меня, где я ошибаюсь.
###################### Filebeat...
27.10.2023
Logstash 6.2.1 Плагин Oracle JDBC недопустимый символ в запросе
Я пытаюсь получить данные из базы данных Oracle, используя этот запрос, но постоянно получаю ошибку Java::JavaSql::SQLSyntaxErrorException: ORA-00911: invalid character :
statement => "select * from SYS.AUD$_ARCH where to_date('01-01-18',...
12.12.2023
Новые материалы
Кластеризация: более глубокий взгляд
Кластеризация — это метод обучения без учителя, в котором мы пытаемся найти группы в наборе данных на основе некоторых известных или неизвестных свойств, которые могут существовать. Независимо от..
Как написать эффективное резюме
Предложения по дизайну и макету, чтобы представить себя профессионально
Вам не позвонили на собеседование после того, как вы несколько раз подали заявку на работу своей мечты? У вас может..
Частный метод Python: улучшение инкапсуляции и безопасности
Введение
Python — универсальный и мощный язык программирования, известный своей простотой и удобством использования. Одной из ключевых особенностей, отличающих Python от других языков, является..
Как я автоматизирую тестирование с помощью Jest
Шутка для победы, когда дело касается автоматизации тестирования
Одной очень важной частью разработки программного обеспечения является автоматизация тестирования, поскольку она создает..
Работа с векторными символическими архитектурами, часть 4 (искусственный интеллект)
Hyperseed: неконтролируемое обучение с векторными символическими архитектурами (arXiv)
Автор: Евгений Осипов , Сачин Кахавала , Диланта Хапутантри , Тимал Кемпития , Дасвин Де Сильва ,..
Понимание расстояния Вассерштейна: мощная метрика в машинном обучении
В обширной области машинного обучения часто возникает необходимость сравнивать и измерять различия между распределениями вероятностей. Традиционные метрики расстояния, такие как евклидово..
Обеспечение масштабируемости LLM: облачный анализ с помощью AWS Fargate и Copilot
В динамичной области искусственного интеллекта все большее распространение получают модели больших языков (LLM). Они жизненно важны для различных приложений, таких как интеллектуальные..