Примеры обработки логов - История изменений

IKuznetsov в 12:44, 21 мая 2025

2025-05-21T12:44:05Z

← Предыдущая		Версия 12:44, 21 мая 2025
Строка 70:		Строка 70:
	# Введите '''Название правила''' и запрос лога. Для запроса лога используйте постоянную фразу из содержимого данных лога для <code>cloud.provider="aws"</code>и <code>content="Billed Duration"</code> Название правила : <code>AWS services - billed duration</code> Соответствие : <code>cloud.provider="aws" and content="Billed Duration"</code>		# Введите '''Название правила''' и запрос лога. Для запроса лога используйте постоянную фразу из содержимого данных лога для <code>cloud.provider="aws"</code>и <code>content="Billed Duration"</code> Название правила : <code>AWS services - billed duration</code> Соответствие : <code>cloud.provider="aws" and content="Billed Duration"</code>
	# Введите '''определение процесса''' для анализа значения тарифицированной длительности. Определение процесса : <code>PARSE(content, "LD 'Billed Duration:' SPACE? INT:aws.billed.duration")</code>		# Введите '''определение процесса''' для анализа значения тарифицированной длительности. Определение процесса : <code>PARSE(content, "LD 'Billed Duration:' SPACE? INT:aws.billed.duration")</code>
	# Предполагая, что вы наблюдали следующую запись лога в средстве просмотра логов, вы можете выбрать '''Скачать образец лога''' и автоматически заполнить текстовое поле '''Образец лога''' вашими данными лога. <code>REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc Duration: 5033.50 ms Billed Duration: 5034 ms Memory Size: 1024 MB Max Memory Used: 80 MB Init Duration: 488.08 ms</code> В качестве альтернативы вы можете вручную ввести следующий фрагмент данных лога (содержащий другие дополнительные атрибуты) в текстовое поле <br />Образец лога <br />{ "event.type": "LOG", "content": "REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc\tDuration: 5033.50 ms\tBilled Duration: 5034 ms\tMemory Size: 1024 MB\tMax Memory Used: 80 MB\t\n", "status": "INFO", "timestamp": "1651062483672", "cloud.provider": "aws", "cloud.account.id": "999999999999", "cloud.region": "eu-central-1", "aws.log_group": "/aws/lambda/aws-dev", "aws.log_stream": "2022/04/27/[$LATEST]0d00000daa0c0c0a0a0e0ea0eccc000f", "aws.region": "central-1", "aws.account.id": "999999999999", "aws.service": "lambda", "aws.resource.id": "aws-dev", "aws.arn": "arn:aws:lambda:central-1:999999999999:function:aws-dev", "cloud.log_forwarder": "999999999999:central-1:~~dynatrace~~-aws-logs", "loglevel": "INFO" }		# Предполагая, что вы наблюдали следующую запись лога в средстве просмотра логов, вы можете выбрать '''Скачать образец лога''' и автоматически заполнить текстовое поле '''Образец лога''' вашими данными лога. <code>REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc Duration: 5033.50 ms Billed Duration: 5034 ms Memory Size: 1024 MB Max Memory Used: 80 MB Init Duration: 488.08 ms</code> В качестве альтернативы вы можете вручную ввести следующий фрагмент данных лога (содержащий другие дополнительные атрибуты) в текстовое поле <br />Образец лога <br />{ "event.type": "LOG", "content": "REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc\tDuration: 5033.50 ms\tBilled Duration: 5034 ms\tMemory Size: 1024 MB\tMax Memory Used: 80 MB\t\n", "status": "INFO", "timestamp": "1651062483672", "cloud.provider": "aws", "cloud.account.id": "999999999999", "cloud.region": "eu-central-1", "aws.log_group": "/aws/lambda/aws-dev", "aws.log_stream": "2022/04/27/[$LATEST]0d00000daa0c0c0a0a0e0ea0eccc000f", "aws.region": "central-1", "aws.account.id": "999999999999", "aws.service": "lambda", "aws.resource.id": "aws-dev", "aws.arn": "arn:aws:lambda:central-1:999999999999:function:aws-dev", "cloud.log_forwarder": "999999999999:central-1:astromkey-aws-logs", "loglevel": "INFO" }
	# Выберите '''Проверить правило''' . Отображаются обработанные данные лога. Отображаемые обработанные данные лога обогащены новым атрибутом <code>aws.billed.duration</code>. <br />{ "event.type": "LOG", "content": "REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc\tDuration: 5033.50 ms\tBilled Duration: 5034 ms\tMemory Size: 1024 MB\tMax Memory Used: 80 MB\t\n", "status": "INFO", "timestamp": "1651062483672", "cloud.provider": "aws", "cloud.account.id": "999999999999", "cloud.region": "eu-central-1", "aws.log_group": "/aws/lambda/aws-dev", "aws.log_stream": "2022/04/27/[$LATEST]0d00000daa0c0c0a0a0e0ea0eccc000f", "aws.region": "central-1", "aws.account.id": "999999999999", "aws.service": "lambda", "aws.resource.id": "aws-dev", "aws.arn": "arn:aws:lambda:central-1:999999999999:function:aws-dev", "cloud.log_forwarder": "999999999999:central-1:~~dynatrace~~-aws-logs", "loglevel": "INFO" }		# Выберите '''Проверить правило''' . Отображаются обработанные данные лога. Отображаемые обработанные данные лога обогащены новым атрибутом <code>aws.billed.duration</code>. <br />{ "event.type": "LOG", "content": "REPORT RequestId: 000d000-0e00-0d0b-a00e-aec0aa0000bc\tDuration: 5033.50 ms\tBilled Duration: 5034 ms\tMemory Size: 1024 MB\tMax Memory Used: 80 MB\t\n", "status": "INFO", "timestamp": "1651062483672", "cloud.provider": "aws", "cloud.account.id": "999999999999", "cloud.region": "eu-central-1", "aws.log_group": "/aws/lambda/aws-dev", "aws.log_stream": "2022/04/27/[$LATEST]0d00000daa0c0c0a0a0e0ea0eccc000f", "aws.region": "central-1", "aws.account.id": "999999999999", "aws.service": "lambda", "aws.resource.id": "aws-dev", "aws.arn": "arn:aws:lambda:central-1:999999999999:function:aws-dev", "cloud.log_forwarder": "999999999999:central-1:astromkey-aws-logs", "loglevel": "INFO" }
	# Сохраните правило обработки лога.		# Сохраните правило обработки лога.
	# Перейдите в '''Настройки > Мониторинг логов > Извлечение метрик''' и выберите '''Добавить метрику лога''' .		# Перейдите в '''Настройки > Мониторинг логов > Извлечение метрик''' и выберите '''Добавить метрику лога''' .

IKuznetsov: /* Пример 1: Исправление нераспознанных таймфреймов и уровня логов */

2024-12-01T18:13:23Z

Пример 1: Исправление нераспознанных таймфреймов и уровня логов

Внесённые изменения

IKuznetsov: /* Пример 3. Создание метрики продолжительной оплаты для служб AWS, используя данные логов */

2024-12-01T18:06:30Z

Пример 3. Создание метрики продолжительной оплаты для служб AWS, используя данные логов

← Предыдущая		Версия 18:06, 1 декабря 2024
Строка 37:		Строка 37:
	#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.		#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.
	#* Остальная часть контента не совпадает.		#* Остальная часть контента не совпадает.
	# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» <br /> {~~\| class="wikitable" \|{~~ "event.type":"LOG", "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "status":"NONE", "timestamp":"1650889391528", "log.source":"/var/log/myapp/application.log.#", "loglevel":"NONE" ~~} \|~~} <br />		# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» <br />{ "event.type":"LOG", "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "status":"NONE", "timestamp":"1650889391528", "log.source":"/var/log/myapp/application.log.#", "loglevel":"NONE" }<br />
	# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен <br /> {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br /><br />Сохраните правило обработки лога.		# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен <br /> {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br /><br />Сохраните правило обработки лога.

IKuznetsov: /* Пример 2: Определение настраиваемого атрибута для поиска */

2024-12-01T17:59:07Z

Пример 2: Определение настраиваемого атрибута для поиска

← Предыдущая		Версия 17:59, 1 декабря 2024
Строка 37:		Строка 37:
	#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.		#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.
	#* Остальная часть контента не совпадает.		#* Остальная часть контента не совпадает.
	# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» {\| class="wikitable" \|{ "event.type":"LOG", "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "status":"NONE", "timestamp":"1650889391528", "log.source":"/var/log/myapp/application.log.#", "loglevel":"NONE" } \|}		# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» <br /> {\| class="wikitable" \|{ "event.type":"LOG", "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "status":"NONE", "timestamp":"1650889391528", "log.source":"/var/log/myapp/application.log.#", "loglevel":"NONE" } \|} <br />
	# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br />Сохраните правило обработки лога.		# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен <br /> {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br /><br />Сохраните правило обработки лога.

	По мере поступления новых данных логов вы сможете увидеть обработанные данные логов в средстве просмотра логов.		По мере поступления новых данных логов вы сможете увидеть обработанные данные логов в средстве просмотра логов.

IKuznetsov: /* Пример 1: Исправление нераспознанных таймфреймов и уровня логов */

2024-12-01T17:58:01Z

Пример 1: Исправление нераспознанных таймфреймов и уровня логов

← Предыдущая		Версия 17:58, 1 декабря 2024
Строка 37:		Строка 37:
	#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.		#* <code>UPPER</code> литерал используется для сопоставления заглавных букв.
	#* Остальная часть контента не совпадает.		#* Остальная часть контента не совпадает.
	# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» {\| class="wikitable" \|~~<code>~~{~~</code><code>~~ "event.type":"LOG",~~</code>~~ ~~<code>~~ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet",~~</code>~~ ~~<code>~~ "status":"NONE",~~</code>~~ ~~<code>~~ "timestamp":"1650889391528",~~</code>~~ ~~<code>~~ "log.source":"/var/log/myapp/application.log.#",~~</code>~~ ~~<code>~~ "loglevel":"NONE"~~</code>~~ ~~<nowiki> </nowiki><code>~~}~~</code>~~ \|}		# Введите следующий фрагмент данных логов вручную в текстовое поле «'''Образец лога'''» {\| class="wikitable" \|{ "event.type":"LOG", "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "status":"NONE", "timestamp":"1650889391528", "log.source":"/var/log/myapp/application.log.#", "loglevel":"NONE" } \|}
	# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br />Сохраните правило обработки лога.		# Выберите '''Проверить правило''' . Отображаются обработанные данные логов. Поля <code>timestamp</code> и <code>loglevel</code> имеют правильные значения. Дополнительный атрибут <code>thread.name</code> также правильно извлечен {\| class="wikitable" \|{ "content":"April 24, 2022 09:59:52 [myPool-thread-1] INFO Lorem ipsum dolor sit amet", "timestamp":"1650794392000", "event.type":"LOG", "status":"NONE", "log.source":"/var/log/myapp/application.log.#", "loglevel":"INFO", "thread.name":"myPool-thread-1" } \|} <br />Сохраните правило обработки лога.

	По мере поступления новых данных логов вы сможете увидеть обработанные данные логов в средстве просмотра логов.		По мере поступления новых данных логов вы сможете увидеть обработанные данные логов в средстве просмотра логов.

IKuznetsov: /* Пример 13: Маскировка любого атрибута */

2024-12-01T17:56:16Z

Пример 13: Маскировка любого атрибута

Внесённые изменения

IKuznetsov: /* Пример 1: Исправление нераспознанных таймфреймов и уровня логов */

2024-12-01T17:47:14Z

Пример 1: Исправление нераспознанных таймфреймов и уровня логов

Внесённые изменения

IKuznetsov: /* Пример 1: Исправление нераспознанных таймфреймов и уровня логов */

2024-12-01T17:29:21Z

Пример 1: Исправление нераспознанных таймфреймов и уровня логов

Внесённые изменения

IKuznetsov: Новая страница: «В зависимости от созданных вами правил вы можете настроить входящие данные логов в соот...»

2024-11-29T23:41:49Z

Новая страница: «В зависимости от созданных вами правил вы можете настроить входящие данные логов в соот...»

Внесённые изменения