Ceph: различия между версиями

Материал из Документация Ключ-АСТРОМ
← Предыдущая правкаСледующая правка →
ВизуальныйВики-текст
Нет описания правки
Нет описания правки
Строка 1: Строка 1:
'''''[[Расширения]] / [[Расширения 2.0]] / Ceph'''''
= Расширение Ceph storage =


Это расширение обеспечивает возможность мониторинга использования системы хранения Ceph. Оно охватывает подробные данные как на стороне клиента, так и на уровне хоста.
Осуществляйте мониторинг использования распределенного хранилища '''Ceph''', состояния '''OSD''' и производительности пулов на уровне клиента и хоста с помощью метрик '''Prometheus''' и информационных панелей.


== Обзор ==
== Начало работы ==
Предназначено для пользователей, которым:
=== Обзор ===
Отслеживайте использование системы хранения '''Ceph''' как на стороне клиента, так и на уровне хоста. Используйте расширение '''Ceph storage''' для:
* Мониторинга использования и производительности вашей платформы '''Ceph'''.
* Постоянного получения актуальной информации о ресурсах хоста и потоке данных.
* Сокращения до минимума времени анализа, необходимого для выявления первопричины возможных системных сбоев.


* Хотелось бы отслеживать использование и производительность их платформы Ceph.
=== Варианты использования ===
* Требуется постоянная возможность получать оперативную информацию о ресурсах хоста и потоке данных.
* Мониторинг использования ресурсов хоста и уровней его емкости.
* Хотелось бы сократить до минимума время анализа, необходимое для выяснения основной причины возможных сбоев системы.
* Сбор данных об активных и неактивных демонах объектного хранилища '''Ceph'''.
* Наблюдение за потоком данных системы с точки зрения операций записи и чтения, как для кластера в целом, так и для отдельных '''OSD'''.


=== Случаи Использования ===
=== Требования ===
Это позволяет:
* Хранилище '''Ceph''', работающее в вашей среде.
* Расширение активировано в вашей среде с помощью встроенного раздела '''Расширения'''.


* Отслеживать использование ресурсов хоста и уровни его емкости.
== Подробности ==
* Собирать данные об активных и неактивных демонах хранилища объектов Ceph.
=== Лицензирование и стоимость ===
* Наблюдайте за потоком системных данных с точки зрения операций записи/чтения для кластера в целом и для OSD в частности.
Расширение '''Ceph storage''' собирает пользовательские метрики, которые, в зависимости от вашей лицензионной модели, могут либо потреблять '''DDUs''', либо учитываться как '''метрики в рамках вашей подписки на платформу Ключ-АСТРОМ'''. Ниже приведена формула для оценки потребления лицензии для этого расширения:
* '''DDUs''' для всех включенных метрик: ((3 * кол-во мониторов) + (7 * кол-во кластеров) + (13 * кол-во '''OSD''') + (9 * кол-во групп размещения)) * 60 мин * 24 ч * 365 дней * 0.001
* Точек данных для всех включенных метрик: ((3 * кол-во мониторов) + (7 * кол-во кластеров) + (13 * кол-во '''OSD''') + (9 * кол-во групп размещения)) * 60 мин * 24 ч * 365 дней


=== Информация О Совместимости ===
== Наборы функций ==
Среда с развернутым хранилищем Ceph.
При активации расширения с помощью '''конфигурации мониторинга''' вы можете ограничить мониторинг одним из наборов функций. Для корректной работы расширение должно собирать хотя бы одну метрику после активации. В сильно сегментированных сетях наборы функций могут отражать сегменты вашей среды. Затем, при создании конфигурации мониторинга, вы можете выбрать набор функций и соответствующую группу АктивныхШлюзов, которая может подключаться к этому конкретному сегменту. Все метрики, не отнесенные ни к одному набору функций, считаются заданными по умолчанию и всегда передаются. Метрика наследует набор функций подгруппы, которая, в свою очередь, наследует набор функций группы. Кроме того, набор функций, определенный на уровне метрики, переопределяет набор функций, определенный на уровне подгруппы, который, в свою очередь, переопределяет набор функций, определенный на уровне группы.


== Метрики ==
== pool ==
'''monState:'''
{| class="wikitable"
{| class="wikitable"
! colspan="1" |Имя
! colspan="1" |Ключ метрики
! colspan="1" |Единица
! colspan="1" |Описание
|-
|-
|Open Sessions
! Название метрики !! Ключ метрики !! Описание
|ceph_mon_num_sessions
|Count
|Количество открытых сеансов монитора
|-
|-
|Quorum
| Objects count || ceph_pool_objects || Количество объектов в пуле
|ceph_mon_quorum_status
|-
|Count
| Recovered objects || ceph_pool_num_objects_recovered || Количество восстановленных объектов в пуле
|Отслеживание демонов в кворуме
|-
| Recovered bytes || ceph_pool_num_bytes_recovered || Количество восстановленных байт в пуле
|-
| Pool objects quota || ceph_pool_quota_objects || Квота объектов, установленная для пула
|-
| Pool bytes quota || ceph_pool_quota_bytes || Квота байт, установленная для пула
|}
|}
'''OSDLatency:'''
 
== health ==
{| class="wikitable"
{| class="wikitable"
! colspan="1" |Имя
! colspan="1" |Ключ метрики
! colspan="1" |Единица
! colspan="1" |Описание
|-
|-
|OSD Apply Latency
! Название метрики !! Ключ метрики !! Описание
|ceph_osd_apply_latency_ms
|MilliSecond
|Задержка операции «apply» в OSD
|-
|-
|OSD Commit Latency
| Health status || ceph_health_status || Состояние здоровья кластера
|ceph_osd_commit_latency_ms
|MilliSecond
|Задержка операции «commit» в OSD
|-
|-
|Total OSD Write Latency
| Slow operations || ceph_healthcheck_slow_ops || Запросы '''OSD''' или монитора, обработка которых занимает много времени
|ceph_osd_op_w_latency_sum
|}
|MilliSecond
 
|Общая задержка операций «записи» в OSD
== osdLatency ==
{| class="wikitable"
|-
|-
|Total OSD Read Latency
! Название метрики !! Ключ метрики !! Описание
|ceph_osd_op_r_latency_sum
|-
|MilliSecond
| OSD apply latency || ceph_osd_apply_latency_ms || Задержка операции «применение» на '''OSD'''
|Общая задержка операций «чтения» в OSD
|-
| OSD commit latency || ceph_osd_commit_latency_ms || Задержка операции «фиксация» на '''OSD'''
|-
| OSD write latency sum || ceph_osd_op_w_latency_sum || Общая задержка операций «запись» на '''OSD'''
|-
| OSD read latency sum || ceph_osd_op_r_latency_sum || Общая задержка операций «чтение» на '''OSD'''
|}
|}
'''pool:'''
 
== osdOperations ==
{| class="wikitable"
{| class="wikitable"
! colspan="1" |Имя
! colspan="1" |Ключ метрики
! colspan="1" |Единица
! colspan="1" |Описание
|-
|-
|Objects Count
! Название метрики !! Ключ метрики !! Описание
|ceph_pool_objects
|-
|Count
| Bytes written || ceph_osd_op_w_in_bytes || Общий объем байт, записанных на '''OSD'''
|Количество объектов в пуле
|-
|-
|Objects Recovered
| Bytes read || ceph_osd_op_r_out_bytes || Общий объем байт, прочитанных с '''OSD'''
|ceph_pool_num_objects_recovered
|Count
|Количество восстановленных объектов в пуле
|-
|-
|Bytes Recovered
| Write operations || ceph_osd_op_w || Общее количество операций записи, выполненных на '''OSD'''
|ceph_pool_num_bytes_recovered
|Byte
|Количество восстановленных байтов в пуле
|-
|-
|Pool Objects Quota
| Read operations || ceph_osd_op_r || Общее количество операций чтения, выполненных на '''OSD'''
|ceph_pool_quota_objects
|Count
|Квота объекта для пула
|-
|-
|Pool Bytes Quota
| Recovery operations || ceph_osd_recovery_ops || Количество операций восстановления в '''OSD'''
|ceph_pool_quota_bytes
|Count
|Набор байтовых квот для пула
|}
|}
'''osdOperations:'''
 
== Placement Groups ==
{| class="wikitable"
{| class="wikitable"
! colspan="1" |Имя
! colspan="1" |Ключ метрики
! colspan="1" |Единица
! colspan="1" |Описание
|-
|-
|Bytes Written
! Название метрики !! Ключ метрики !! Описание
|ceph_osd_op_w_in_bytes
|-
|Byte
| PG active || ceph_pg_active || Группа размещения активна на пул
|Общая сумма байтов, записанных в OSD
|-
| PG down || ceph_pg_down || Группа размещения недоступна на пул
|-
| PG clean || ceph_pg_clean || Группа размещения чиста на пул
|-
|-
|Bytes Read
| PG backfill toofull || ceph_pg_backfill_toofull || Группа размещения переполнена на пул
|ceph_osd_op_r_out_bytes
|Byte
|Общая сумма байтов, прочитанных из OSD
|-
|-
|Write Operations
| PG degraded || ceph_pg_degraded || Группа размещения деградировала на пул
|ceph_osd_op_w
|Count
|Общая сумма операций записи, выполненных в OSD
|-
|-
|Read Operations
| PG failed repair || ceph_pg_failed_repair || Группа размещения с ошибкой восстановления на пул
|ceph_osd_op_r
|Count
|Общая сумма операций чтения, выполненных в OSD
|-
|-
|Recovery Operations
| PG incomplete || ceph_pg_incomplete || Группа размещения неполная на пул
|ceph_osd_recovery_ops
|-
|Count
| PG stale || ceph_pg_stale || Группа размещения устарела на пул
|Количество операций восстановления в OSD
|-
| PG inconsistent || ceph_pg_inconsistent || Группа размещения несогласованна на пул
|}
|}
'''osdState:'''
 
== default ==
{| class="wikitable"
{| class="wikitable"
! colspan="1" |Имя
! colspan="1" |Ключ метрики
! colspan="1" |Единица
! colspan="1" |Описание
|-
|-
|OSDs IN
! Название метрики !! Ключ метрики !! Описание
|ceph_osd_in
|Count
|Демоны хранилища в кластере
|-
|-
|OSDs UP
| Total capacity || ceph_cluster_total_bytes || Общая емкость кластера в байтах
|ceph_osd_up
|Count
|Демоны хранилища запущены
|-
|-
|Placement groups
| Used capacity || ceph_cluster_total_used_bytes || Использованная емкость кластера в байтах
|ceph_osd_numpg
|-
|Count
| Monitor metadata || ceph_mon_metadata || Метрика-заполнитель для получения измерений метаданных монитора от экспортера
|Группы размещения
|-
| OSD metadata || ceph_osd_metadata || Метрика-заполнитель для получения измерений метаданных '''OSD''' от экспортера
|}
|}


== Скриншоты ==
== osdState ==
[[Файл:ceph1.jpg]]
{| class="wikitable"
|-
! Название метрики !! Ключ метрики !! Описание
|-
| OSD in || ceph_osd_in || Демоны хранения в кластере
|-
| OSD up || ceph_osd_up || Демоны хранения запущены
|-
| Placement groups || ceph_osd_numpg || Группы размещения
|}


[[Файл:ceph2.jpg]]
== monState ==
{| class="wikitable"
|-
! Название метрики !! Ключ метрики !! Описание
|-
| Open sessions || ceph_mon_num_sessions || Количество открытых сессий монитора
|-
| Quorum status || ceph_mon_quorum_status || Демоны монитора в кворуме
|}

Версия от 18:20, 26 мая 2026

Расширение Ceph storage

Осуществляйте мониторинг использования распределенного хранилища Ceph, состояния OSD и производительности пулов на уровне клиента и хоста с помощью метрик Prometheus и информационных панелей.

Начало работы

Обзор

Отслеживайте использование системы хранения Ceph как на стороне клиента, так и на уровне хоста. Используйте расширение Ceph storage для:

  • Мониторинга использования и производительности вашей платформы Ceph.
  • Постоянного получения актуальной информации о ресурсах хоста и потоке данных.
  • Сокращения до минимума времени анализа, необходимого для выявления первопричины возможных системных сбоев.

Варианты использования

  • Мониторинг использования ресурсов хоста и уровней его емкости.
  • Сбор данных об активных и неактивных демонах объектного хранилища Ceph.
  • Наблюдение за потоком данных системы с точки зрения операций записи и чтения, как для кластера в целом, так и для отдельных OSD.

Требования

  • Хранилище Ceph, работающее в вашей среде.
  • Расширение активировано в вашей среде с помощью встроенного раздела Расширения.

Подробности

Лицензирование и стоимость

Расширение Ceph storage собирает пользовательские метрики, которые, в зависимости от вашей лицензионной модели, могут либо потреблять DDUs, либо учитываться как метрики в рамках вашей подписки на платформу Ключ-АСТРОМ. Ниже приведена формула для оценки потребления лицензии для этого расширения:

  • DDUs для всех включенных метрик: ((3 * кол-во мониторов) + (7 * кол-во кластеров) + (13 * кол-во OSD) + (9 * кол-во групп размещения)) * 60 мин * 24 ч * 365 дней * 0.001
  • Точек данных для всех включенных метрик: ((3 * кол-во мониторов) + (7 * кол-во кластеров) + (13 * кол-во OSD) + (9 * кол-во групп размещения)) * 60 мин * 24 ч * 365 дней

Наборы функций

При активации расширения с помощью конфигурации мониторинга вы можете ограничить мониторинг одним из наборов функций. Для корректной работы расширение должно собирать хотя бы одну метрику после активации. В сильно сегментированных сетях наборы функций могут отражать сегменты вашей среды. Затем, при создании конфигурации мониторинга, вы можете выбрать набор функций и соответствующую группу АктивныхШлюзов, которая может подключаться к этому конкретному сегменту. Все метрики, не отнесенные ни к одному набору функций, считаются заданными по умолчанию и всегда передаются. Метрика наследует набор функций подгруппы, которая, в свою очередь, наследует набор функций группы. Кроме того, набор функций, определенный на уровне метрики, переопределяет набор функций, определенный на уровне подгруппы, который, в свою очередь, переопределяет набор функций, определенный на уровне группы.

pool

Название метрики Ключ метрики Описание
Objects count ceph_pool_objects Количество объектов в пуле
Recovered objects ceph_pool_num_objects_recovered Количество восстановленных объектов в пуле
Recovered bytes ceph_pool_num_bytes_recovered Количество восстановленных байт в пуле
Pool objects quota ceph_pool_quota_objects Квота объектов, установленная для пула
Pool bytes quota ceph_pool_quota_bytes Квота байт, установленная для пула

health

Название метрики Ключ метрики Описание
Health status ceph_health_status Состояние здоровья кластера
Slow operations ceph_healthcheck_slow_ops Запросы OSD или монитора, обработка которых занимает много времени

osdLatency

Название метрики Ключ метрики Описание
OSD apply latency ceph_osd_apply_latency_ms Задержка операции «применение» на OSD
OSD commit latency ceph_osd_commit_latency_ms Задержка операции «фиксация» на OSD
OSD write latency sum ceph_osd_op_w_latency_sum Общая задержка операций «запись» на OSD
OSD read latency sum ceph_osd_op_r_latency_sum Общая задержка операций «чтение» на OSD

osdOperations

Название метрики Ключ метрики Описание
Bytes written ceph_osd_op_w_in_bytes Общий объем байт, записанных на OSD
Bytes read ceph_osd_op_r_out_bytes Общий объем байт, прочитанных с OSD
Write operations ceph_osd_op_w Общее количество операций записи, выполненных на OSD
Read operations ceph_osd_op_r Общее количество операций чтения, выполненных на OSD
Recovery operations ceph_osd_recovery_ops Количество операций восстановления в OSD

Placement Groups

Название метрики Ключ метрики Описание
PG active ceph_pg_active Группа размещения активна на пул
PG down ceph_pg_down Группа размещения недоступна на пул
PG clean ceph_pg_clean Группа размещения чиста на пул
PG backfill toofull ceph_pg_backfill_toofull Группа размещения переполнена на пул
PG degraded ceph_pg_degraded Группа размещения деградировала на пул
PG failed repair ceph_pg_failed_repair Группа размещения с ошибкой восстановления на пул
PG incomplete ceph_pg_incomplete Группа размещения неполная на пул
PG stale ceph_pg_stale Группа размещения устарела на пул
PG inconsistent ceph_pg_inconsistent Группа размещения несогласованна на пул

default

Название метрики Ключ метрики Описание
Total capacity ceph_cluster_total_bytes Общая емкость кластера в байтах
Used capacity ceph_cluster_total_used_bytes Использованная емкость кластера в байтах
Monitor metadata ceph_mon_metadata Метрика-заполнитель для получения измерений метаданных монитора от экспортера
OSD metadata ceph_osd_metadata Метрика-заполнитель для получения измерений метаданных OSD от экспортера

osdState

Название метрики Ключ метрики Описание
OSD in ceph_osd_in Демоны хранения в кластере
OSD up ceph_osd_up Демоны хранения запущены
Placement groups ceph_osd_numpg Группы размещения

monState

Название метрики Ключ метрики Описание
Open sessions ceph_mon_num_sessions Количество открытых сессий монитора
Quorum status ceph_mon_quorum_status Демоны монитора в кворуме
Источник — https://doc.ruscomtech.ru/index.php?title=Ceph&oldid=6388