Repository navigation
Conversation
Codecov Report❌ Patch coverage is Additional details and impacted files@@ Coverage Diff @@
## main #932 +/- ##
==========================================
+ Coverage 82.69% 83.03% +0.34%
==========================================
Files 99 99
Lines 12954 13373 +419
Branches 1266 1331 +65
==========================================
+ Hits 10712 11104 +392
- Misses 1790 1802 +12
- Partials 452 467 +15
Flags with carried forward coverage won't be shown. Click here to find out more.
🚀 New features to boost your workflow:
|
vgvoleg
left a comment
There was a problem hiding this comment.
Замечание к накладным расходам при выключенных метриках.
| return self._stream_reader.receive_message_nowait() | ||
| message = self._stream_reader.receive_message_nowait() | ||
| if message is not None: | ||
| self._metrics.record_delivered_messages( |
There was a problem hiding this comment.
Даже если метрики никогда не включались, выдача каждого сообщения теперь вызывает remove_local_buffer_messages() в ReaderStream и record_delivered_messages() здесь, включая вычисление аргументов. На транзакционном пути дополнительно обходятся диапазоны перед commit, а после успешного commit снова создаются объекты диапазонов исключительно ради метрик.
Таймеры и блокировки на изначально выключенном пути пропускаются, но no-op методы оставляют накладные расходы вызовов и обходов. В изолированном микробенче выдачи по одному сообщению из батча 100 время выросло примерно с 0,35 до 0,45 мкс на сообщение. Это CPU-путь без gRPC и сервера, а не оценка общей пропускной способности.
Учёт следует пропускать до вычисления аргументов и дополнительных обходов, когда инструментации нет. Учёт выдачи и уменьшение буфера можно объединить в одну операцию метрик, чтобы проверка оставалась на уровне целого блока.
Pull request type
What is the current behavior?
The Python SDK does not provide metrics for topic readers.
What is the new behavior?
Added the following topic reader metrics:
ydb.topic.reader.received.messagesydb.topic.reader.received.bytesydb.topic.reader.delivered.messagesydb.topic.reader.local_buffer.messagesydb.topic.reader.local_buffer.message_age.maxydb.topic.reader.partition_session.countMetrics are collected for readers with an explicitly configured
reader_name.Other information
Added unit tests, documentation, and an OpenTelemetry example.