Мне интересно, есть ли способ подключить некоторые уведомления о заданиях, представленных в Dataproc. Мы планируем использовать Dataproc для запуска потокового приложения 24/7. Но у Dataproc, похоже, нет способа оповестить о неудачных работах.Как отправить уведомление о предупреждении о неудачной работе в Google Dataproc?
Просто интересно, может ли Google StackDriver использоваться любыми способами.
Благодаря Сурен
Конечно, StackDriver может быть использован для установки оповещения политики на определенный журнале метрики. Например, вы можете установить политику Metric Absence, которая будет отслеживать успешное завершение работы и оповещение, если оно отсутствует в течение определенного периода времени.
Перейти к Logging в консоли и установить фильтр:
resource.type="cloud_dataproc_cluster"
jsonPayload.message:"completed with exit code 0"
Нажмите на Создать метрические, после заполнения детали вы будете перенаправлены на страницу лог-метрики, где вы будете в состоянии для создания предупреждения из метрики