home.social

#oncall — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #oncall, aggregated by home.social.

  1. I'm on-call all week. Got paged this afternoon. I went back to my home office and started checking. Processed the problem.

    In less than a minute, my wife is at the door, and she told me: I can hear from the music (you chose), that this incident will take a lot of time...

    Me, realising, I changed from my mindfulness, calming fantasy music playlist to hardcore techno/dubstep once I read the ticket. 🙈

    #Sysadmin #IT #oncall #incident

  2. I'm on-call all week. Got paged this afternoon. I went back to my home office and started checking. Processed the problem.

    In less than a minute, my wife is at the door, and she told me: I can hear from the music (you chose), that this incident will take a lot of time...

    Me, realising, I changed from my mindfulness, calming fantasy music playlist to hardcore techno/dubstep once I read the ticket. 🙈

    #Sysadmin #IT #oncall #incident

  3. I'm on-call all week. Got paged this afternoon. I went back to my home office and started checking. Processed the problem.

    In less than a minute, my wife is at the door, and she told me: I can hear from the music (you chose), that this incident will take a lot of time...

    Me, realising, I changed from my mindfulness, calming fantasy music playlist to hardcore techno/dubstep once I read the ticket. 🙈

    #Sysadmin #IT #oncall #incident

  4. I'm on-call all week. Got paged this afternoon. I went back to my home office and started checking. Processed the problem.

    In less than a minute, my wife is at the door, and she told me: I can hear from the music (you chose), that this incident will take a lot of time...

    Me, realising, I changed from my mindfulness, calming fantasy music playlist to hardcore techno/dubstep once I read the ticket. 🙈

    #Sysadmin #IT #oncall #incident

  5. I'm on-call all week. Got paged this afternoon. I went back to my home office and started checking. Processed the problem.

    In less than a minute, my wife is at the door, and she told me: I can hear from the music (you chose), that this incident will take a lot of time...

    Me, realising, I changed from my mindfulness, calming fantasy music playlist to hardcore techno/dubstep once I read the ticket. 🙈

    #Sysadmin #IT #oncall #incident

  6. SRE is about sleeping well 🌙

    The goal is not midnight heroics.
    It is building systems that fail safely so humans can rest.

    webdad.eu/2026/05/14/%f0%9f%98

  7. 🤖 Half your codebase was written by AI.
    👤 The other half by someone who left two years ago.

    Guess who's on-call when it breaks.

    New video on Rootly AI SRE - the partner that's got your back when prod goes down.

    🎬 youtu.be/79dXxpiFQtY

    #DevOps #SRE #IncidentResponse #AI #OnCall

  8. 🤖 Half your codebase was written by AI.
    👤 The other half by someone who left two years ago.

    Guess who's on-call when it breaks.

    New video on Rootly AI SRE - the partner that's got your back when prod goes down.

    🎬 youtu.be/79dXxpiFQtY

    #DevOps #SRE #IncidentResponse #AI #OnCall

  9. 🤖 Half your codebase was written by AI.
    👤 The other half by someone who left two years ago.

    Guess who's on-call when it breaks.

    New video on Rootly AI SRE - the partner that's got your back when prod goes down.

    🎬 youtu.be/79dXxpiFQtY

    #DevOps #SRE #IncidentResponse #AI #OnCall

  10. 🤖 Half your codebase was written by AI.
    👤 The other half by someone who left two years ago.

    Guess who's on-call when it breaks.

    New video on Rootly AI SRE - the partner that's got your back when prod goes down.

    🎬 youtu.be/79dXxpiFQtY

    #DevOps #SRE #IncidentResponse #AI #OnCall

  11. 🤖 Half your codebase was written by AI.
    👤 The other half by someone who left two years ago.

    Guess who's on-call when it breaks.

    New video on Rootly AI SRE - the partner that's got your back when prod goes down.

    🎬 youtu.be/79dXxpiFQtY

    #DevOps #SRE #IncidentResponse #AI #OnCall

  12. Как понять, что мониторинг в ЦОДе шумит

    Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

    habr.com/ru/companies/X5Tech/a

    #цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

  13. Как понять, что мониторинг в ЦОДе шумит

    Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

    habr.com/ru/companies/X5Tech/a

    #цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

  14. Как понять, что мониторинг в ЦОДе шумит

    Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

    habr.com/ru/companies/X5Tech/a

    #цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

  15. Как понять, что мониторинг в ЦОДе шумит

    Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

    habr.com/ru/companies/X5Tech/a

    #цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

  16. Who has two thumbs and is up at 3am because a Linux server's /boot partition's 95% utilization threshold was hit during a scheduled maintenance update?

    The guy! :blobcatthumbsup: :blobcatmeltthumb:

    #Linux #pagerduty #oncall

  17. Who has two thumbs and is up at 3am because a Linux server's /boot partition's 95% utilization threshold was hit during a scheduled maintenance update?

    The guy! :blobcatthumbsup: :blobcatmeltthumb:

  18. 🔥🤖 Relvy: Because who wouldn’t want their on-call #nightmares automated? Now, your runbooks can break by themselves! This is the future, folks: automating #chaos with a touch of #YC #magic. 🙃✨
    relvy.ai #Relvy #Automation #OnCall #HackerNews #ngated

  19. 🔥🤖 Relvy: Because who wouldn’t want their on-call #nightmares automated? Now, your runbooks can break by themselves! This is the future, folks: automating #chaos with a touch of #YC #magic. 🙃✨
    relvy.ai #Relvy #Automation #OnCall #HackerNews #ngated

  20. 🔥🤖 Relvy: Because who wouldn’t want their on-call #nightmares automated? Now, your runbooks can break by themselves! This is the future, folks: automating #chaos with a touch of #YC #magic. 🙃✨
    relvy.ai #Relvy #Automation #OnCall #HackerNews #ngated

  21. 🔥🤖 Relvy: Because who wouldn’t want their on-call #nightmares automated? Now, your runbooks can break by themselves! This is the future, folks: automating #chaos with a touch of #YC #magic. 🙃✨
    relvy.ai #Relvy #Automation #OnCall #HackerNews #ngated

  22. 🔥🤖 Relvy: Because who wouldn’t want their on-call #nightmares automated? Now, your runbooks can break by themselves! This is the future, folks: automating #chaos with a touch of #YC #magic. 🙃✨
    relvy.ai #Relvy #Automation #OnCall #HackerNews #ngated

  23. Nachdem ich in den letzten beiden Nächten wegen Alarmen zu wenig geschlafen habe, liege ich jetzt für meine Verhältnisse ungewöhnlich früh im Bett. 🥱

    #OnCall #Bereitschaftsdienst

  24. Nachdem ich in den letzten beiden Nächten wegen Alarmen zu wenig geschlafen habe, liege ich jetzt für meine Verhältnisse ungewöhnlich früh im Bett. 🥱

    #OnCall #Bereitschaftsdienst

  25. Nachdem ich in den letzten beiden Nächten wegen Alarmen zu wenig geschlafen habe, liege ich jetzt für meine Verhältnisse ungewöhnlich früh im Bett. 🥱

    #OnCall #Bereitschaftsdienst

  26. Nachdem ich in den letzten beiden Nächten wegen Alarmen zu wenig geschlafen habe, liege ich jetzt für meine Verhältnisse ungewöhnlich früh im Bett. 🥱

    #OnCall #Bereitschaftsdienst

  27. Nachdem ich in den letzten beiden Nächten wegen Alarmen zu wenig geschlafen habe, liege ich jetzt für meine Verhältnisse ungewöhnlich früh im Bett. 🥱

    #OnCall #Bereitschaftsdienst

  28. If your alerts fire every day, they’re burnt toast 🍞🚨
    Good alerts are rare, actionable, and tied to real user impact.

    webdad.eu/2026/03/12/%f0%9f%9a

  29. On-call isn’t firefighting.
    It’s babysitting a system that sometimes eats glue 👶💻
    Stability first. Fix later.

    webdad.eu/2026/03/05/%f0%9f%91

  30. The Register: "New boss took charge of project code and sent two billion unwanted emails." #OnCall #TechFails

    theregister.com/2025/10/24/on_

  31. The Register: "New boss took charge of project code and sent two billion unwanted emails." #OnCall #TechFails

    theregister.com/2025/10/24/on_

  32. The Register: "New boss took charge of project code and sent two billion unwanted emails." #OnCall #TechFails

    theregister.com/2025/10/24/on_