#runbook — Public Fediverse posts

Ваш Kubernetes упал: найдёте root cause за 15 минут?

Вторник, 14:00. Кластер Kubernetes перестал отвечать, команда в панике, а вам нужно за 15 минут найти первопричину. В этой статье пройдём диагностику реального отказа вместе с SRE: увидим логи, манифест etcd и ошибки, которые совершают даже опытные инженеры. Попробуйте сначала решить задачу сами, а потом сверьтесь с пошаговым разбором и проверьте, насколько вы готовы к такому инциденту.

https://habr.com/ru/companies/otus/articles/1031260/

#Kubernetes #etcd #kubelet #SRE #DevOps #productionинцидент #отказ_кластера #root_cause #control_plane #runbook

Ваш Kubernetes упал: найдёте root cause за 15 минут?

Вторник, 14:00. Кластер Kubernetes перестал отвечать, команда в панике, а вам нужно за 15 минут найти первопричину. В этой статье пройдём диагностику реального отказа вместе с SRE: увидим логи, манифест etcd и ошибки, которые совершают даже опытные инженеры. Попробуйте сначала решить задачу сами, а потом сверьтесь с пошаговым разбором и проверьте, насколько вы готовы к такому инциденту.

https://habr.com/ru/companies/otus/articles/1031260/

#Kubernetes #etcd #kubelet #SRE #DevOps #productionинцидент #отказ_кластера #root_cause #control_plane #runbook

Ваш Kubernetes упал: найдёте root cause за 15 минут?

Вторник, 14:00. Кластер Kubernetes перестал отвечать, команда в панике, а вам нужно за 15 минут найти первопричину. В этой статье пройдём диагностику реального отказа вместе с SRE: увидим логи, манифест etcd и ошибки, которые совершают даже опытные инженеры. Попробуйте сначала решить задачу сами, а потом сверьтесь с пошаговым разбором и проверьте, насколько вы готовы к такому инциденту.

https://habr.com/ru/companies/otus/articles/1031260/

#Kubernetes #etcd #kubelet #SRE #DevOps #productionинцидент #отказ_кластера #root_cause #control_plane #runbook

Ваш Kubernetes упал: найдёте root cause за 15 минут?

Вторник, 14:00. Кластер Kubernetes перестал отвечать, команда в панике, а вам нужно за 15 минут найти первопричину. В этой статье пройдём диагностику реального отказа вместе с SRE: увидим логи, манифест etcd и ошибки, которые совершают даже опытные инженеры. Попробуйте сначала решить задачу сами, а потом сверьтесь с пошаговым разбором и проверьте, насколько вы готовы к такому инциденту.

https://habr.com/ru/companies/otus/articles/1031260/

#Kubernetes #etcd #kubelet #SRE #DevOps #productionинцидент #отказ_кластера #root_cause #control_plane #runbook

Как понять, что мониторинг в ЦОДе шумит

Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

https://habr.com/ru/companies/X5Tech/articles/1027518/

#цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

Как понять, что мониторинг в ЦОДе шумит

Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

https://habr.com/ru/companies/X5Tech/articles/1027518/

#цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

Как понять, что мониторинг в ЦОДе шумит

Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

https://habr.com/ru/companies/X5Tech/articles/1027518/

#цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

Как понять, что мониторинг в ЦОДе шумит

Днём на работе вокруг всегда коллеги, созвоны, обсуждения в чатах. Если что-то непонятно, можно быстро спросить совета у более опытных инженеров. Ночью всё по-другому. Дежурный остаётся один на один с системой оповещений, и разбираться приходится самостоятельно. Наверное, поэтому одна из самых странных вещей в мониторинге проявляется именно ночью. На одном из дежурств мне за несколько часов пришло больше десятка уведомлений. То температура в стойке подскочила на пару градусов. То CPU неожиданно преодолел порог. То один из дисков выдал предупреждение SMART. Конечно, я проверял каждый сигнал, смотрел графики, открывал логи и переключался между дашбордами. Но метрики и без этого возвращались к исходным значениям, и всё продолжало работать как обычно. К утру инфраструктура так и не полыхнула синим пламенем, зато система оповещений просто разрывалась. Так я впервые узнал об «усталости от алертов» и начал искать способ справиться с этой проблемой.

https://habr.com/ru/companies/X5Tech/articles/1027518/

#цод #мониторинг #алертинг #oncall #дежурства #инфраструктура #runbook #инциденты #резервирование #latency

Инфраструктура не знает, что сегодня праздник

Согласитесь, что встретить Новый год рядом с семьёй и друзьями - намного приятнее, чем сидеть за ноутбуком в 02:40 и с квадратными глазами разбираться, почему “что-то там легло”, а доступ к нужным секретам остался только у одного человека… который как раз в этот момент режет оливье и не слышит телефон. Ниже я делюсь своим чеклистом из 8 пунктов. Он помогает спокойно уйти в праздники и не проводить их в обнимку с ноутом. А после прочтения, в комментах, обязательно поделитесь что бы вы еще добавили.

https://habr.com/ru/articles/980340/

#sre #oncall #devops #checklist #production #infrastucture #monitoring #dns #runbook

Atuin’s New Runbook Execution Engine

https://blog.atuin.sh/introducing-the-new-runbook-execution-engine/

#HackerNews #Atuin #Runbook #Execution #Engine #Automation #Tech #News

Atuin Desktop is in open beta now! 🎉

Run books that actually run, built by @ellie and @binarymuse

I’ve been using it for a while in closed beta and can’t wait to get my team on it as well! :D

Big up to all involved!

https://blog.atuin.sh/atuin-desktop-open-source/

#ops #runbook #oncall #sre

Как работать с инцидентами, когда на кону большие деньги

Привет, Хабр! На связи Дарья Попова, тимлид группы мониторинга в Купере. Наша миссия — минимизировать потери от инцидентов для компании и обеспечить сервис на 10/10 для клиентов. Почему это именно группа — вы поймете дальше. Сегодня я расскажу, как мы выстраивали процессы и инструменты мониторинга и автоматизации — и как это все упростило нам жизнь.

https://habr.com/ru/companies/kuper/articles/928632/

#алертинг #инцидентменеджмент #автоматизация_рутины #бот #оповещение_об_аварии #метрики_процесса #runbook #критичные_сервисы #дежурные_инженеры #мониторинг

Как работать с инцидентами, когда на кону большие деньги

Привет, Хабр! На связи Дарья Попова, тимлид группы мониторинга в Купере. Наша миссия — минимизировать потери от инцидентов для компании и обеспечить сервис на 10/10 для клиентов. Почему это именно группа — вы поймете дальше. Сегодня я расскажу, как мы выстраивали процессы и инструменты мониторинга и автоматизации — и как это все упростило нам жизнь.

https://habr.com/ru/companies/kuper/articles/928632/

#алертинг #инцидентменеджмент #автоматизация_рутины #бот #оповещение_об_аварии #метрики_процесса #runbook #критичные_сервисы #дежурные_инженеры #мониторинг

Как работать с инцидентами, когда на кону большие деньги

Привет, Хабр! На связи Дарья Попова, тимлид группы мониторинга в Купере. Наша миссия — минимизировать потери от инцидентов для компании и обеспечить сервис на 10/10 для клиентов. Почему это именно группа — вы поймете дальше. Сегодня я расскажу, как мы выстраивали процессы и инструменты мониторинга и автоматизации — и как это все упростило нам жизнь.

https://habr.com/ru/companies/kuper/articles/928632/

#алертинг #инцидентменеджмент #автоматизация_рутины #бот #оповещение_об_аварии #метрики_процесса #runbook #критичные_сервисы #дежурные_инженеры #мониторинг

Как работать с инцидентами, когда на кону большие деньги

Привет, Хабр! На связи Дарья Попова, тимлид группы мониторинга в Купере. Наша миссия — минимизировать потери от инцидентов для компании и обеспечить сервис на 10/10 для клиентов. Почему это именно группа — вы поймете дальше. Сегодня я расскажу, как мы выстраивали процессы и инструменты мониторинга и автоматизации — и как это все упростило нам жизнь.

https://habr.com/ru/companies/kuper/articles/928632/

#алертинг #инцидентменеджмент #автоматизация_рутины #бот #оповещение_об_аварии #метрики_процесса #runbook #критичные_сервисы #дежурные_инженеры #мониторинг

SSM Automation Runbook “AWSSupport-TroubleshootManagedInstance” をやってみた
https://dev.classmethod.jp/articles/ssm-automation-runbook-support-troubleshoot-managedinstance/

#dev_classmethod #AWS_Systems_Manager_Automation #Runbook #AWS

We updated our #DataTableRenderers 🈸 / 🈷️ for Jupyter in #VSCode #DataNotebooks 📚:

📥 https://marketplace.visualstudio.com/items?itemName=RandomFractalsInc.vscode-data-table

Use them to view your #DataNotebook 📓 tabular data outputs, data summary, and #FlatDataGrid 中 with column header stats.

Also, see new #Runme markdown #runbook demo:

🧐 https://github.com/RandomFractals/vscode-data-table#runme-notebook-example

#ProDataTools 🧙‍♂️ ...

We updated our #DataTableRenderers 🈸 / 🈷️ for Jupyter in #VSCode #DataNotebooks 📚:

📥 https://marketplace.visualstudio.com/items?itemName=RandomFractalsInc.vscode-data-table

Use them to view your #DataNotebook 📓 tabular data outputs, data summary, and #FlatDataGrid 中 with column header stats.

Also, see new #Runme markdown #runbook demo:

🧐 https://github.com/RandomFractals/vscode-data-table#runme-notebook-example

#ProDataTools 🧙‍♂️ ...

We updated our #DataTableRenderers 🈸 / 🈷️ for Jupyter in #VSCode #DataNotebooks 📚:

📥 https://marketplace.visualstudio.com/items?itemName=RandomFractalsInc.vscode-data-table

Use them to view your #DataNotebook 📓 tabular data outputs, data summary, and #FlatDataGrid 中 with column header stats.

Also, see new #Runme markdown #runbook demo:

🧐 https://github.com/RandomFractals/vscode-data-table#runme-notebook-example

#ProDataTools 🧙‍♂️ ...

We updated our #DataTableRenderers 🈸 / 🈷️ for Jupyter in #VSCode #DataNotebooks 📚:

📥 https://marketplace.visualstudio.com/items?itemName=RandomFractalsInc.vscode-data-table

Use them to view your #DataNotebook 📓 tabular data outputs, data summary, and #FlatDataGrid 中 with column header stats.

Also, see new #Runme markdown #runbook demo:

🧐 https://github.com/RandomFractals/vscode-data-table#runme-notebook-example

#ProDataTools 🧙‍♂️ ...

We updated our #DataTableRenderers 🈸 / 🈷️ for Jupyter in #VSCode #DataNotebooks 📚:

📥 https://marketplace.visualstudio.com/items?itemName=RandomFractalsInc.vscode-data-table

Use them to view your #DataNotebook 📓 tabular data outputs, data summary, and #FlatDataGrid 中 with column header stats.

Also, see new #Runme markdown #runbook demo:

🧐 https://github.com/RandomFractals/vscode-data-table#runme-notebook-example

#ProDataTools 🧙‍♂️ ...

Now this is super neat! Not many #devTools 🛠️ have a browser extension that hooks into your @code blocks in markdown docs open in a browser for any given GitHub repo.

Discovered it as we were browsing the other related @statefulhq #Runbook 📓 repos code.

What a great way to bootstrap repo cloning & kick off other tasks from your browser in VS Code.

Very cool & thoughtful #Runme ▶️ tools browser plugin created by @bromann @runmedev:

💖 https://github.com/stateful/runme-web-extension

Now this is super neat! Not many #devTools 🛠️ have a browser extension that hooks into your @code blocks in markdown docs open in a browser for any given GitHub repo.

Discovered it as we were browsing the other related @statefulhq #Runbook 📓 repos code.

What a great way to bootstrap repo cloning & kick off other tasks from your browser in VS Code.

Very cool & thoughtful #Runme ▶️ tools browser plugin created by @bromann @runmedev:

💖 https://github.com/stateful/runme-web-extension

Now this is super neat! Not many #devTools 🛠️ have a browser extension that hooks into your @code blocks in markdown docs open in a browser for any given GitHub repo.

Discovered it as we were browsing the other related @statefulhq #Runbook 📓 repos code.

What a great way to bootstrap repo cloning & kick off other tasks from your browser in VS Code.

Very cool & thoughtful #Runme ▶️ tools browser plugin created by @bromann @runmedev:

💖 https://github.com/stateful/runme-web-extension

Now this is super neat! Not many #devTools 🛠️ have a browser extension that hooks into your @code blocks in markdown docs open in a browser for any given GitHub repo.

Discovered it as we were browsing the other related @statefulhq #Runbook 📓 repos code.

What a great way to bootstrap repo cloning & kick off other tasks from your browser in VS Code.

Very cool & thoughtful #Runme ▶️ tools browser plugin created by @bromann @runmedev:

💖 https://github.com/stateful/runme-web-extension

Now this is super neat! Not many #devTools 🛠️ have a browser extension that hooks into your @code blocks in markdown docs open in a browser for any given GitHub repo.

Discovered it as we were browsing the other related @statefulhq #Runbook 📓 repos code.

What a great way to bootstrap repo cloning & kick off other tasks from your browser in VS Code.

Very cool & thoughtful #Runme ▶️ tools browser plugin created by @bromann @runmedev:

💖 https://github.com/stateful/runme-web-extension

Quick demo of using simple curl command with @runmedev ▶️ #Runbook 📓, our #DataTableRenderers 🈸 & #LeafletMap 🗺️ renderer to view world lakes in 1 line of code:

curl -s "https://raw.githubusercontent.com/RandomFractals/vscode-data-table/main/data/world-lakes.geojson"

#dataNotebooks 📚 🧙‍♂️ ...

Quick demo of using simple curl command with @runmedev ▶️ #Runbook 📓, our #DataTableRenderers 🈸 & #LeafletMap 🗺️ renderer to view world lakes in 1 line of code:

curl -s "https://raw.githubusercontent.com/RandomFractals/vscode-data-table/main/data/world-lakes.geojson"

#dataNotebooks 📚 🧙‍♂️ ...

Quick demo of using simple curl command with @runmedev ▶️ #Runbook 📓, our #DataTableRenderers 🈸 & #LeafletMap 🗺️ renderer to view world lakes in 1 line of code:

curl -s "https://raw.githubusercontent.com/RandomFractals/vscode-data-table/main/data/world-lakes.geojson"

#dataNotebooks 📚 🧙‍♂️ ...

Quick demo of using simple curl command with @runmedev ▶️ #Runbook 📓, our #DataTableRenderers 🈸 & #LeafletMap 🗺️ renderer to view world lakes in 1 line of code:

curl -s "https://raw.githubusercontent.com/RandomFractals/vscode-data-table/main/data/world-lakes.geojson"

#dataNotebooks 📚 🧙‍♂️ ...

Quick demo of using simple curl command with @runmedev ▶️ #Runbook 📓, our #DataTableRenderers 🈸 & #LeafletMap 🗺️ renderer to view world lakes in 1 line of code:

curl -s "https://raw.githubusercontent.com/RandomFractals/vscode-data-table/main/data/world-lakes.geojson"

#dataNotebooks 📚 🧙‍♂️ ...

Runme is a great new notebook approach to run scripts from markdown docs with CLI integration and multi-language support every dev and data scientist should try in #VSCode.

With #Runme versatile notebook kernel, CLI interop, and shared #Runbook session state you can now make your docs truly interactive.

Give your markdown docs new #Runnable lifespan and get creative with your fenced code outputs. You'll never just read the Intro and README docs.

#codeNotebooks 📚 ...

https://docs.runme.dev/

Runme is a great new notebook approach to run scripts from markdown docs with CLI integration and multi-language support every dev and data scientist should try in #VSCode.

With #Runme versatile notebook kernel, CLI interop, and shared #Runbook session state you can now make your docs truly interactive.

Give your markdown docs new #Runnable lifespan and get creative with your fenced code outputs. You'll never just read the Intro and README docs.

#codeNotebooks 📚 ...

https://docs.runme.dev/

Runme is a great new notebook approach to run scripts from markdown docs with CLI integration and multi-language support every dev and data scientist should try in #VSCode.

With #Runme versatile notebook kernel, CLI interop, and shared #Runbook session state you can now make your docs truly interactive.

Give your markdown docs new #Runnable lifespan and get creative with your fenced code outputs. You'll never just read the Intro and README docs.

#codeNotebooks 📚 ...

https://docs.runme.dev/

Runme is a great new notebook approach to run scripts from markdown docs with CLI integration and multi-language support every dev and data scientist should try in #VSCode.

With #Runme versatile notebook kernel, CLI interop, and shared #Runbook session state you can now make your docs truly interactive.

Give your markdown docs new #Runnable lifespan and get creative with your fenced code outputs. You'll never just read the Intro and README docs.

#codeNotebooks 📚 ...

https://docs.runme.dev/

Runme is a great new notebook approach to run scripts from markdown docs with CLI integration and multi-language support every dev and data scientist should try in #VSCode.

With #Runme versatile notebook kernel, CLI interop, and shared #Runbook session state you can now make your docs truly interactive.

Give your markdown docs new #Runnable lifespan and get creative with your fenced code outputs. You'll never just read the Intro and README docs.

#codeNotebooks 📚 ...

https://docs.runme.dev/

I recently came across https://runme.dev/ and created a small #blog post about it. Enjoy!
https://blog.9wd.eu/posts/runme-readme/
#devops #readme #runbook #markdown

#GitHub - derwiki/layoff-runbook: Being laid off can be #overwhelming and it's easy to miss important tasks. This #runbook will help make sure you stay on track.

https://github.com/derwiki/layoff-runbook

Azure Automation – PowerShell ile Azure AD üzerinde otomatik kullanıcı ve kaynak grubu oluşturma
https://www.talhaturan.com/azure-automation-powershell-ile-azure-ad-uzerinde-otomatik-kullanici-ve-kaynak-grubu-olusturma/
#automation #azure #bulut #cloud #kullanıcı #powershell #resource-group #runbook #script #user

Azure Automation – PowerShell ile Azure AD üzerinde otomatik kullanıcı ve kaynak grubu oluşturma
https://www.talhaturan.com/azure-automation-powershell-ile-azure-ad-uzerinde-otomatik-kullanici-ve-kaynak-grubu-olusturma/
#automation #azure #bulut #cloud #kullanıcı #powershell #resource-group #runbook #script #user

A teammate showed me today that GitLab publishes their runbook and security handbook.

That is impressive and serves as a great reference example.

#documentation #runbook #handbook #GRC

What makes a good #runbook?

https://www.transposit.com/blog/2019.11.14-what-makes-a-good-runbook/

I worked with runbooks at one of my previous jobs and it's really good, even for yourself (can you remember what you did 6 months ago to fix that problem?)