Страница телеграм канала DevOps News
DevOps News
1450 подписчиков
Новостной канал группы @devops_ru. Всё про DevOps, high availability, мониторинг, CI/CD, Docker и инфраструктуру См. также: @docker_ru, @devops_jobs, @agile_ru Есть чем поделиться? Пишите: @Civiloid
Входит в категории: Технологии
24.12.2020 11:12
Если кто-то не знает что посмотреть на праздниках, буквально недавно выложили много видео докладов с SREcon20 Americas: https://youtube.com/playlist?list=PLbRoZ5Rrl5lfLXUjFjS0mP1XzNzNZMhYN
И программа: https://www.usenix.org/conference/srecon20americas/program
#srecon #talks
29.08.2020 23:08
Свежая и достаточно объемная статья от Google о их текущей TSDB "Monarch".
12 страниц текста. 2 страницы "Related work". Много информации о языке запросов, схеме записей, храненнии, модели данных и т.п. Инетересно в первую очередь тем, кто строит с нуля свои системы хранения метрик.
http://www.vldb.org/pvldb/vol13/p3181-adams.pdf
#tsdb #google #monitoring #metrics
06.11.2019 16:11
Пересказ исследования о том, почему использовать файловую систему как backend для распределенного хранилища - не очень хорошая идея (на примере ceph).
В целом после SOSP19 колличество интересных статей значительно увеличилось.
https://blog.acolyer.org/2019/11/06/ceph-evolution/
#research #ceph #performance
02.02.2019 00:02
box опубликовал доклад о том, как они меряли пропускную способность Кафки. В статье описывается подход к автоматическому тестированию, к построению модели эксперимента и т.п.
https://blogs.box.com/tech/2019/01/finding-kafkas-throughput-limit-in-box-infrastructure/
#box #kafka #performance
31.10.2018 00:10
GitHub опубликовал postmortem про недавний (21 октября) инцидент из-за которогой pull requestы и issues были фактически недоступны более 24-х часов. Очень поучительная история про консесус, mysql и репликацию.
Ссылка: https://blog.github.com/2018-10-30-oct21-post-incident-analysis/
#github #postmortem
08.08.2018 09:08
Uber анонсировал свою time-series базу данных m3db, а также выложил в opensource read/write адаптер для Prometheus. Впрочем сам m3db лежал на гитхабе больше года, но с полным отсутствием документации (сейчас это исправлено).
Кластер m3db в убере содержит миллиарды уникальных серий и пишет десятки миллионов уникальных точек в секунду.
Подробности: https://eng.uber.com/m3/
#m3db #timeseries #tsdb #uber
27.07.2018 12:07
Для тех, кто считает что от всевозможных Spectre и Meltdown не нужно защищаться - исследователи из Graz University of Technology опубликовали пару страниц счастья с Proof Of Concept *remote* атакой на уязвимые к Spectre системы. Атака позволяет читать произвольные участки памяти, но к счастью, скорость чтения памяти очень низкая (единицы байт в час).
Подробности: https://misc0110.net/web/files/netspectre.pdf
#spectre #security #brokenbydesign
27.07.2018 00:07
Slack и Atlassian заключили "партнерское" соглашение. По его условиям Atlassian закроет Hipchat и Stride и предоставит способы миграции в Slack. Также Slackу достается (конечно за деньги) вся интеллектуальная собственность касающаяся Hipchatа и Strdieа. А в самом Slackе улучшится интеграция с Jira (Hosted и Cloud), Trello, Bitbucket и появится с Confluence.
Подробнее: https://slackhq.com/atlassian-and-slack-partnership
#slack #atlassian #hipchat
21.06.2018 09:06
О том как GitHub строит свои отказоустойчивые кластера MySQL рассказывают в своем последнем блог посте: https://githubengineering.com/mysql-high-availability-at-github/
#github #mysql #ha
12.06.2018 23:06
В блоге boxа опубликована статья про текущую архитектуру их хранилища (Magic Pocket). В процессе перехода от стандартных PMR[1] дисков к SMR[2] часть кода была переписана с Go на Rust, что позволило увеличить плотность сохранив потребление CPU и памяти на том же уровне.
Подробности по ссылке: https://blogs.box.com/tech/2018/06/extending-magic-pocket-innovation-with-the-first-petabyte-scale-smr-drive-deployment/
#box #storage #architecture
[1] https://en.wikipedia.org/wiki/Perpendicular_recording
[2] https://en.wikipedia.org/wiki/Shingled_magnetic_recording - например 10-14ТБ HGST
27.04.2018 10:04
В рамках USENIX Symposium on Networked Systems Design and Implementation 2018, проходившей в середине апреля, опубликованы некоторые подробности об устройстве сети в Google Cloud Platform. Может будет интересно просто посмотреть на подход к разработке изолированных высокопроизводительных сетей для облаков.
https://www.usenix.org/node/211244
Остальные доклады (без видео) также можно найти на сайте конференции: https://www.usenix.org/conference/nsdi18/glance
#usenix #network #cloud #andromeda
18.04.2018 12:04
почти реклама
17 мая (четверг) в дата центре селектел (Санкт-Петербург) пройдет митап посвященный мониторингу. Участие бесплатное. Есть онлайн трансляция (требуется предварительная регистрация).
https://eventuer.timepad.ru/event/702213/
#meetup #monitoring #spb
06.04.2018 10:04
Тем временем, amazon добавил возможность делать производные от уже имеющихся CloudWatch метрики. Функционал называется CloudWatch Metric Math и позволяет в том числе считать агрегаты от множества метрик.
https://aws.amazon.com/about-aws/whats-new/2018/04/amazon-cloudwatch-adds-metric-math-to-enable-custom-operations-on-metrics/
#aws #cloudwatch
02.04.2018 22:04
Хорошая статья о применимости разных алгоритмов хэширования в задаче балансировки нагрузки. Полезно будет понимать всем, кто пишет свои распределенные сервисы или балансировщики.
https://medium.com/@dgryski/consistent-hashing-algorithmic-tradeoffs-ef6b8e2fcae8
#hashing #balancing #distributes #highload
23.03.2018 00:03
У небезызвестного Brendan Greggа очередная статья про низкоуровневый дебаг в Linuxе. В этот раз про новую фичу Kernel 4.15 (которая расширилась в 4.16) - TCP Tracepoints. Они позволяют делать всякие разные интересные штуки - например следить за изменением состояния соединения, получать эвенты в момент ретрансмитов и так далее.
Подробнее по ссылке: http://www.brendangregg.com/blog/2018-03-22/tcp-tracepoints.html
#brendangregg #performance #tcp #linux #tracepoints