Рубрика «Анализ и проектирование систем» - 52

Ceph. Анатомия катастрофы

2018-11-29 в 16:43, admin, рубрики: ceph, devops, Анализ и проектирование систем, Блог компании Конференции Олега Бунина (Онтико), высокая производительность, Серверное администрирование

Ceph — это object storage, призванный помочь построить отказоустойчивый кластер. И все-таки отказы случаются. Все, кто работает с Ceph, знают легенду о CloudMouse или Росреестре. К сожалению, делиться отрицательным опытом у нас не принято, причины провалов чаще всего замалчивают, и не дают будущим поколениям научиться на чужих ошибках.

Что ж, настроим тестовый, но близкий к реальному кластер и разберем катастрофу по косточкам. Измерим все просадки производительности, найдем утечки памяти, разберем процесс восстановления обслуживания. И все это под руководством Артемия Капитулы, который потратив почти год на изучение подводных камней, заставил при отказе производительность кластера не падать в ноль, и latency не подскакивать до неприличных значений. И получил красный график, который ну сильно лучше.
Ceph. Анатомия катастрофы - 1

Далее вы найдете видео и текстовую версию одного из лучших докладов DevOpsConf Russia 2018.

Читать полностью »

Оптимальная температура в доме или как установить термостат в дальней комнате без проводов

2018-11-28 в 17:00, admin, рубрики: avr, DIY, diy или сделай сам, SI4432, Анализ и проектирование систем, Разработка под Arduino, термостат, умный дом, энергосбережение

Для многих далеко не секрет, что такие устройства как недельные термостаты помогают обеспечить оптимальную комнатную температуру в доме к тому же с экономией энергоресурсов, затрачиваемых на обогрев. Для корректной работы устройства его обычно размещают в самой дальней комнате, где наименьшая температура. Но большинство термостатов предполагают проводное подключение к котлу для управления и далеко не всегда есть возможность эти провода проложить. О решении подобной проблемы и пойдет речь в данной статье. Всем, кому интересно прошу под кат…
Читать полностью »

SDK тебе, SDK мне, SDK всем! Как делать SDK и зачем это нужно

2018-11-28 в 2:31, admin, рубрики: .net, SDK, Анализ и проектирование систем, архитектура, оптимизация, Программирование, Промышленное программирование

SDK тебе, SDK мне, SDK всем! Как делать SDK и зачем это нужно - 1

Всем привет!

Наша компания делает сервис для хранения и обработки данных с промышленных устройств (насосы, буры и прочая промышленная техника). Мы храним данные наших клиентов и предоставляем функционал для их анализа: построение отчетов, графиков и еще много чего.

И в ходе работы мы заметили, что интеграция каждого нового клиента сильно затягивается, а количество различных ошибок постоянно возрастает. Тогда стало понятно, что пора с этим разобраться. Как показал анализ ситуации, IT отдел каждого нашего клиента разрабатывал свое решение для локального сбора данных с устройств и отправки к нам в сервис. Все усложняет то, что с учетом специфики отрасли, не всегда есть доступ к интернету и необходимо хранить данные локально и отправлять при первой возможности. И таких нюансов достаточно большое количество, что и приводит к росту количества ошибок.

И тогда мы поняли, что лучшим решением в данной ситуации будет разработать SDK и предоставлять его клиенту. Сразу же начал искать лучшие практики и рассуждения на тему разработки SDK и сильно удивился — в рунете об этом практически ничего нет, а в басурманских интернетах очень мало информации и она разрознена. Ну что ж, задача понятна, обдумана и реализована.

Но именно отсутствие информации на данную тему породило желание рассказать сообществу о размышлениях, принятых решениях и выводах на тему разработки SDK. В статье рассматривается решение для .NET, но речь идет о концепции, так что будет интересно многим. Подробности под катом!

Читать полностью »

Курс MIT «Безопасность компьютерных систем». Лекция 19: «Анонимные сети», часть 1 (лекция от создателя сети Tor)

2018-11-27 в 16:32, admin, рубрики: TLS, Tor, Анализ и проектирование систем, анонимность, анонимные сети, Блог компании ua-hosting.company, информационная безопасность, конфиденциальность, Программирование, шифрование

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Computer Systems Security — это курс о разработке и внедрении защищенных компьютерных систем. Лекции охватывают модели угроз, атаки, которые ставят под угрозу безопасность, и методы обеспечения безопасности на основе последних научных работ. Темы включают в себя безопасность операционной системы (ОС), возможности, управление потоками информации, языковую безопасность, сетевые протоколы, аппаратную защиту и безопасность в веб-приложениях.

Лекция 1: «Вступление: модели угроз» Часть 1 / Часть 2 / Часть 3
Лекция 2: «Контроль хакерских атак» Часть 1 / Часть 2 / Часть 3
Лекция 3: «Переполнение буфера: эксплойты и защита» Часть 1 / Часть 2 / Часть 3
Лекция 4: «Разделение привилегий» Часть 1 / Часть 2 / Часть 3
Лекция 5: «Откуда берутся ошибки систем безопасности» Часть 1 / Часть 2
Лекция 6: «Возможности» Часть 1 / Часть 2 / Часть 3
Лекция 7: «Песочница Native Client» Часть 1 / Часть 2 / Часть 3
Лекция 8: «Модель сетевой безопасности» Часть 1 / Часть 2 / Часть 3
Лекция 9: «Безопасность Web-приложений» Часть 1 / Часть 2 / Часть 3
Лекция 10: «Символьное выполнение» Часть 1 / Часть 2 / Часть 3
Лекция 11: «Язык программирования Ur/Web» Часть 1 / Часть 2 / Часть 3
Лекция 12: «Сетевая безопасность» Часть 1 / Часть 2 / Часть 3
Лекция 13: «Сетевые протоколы» Часть 1 / Часть 2 / Часть 3
Лекция 14: «SSL и HTTPS» Часть 1 / Часть 2 / Часть 3
Лекция 15: «Медицинское программное обеспечение» Часть 1 / Часть 2 / Часть 3
Лекция 16: «Атаки через побочный канал» Часть 1 / Часть 2 / Часть 3
Лекция 17: «Аутентификация пользователя» Часть 1 / Часть 2 / Часть 3
Лекция 18: «Частный просмотр интернета» Часть 1 / Часть 2 / Часть 3
Лекция 19: «Анонимные сети» Часть 1 / Часть 2 / Часть 3 Читать полностью »

Как это устроено: работа команды аналитиков на примере разработки одного digital-сервиса

2018-11-27 в 15:00, admin, рубрики: Анализ и проектирование систем, аналитика, Блог компании Rookee.ru, Управление продуктом, управление проектами

Кто все эти люди?

Профессия аналитика – одна из самых востребованных в мире. По словам директора рекрутингового агентства Pruffi, Алены Владимирской, бизнес-аналитики и все, кто занимается оптимизацией, внедрением новых бизнес-процессов, сегодня очень востребованы и высокооплачиваемы.

Современные аналитики – это уникальные люди, сочетающие в себе самые разные качества: от технических до менеджерских. Но самое главное условие вхождения в эту профессию – способность к аналитическому мышлению, которая позволяет принимать эффективные решения на основе собранной информации, дополненная развитыми коммуникативными навыками для получения этой самой информации. Иногда эти функции выполняются не одним, а несколькими людьми, работающими совместно.

О том, как это выглядит на практике и насколько разными бывают аналитические задачи даже внутри одного сервиса, рассказал Олег Сахно, руководитель направления исследований Rookee.
Читать полностью »

«Весь мир – анализ» или «Анализируй это»

2018-11-22 в 19:31, admin, рубрики: Анализ и проектирование систем, бизнес-модели, Развитие стартапа, Управление продуктом

Бизнес-анализ нужен нам практически в каждый момент нашей жизни: когда мы продумываем туристическую поездку, совершаем покупки, даже когда по утрам заводим автомобиль. Не верите? А я докажу.

Каждое взаимодействие с внешним миром, по сути, не что иное, как набор пользовательских историй (они же User Story).

Как человек, располагающий двухнедельным оплачиваемым отпуском, я хочу съездить в туристическую поездку на неделю для того, чтобы получить новые впечатления и «перезагрузить голову» для дальнейшей плодотворной работы.
Как человек, любящий пиво и готическую архитектуру, я хочу побывать в Праге для того, чтобы вкусить лучшее в мире пиво и осмотреть собор Святого Витта.

Или

Как человек, любящий единство с природой и восточную философию, я хочу посетить Тайланд для того, чтобы сбросить усталость от работы и городской жизни, поесть фруктов, искупаться в море и помедитировать.

Или почти бесконечность своих вариантов.

Как бережливый человек, я хочу потратить на поездку минимальные деньги при приемлемом уровне удобств и услуг для того, чтобы сэкономить деньги на другие поездки и скудное пропитание.

А дальше начинаются сценарии использования (они же Use Cases), крупные и мелкие, детализированные и нет:

Пользователь подсчитывает свои средства на поездку;

Пользователь определяется со способом поездки – через турагентство или своим ходом;

Пользователь осуществляет подбор наиболее дешевых вариантов покупки тура (или билетов/отеля/дома)

...

Читать полностью »

Нечеткая логика против ПИД. Скрещиваем ежа и ужа. Авиадвигатель и алгоритмы управления АЭС

2018-11-20 в 5:39, admin, рубрики: Matlab, Алгоритмы, Анализ и проектирование систем, АЭС, инженерные расчеты, математика, математическое моделирование, нечеткая логика, пид-регулятор, Промышленное программирование, сапр, Системная инженерия, турбореактивный двигатель

Наверное, у каждого, кто изучал теорию автоматического управления, в душе не раз появлялись сомнения, каким образом эти два, три или даже десять квадратиков передаточных функций в модели, представляют собой динамику сложного агрегата, типа ядерного реактора или авиационного двигателя. Нет ли здесь обмана? Возможно то, что работает с простыми моделями перестанет работать со сложными моделями и в «реальной» жизни.

В этой статье мы будем экспериментировать с «настоящей» моделью авиационного двигателя. Обвесив ее «реальными» моделями аппаратуры и алгоритмов управления от атомной станции.

Изначально модель была написана на фортране и предназначена для каких-то высоконаучных целей, связанных с системами управления двигателями. Эту модель нам передали в качестве примера и наша задача заключалась в том, чтобы повторить модель в структурном виде и доказать, что она совпадает с исходной. Что и было сделано.

Как только модель превратилась из листинга Fortran в структурную схему, с ней стало просто и удобно работать, проводя любые, самые «изощренные» эксперименты. Совершенно не случайно у меня оказались реальные алгоритмы управления АЭС. Что позволило быстро собрать модель для экспериментов, не используя при этом никаких формул, да да, только картинки.
Нечеткая логика против ПИД. Скрещиваем ежа и ужа. Авиадвигатель и алгоритмы управления АЭС - 1
Читать полностью »

Chain replication: построение эффективного KV-хранилища (часть 1-2)

2018-11-19 в 11:26, admin, рубрики: algorithms, Chain replication, CRAQ, design, Distributed Databases, Eventual consistency, fault tolerance, FAWN, FAWN-DS, FAWN-KV, Geo-replication, Hibari, HyperDex, key-value store, nosql, reliability, Strong consistency, Алгоритмы, Анализ и проектирование систем, математика, Программирование, распределенные системы

В данной статье рассмотрим архитектуры простых и эффективных KV-хранилищ с использованием цепной репликации (chain replication), которая активно исследуется и успешно применяется в различных системах.
Читать полностью »

Курс MIT «Безопасность компьютерных систем». Лекция 18: «Частный просмотр интернета», часть 2

2018-11-19 в 8:06, admin, рубрики: Анализ и проектирование систем, Блог компании ua-hosting.company, информационная безопасность, Программирование, Частный просмотр

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Курс MIT «Безопасность компьютерных систем». Лекция 18: «Частный просмотр интернета», часть 1

2018-11-18 в 7:03, admin, рубрики: Анализ и проектирование систем, Блог компании ua-hosting.company, информационная безопасность, приватный просмотр, Программирование, Частный просмотр

Информация

Обсуждаемое

Рекомендуем

Рубрика «Анализ и проектирование систем» - 52

Ceph. Анатомия катастрофы

Оптимальная температура в доме или как установить термостат в дальней комнате без проводов

SDK тебе, SDK мне, SDK всем! Как делать SDK и зачем это нужно

Курс MIT «Безопасность компьютерных систем». Лекция 19: «Анонимные сети», часть 1 (лекция от создателя сети Tor)

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Как это устроено: работа команды аналитиков на примере разработки одного digital-сервиса

«Весь мир – анализ» или «Анализируй это»

Нечеткая логика против ПИД. Скрещиваем ежа и ужа. Авиадвигатель и алгоритмы управления АЭС

Chain replication: построение эффективного KV-хранилища (часть 1-2)

Курс MIT «Безопасность компьютерных систем». Лекция 18: «Частный просмотр интернета», часть 2

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Курс MIT «Безопасность компьютерных систем». Лекция 18: «Частный просмотр интернета», часть 1

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Архив

Информация

Обсуждаемое

Рекомендуем

Рубрика «Анализ и проектирование систем» - 52

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Массачусетский Технологический институт. Курс лекций #6.858. «Безопасность компьютерных систем». Николай Зельдович, Джеймс Микенс. 2014 год

Новости

Актуальные темы

Архив