С развитием информационных технологий растет потребность в хранении и обработки большого объема информации. Для хранения большого объема данных используются распределенные файловые системы. Об одной из таких файловых систем и пойдет речь в данной статье.Читать полностью »
Рубрика «системное администрирование» - 306
Распределенная файловая система Quantcast File System и ее небольшой обзор
2014-08-28 в 14:22, admin, рубрики: dfs, Серверное администрирование, системное администрирование, метки: dfsОптимизация образов Docker
2014-08-28 в 10:09, admin, рубрики: docker, Веб-разработка, виртуализация, оптимизация, первый пост, переводы, системное администрирование, метки: docker, оптимизация, первый пост, переводыОбразы Docker могуть быть очень большими. Многие превышают 1 Гб в размере. Как они становятся такими? Должны ли они быть такими? Можем ли мы сделать их меньше, не жертвуя функциональностью?
В CenturyLink Lab мы много работали над сборкой различных docker-образов в последнее время. Когда мы начали экспериментировать с их созданием, мы обнаружили, что наши сборки очень быстро раздуваются в объеме (обычным делом было собрать образ, который весит 1 Гб или больше). Размер, конечно, не столь важен, если мы говорим про образы по два гига, лежащие на локальной машине. Но это становится проблемой, когда вы начинаете постоянно скачивать/отправлять эти образы через интернет.
Я решил, что стоит копнуть поглубже и разобраться с тем, как работает процесс создания docker-образов, чтобы понять, что можно сделать для уменьшения размера наших сборок. Читать полностью »
Установка системы учета рабочего времени: попробовать на себе
2014-08-27 в 5:31, admin, рубрики: gtd, системное администрирование, Софт 
Начну с предыстории. В компании руководитель хотел знать, чем занимаются подчиненные в рабочее время. Следить за компьютерами сотрудников поручили сисадмину, но делать это приходилось топорно и не всегда этично.
Наконец, терпение админа лопнуло и он предложил установить систему учета рабочего времени. Да не простую, а такую, чтоб сама анализировала, сколько времени сотрудники “балду пинают”, а сколько “делом заняты”. Да-да, согласен с вами, недобрый то был сисадмин. Испортил жизнь сотрудникам, теперь начальство узнает, сколько времени они проводят в любимых ЖЖешечках и соцсеточках. Но это другая история.
Исходные требования к системе:
– чтоб не тормозила на большом количестве ПК (к примеру, 200 машин с перспективой добавления еще около 100);
– чтоб была максимально автоматизированна;
– чтоб данные хранились на внутреннем сервере (не любит руководство облака ни в каком виде);
– чтоб удобно работать и не долго учить менеджеров пользоваться;
– ну и “соль-перец по вкусу”, то есть другие полезные функции не возбраняются.
Читать полностью »
Вебинар Крикета Ли — (со)автора книг о DNS и Bind. Безопасность DNS: угрозы и решения, Best Practices
2014-08-24 в 10:45, admin, рубрики: BIND, DNS, security, информационная безопасность, системное администрирование
 |
DNS — один из важнейших сетевых сервисов, о безопасности, надежности и производительности которого часто забывают. По количеству атак DNS находится на втором месте после HTTP/HTTPS, и только за последний год число атак возросло на 216%. Крикет Ли — автор и соавтор книг о DNS и Bind — проведет вебинар о безопасности DNS. Будут рассмотрены основные угрозы сервису (DDoS, cache poisoning, tunneling, amplification и т.д.) и предложены рекомендации по защите. Вебинар пройдет 28 Августа 2014г. в 20:00 по московскому времени. |
В чем польза ZooKeeper для админов и разработчиков. Семинар в Яндексе
2014-08-23 в 12:33, admin, рубрики: Hadoop, zookeeper, Блог компании Яндекс, Программирование, системное администрирование, яндексПривет! Меня зовут Андрей Степачев. В конце прошлого года я выступил перед коллегами с небольшим рассказом о том, что такое ZooKeeper, и как его можно использовать. Доклад изначально был рассчитан на широкий круг аудитории и может быть полезен и разработчикам, и админам, желающим разобраться, как все это примерно работает.
Начнем, пожалуй, с истории появления ZooKeeper. Сначала, как известно, в Google написали сервис Chubby для управления своими серверами и их конфигурацией. Заодно решили задачу со взаимными блокировками. Но у Chubby была одна особенность: для захвата локов необходимо открывать объект, потом закрывать. От этого страдала производительность. В Yahoo посчитали, что им нужен инструмент, при помощи которого они могли бы строить различные системы для конфигураций своих кластеров. Именно в этом основная цель ZooKeeper — хранение и управление конфигурациями определенных систем, а локи получились как побочный продукт. В итоге вся эта система была создана для построения различных примитивных синхронизаций клиентским кодом. В самом ZooKeeper явных понятий подобных очередям нет, все это реализуется на стороне клиентских библиотек.
Тривиальное смс-оповещение при недоступности сервера-оборудования
2014-08-19 в 13:40, admin, рубрики: ит-инфраструктура, Серверное администрирование, системное администрирование Со многими моими коллегами (системными администраторами, да наверное и не только) случалось так, что при отключении электропитанияаппаратном сбоепрограммное сбое — о недоступности того или иного сервисасервера узнавали от недовольного начальстванедовольных коллег.
Чтобы как-то решить проблему того, что я узнаю о проблеме в инфраструктуре от коллег, стало необходимым сделать смс-оповещение.
Наверняка есть какие-то уже готовые решения, может быть какие-то платные, аппаратные и т.п… В данной статье речь пойдёт о простом и банальном решении Читать полностью »
Анализ сетевого трафика на сервере с помощью tshark
2014-08-19 в 8:09, admin, рубрики: selectel, Блог компании Селектел, селектел, Сетевые технологии, системное администрирование 
В практике системного администрирования довольно часто приходится cталкиваться со сложными ситуациями, в которых не помогают ни инструменты сбора статистики (например, netstat), ни стандартные утилиты на основе протокола ICMP (ping, traceroute и другие). В таких случаях часто используются специализированные диагностические утилиты, дающие возможность «слушать» сетевой трафик и анализировать его на уровне единиц передачи отдельных протоколов. Они называются анализаторами трафика, а на профессиональном жаргоне — снифферами. С их помощью можно, во-первых, локализовывать сетевые проблемы и более точно их диагностировать, а во-вторых — обнаруживать паразитный трафик и выявлять в сети зловредное ПО.
Особенно полезными оказываются анализаторы трафика в случаях, когда сетевое ПО плохо документировано или использует собственные закрытые протоколы.Читать полностью »
Моя «Ласточка»
2014-08-15 в 12:11, admin, рубрики: hdd, жесткий диск, системное администрирование, Часы, часы для гиковПролог
Решил я подарить своему другу сисадмину на день рождения часы из жёсткого диска, о которых прочитал на хабре. Попытки создать нормальное, надёжное устройство не к чему не привели. Как я понял, у всех одна и та же проблема с балансировкой вращающегося механизма. Я решил уничтожить эту проблему на корню.
Под катом несколько фоток и видео созданного девайса плюс описание работы. Если тема будет интересна — обязательно напишу о разработке и покажу исходники, когда их причешу.
Читать полностью »
Удаленная установка операционной системы без KVM over IP
2014-08-14 в 12:40, admin, рубрики: arduino, java, системное администрирование, удаленное администрированиеБывало ли у вас так: вас нет на работе, операционная система у сотрудника слетела и средства удаленного администрирования, которые так вас выручали, становятся бесполезными. Или вы пытаетесь объяснить по телефону, какой пункт меню BIOS отвечает за приоритет загрузки, а собеседник совсем не владеет английским, и разговор превращается для обоих в пытку.
Есть много способов решения проблемы: тот же KVM over IP (относительно дорого), разделение разделов с системой и данными с последующим стиранием раздела системы в случае сбоя, загрузочные носители с Live дистрибутивом для временной работы, PXE-сервер и т.д.
Я предлагаю еще один способ — собрать устройство, наподобие KVM over IP (передающее нажатия клавиш и изображение по сети) своими руками.
Опыт работы эникейщиком-системным администратором в бюджетной организации
2014-08-14 в 7:09, admin, рубрики: cisco systems, всё равно никто не читает теги, информационные технологии, ит-инфраструктура, Карьера в IT-индустрии, проблемы мотивации, системное администрирование, устройство на работуЭто история о том, как я устраивался на свою первую серьезную работу, о коллективе, приобретенном опыте и разбитых мечтах
Подобие СКС в серверной
Предыстория
Так получилось, что в начале 3 курса обучения в университете я решил, что пора устраиваться на работу. Мой выбор пал на одну бюджетную организацию. Это была первая серьезная работа в крупной компании. О данной вакансии я узнал от бывшего одноклассника, который работал там на должности, далекой от IT.
Читать полностью »