Здравствуйте коллеги и жители Хабра. Хотим рассказать Вам историю одной небольшой компании от начала её становления до текущих реалий. Хотим сразу сказать, что данный материал сделан для людей, которым интересна эта тематика. Прежде чем это написать (и задолго до этого) мы пересмотрели множество публикаций на Хабре о строительстве ЦОДов и это очень помогло нам в реализации наших идей. Публикация будет разделена на несколько этапов нашей работы, от аренды шкафа до финала постройки собственного мини-цода. Надеюсь и эта статья поможет хотя бы одному человеку. Поехали!
Рубрика «хранение данных» - 79
Как мы строили свой мини ЦОД. Часть 1 — Colocation
2016-10-11 в 13:20, admin, рубрики: дата-центр, ит-инфраструктура, Серверное администрирование, строительство ЦОД, хранение данных, цодПреимущества использования программно-определяемых СХД в корпоративной среде
2016-10-09 в 13:26, admin, рубрики: Блог компании King Servers, Исследования и прогнозы в IT, программно-управляемые решения, СХД, хранение данных, метки: программно-управляемые решения, схд
Наша компания старается всегда отслеживать положительные изменения на рынке сетевых технологий и связанных с ними сфер. К числу таких изменений мы относим, например, программно-определяемые СХД, отношение к которым рынка постепенно меняется. Такие решения постепенно все активнее используются в корпоративном секторе, с упрощением процесса развертывания СХД и совершенствованием всего связанного с ними комплекса технологий.
Управлять СХД тоже становится проще благодаря появлению новых типов администрирования такими системами. К примеру, сейчас при помощи программных инструментов можно собирать информацию о физических СХД-устройствах. Администратор же такой системы управляет не только каждой единицей, но и всеми ими вместе, в качестве единого комплекса.
Читать полностью »
Ошибки в проекте дата-центра, которые вы ощутите только на этапе эксплуатации
2016-10-07 в 7:21, admin, рубрики: Блог компании DataLine, дата-центр, дата-центры, ит-инфраструктура, проектирование, служба эксплуатации, хостинг, хранение данных, ЦОДыОшибки в проекте дата-центра — это бомба замедленного действия. Дата-центр построят, сдадут в эксплуатацию и он даже будет работать, но придет час, и начнут вылезать проблемы. В лучшем случае просчеты в проекте доставят неудобства инженерам службы эксплуатации, в худшем — поставят под вопрос работу дата-центра. Только вот будет поздно пить Боржоми: строители с подписанным актом приемки уже сделали ручкой, да и сам проект не подразумевает маневров.
Мы отобрали самые горькие ошибки в проектах дата-центров, с которыми мы столкнулись за восемь лет проектирования, строительства и эксплуатации дата-центров. Открываем хит-парад.
Легко скопировать ― быстро восстановить
2016-10-06 в 12:38, admin, рубрики: HP Data Protector, HPE, Блог компании Hewlett Packard Enterprise, Восстановление данных, ит-инфраструктура, хранение данныхРешения в области резервного копирования и восстановления данных необходимы как крупным компаниям, так и представителям среднего и малого бизнеса. Однако выбор способов использования таких решений зависит от масштабов организации и стоящих перед ней задач.
У компании Hewlett Packard Enterprise флагманским решением для резервного копирования является HPE Data Protector. Этот продукт имеет солидную, почти 30-летнюю историю. Разработанный компанией Apollo в 1987 году под названием Omniback Network Backup System, после вхождения Apollo в состав Hewlett-Packard в 1989-м, он долгое время развивался и в 2002 году получил новое название ― HP Data Protector. Несмотря на почтенный возраст продукта, компания HP, а сейчас ― Hewlett Packard Enterprise, постоянно работает над его совершенствованием, отражая в нем все технологические изменения, происходящие в мире программного обеспечения и в ИТ-индустрии в целом.
Вкратце расскажем об основных возможностях Data Protector, сделав акцент на наиболее важных и полезных нововведениях, реализованных разработчиками в последние годы.
Читать полностью »
Трансгуманизм: Новая ступень эволюции или конец человечества
2016-10-06 в 10:26, admin, рубрики: Блог компании ИТ-ГРАД, Исследования и прогнозы в IT, ИТ-ГРАД, прогнозы и исследования, трансгуманизм, хранение данныхМногие известные люди в мире технологий верят в то, что бессмертие вполне достижимо. С помощью науки, конечно. Питер Тиль (Peter Thiel), создатель системы PayPal, считает, что «не пытаться победить смерть — против человеческой природы», и активно инвестирует в такие компании, как Фонд Мафусаил.
Его поддерживает сооснователь и директор по технологиям корпорации Oracle, Ларри Эллисон (Larry Ellison), который не понимает готовность людей мириться с тем, что они смертны. Сооснователи Google Лэрри Пэйдж (Larry Page) и Сергей Брин (Sergey Brin), как и Марк Цукерберг, также инвестируют в исследования по продлению жизни.
Последователи движения трансгуманизма уверены, что человек сможет эволюционировать (несмотря на все физические и умственные ограничения) в «суперчеловека» и в итоге достигнуть бессмертия.
/ фото Logan Ingalls CC
Читать полностью »
Google Диск в качестве резервного хранилища для VPS сервера на базе Linux
2016-10-06 в 9:02, admin, рубрики: backup, google drive, linux, хранение данных, хранилища данныхПришла идея делать backup сервера VPS на CentOS 7 в Google drive, не пропадать же зря 15 гигам халявного места. Немного поискал и нашел пару статей на эту тему, тема оказалась не нова, и сначала поставил утилиту от самой корпорации добра, вот статья на эту тему Backing up a Directory to Google Drive on CentOS 7.
Но мне это не подходит, так как есть скрипт, который выполняется по расписанию, и в нем я решил проверять файлы по дате создания и не плодить миллион архивов, а для этого нужно смонтировать Google Drive в папку.
Утилита от Google умеет только закачивать и скачивать файлы, проверить по дате и удалить все старше 3х дней не получилось.
Спасение нашлось в google-drive-ocamlfuse, статей на эту тему не мало, но есть одно, но, утилита требует GUI интерфейс, а в частности любой браузер. В браузер передается с генерированная ссылка.
Google как известно авторизует пользователей по OAuth. В моем VPS естественно не о каком GUI речь не идет, только консоль.
На помощь пришла статья с github Headless Usage & Authorization. Предлагаю вам мой вольный перевод.
Читать полностью »
Как применение кодов избыточности в SDS помогает Яндексу дёшево и надёжно хранить данные
2016-10-05 в 15:12, admin, рубрики: mds, XOR, Блог компании Яндекс, дата-центры, коды Рида-Соломона, Облачные вычисления, реплики, хранение данных, хранилища данных, хранилище файловЯндекс, как и любая другая большая интернет-компания, хранит много, а точнее очень много данных. Это и пользовательские данные из разных сервисов, и намайненные сайты, и промежуточные данные для расчёта погоды, и резервные копии баз данных. Стоимость хранения ($/ГБ) — один из важных показателей системы. В этой статье я хочу рассказать вам про один из методов, который позволил нам серьезно удешевить хранилище.
В 2015 году, как вы все помните, сильно вырос курс доллара. Точнее, расти-то он начал в конце 2014-го, но новые партии железа мы заказывали уже в 2015-м. Яндекс зарабатывает в рублях, и поэтому вместе с курсом выросла и стоимость железа для нас. Это заставило нас в очередной раз подумать о том, как сделать, чтобы в текущий кластер можно было положить больше данных. Мы такое, конечно, делаем регулярно, но в этот раз мотивация была особенно сильной. Кстати, если после поста у вас останутся вопросы, которые бы вы хотели обсудить лично, приходите на нашу встречу.
Каждый сервер кластера предоставляет для нас следующие ресурсы: процессор, оперативную память, жёсткие диски и сеть. Сеть здесь — более сложное понятие, чем просто сетевая плата. Это ещё и вся инфраструктура внутри дата-центра, и связность между разными дата-центрами и точками обмена трафиком. В кластере для обеспечения надёжности применялась репликация, и суммарный объём кластера определялся исключительно через суммарную ёмкость жёстких дисков. Нужно было придумать, как обменять оставшиеся ресурсы на увеличение места.
Корпоративные базы данных – 2016: горячая десятка
2016-09-30 в 11:39, admin, рубрики: Администрирование баз данных, Блог компании RUVDS.com, корпоративные базы данных, СУБД, хранение данныхЕсли вашей организации нужно хранить и обрабатывать данные, то, независимо от их объёма, без облачной или локальной СУБД не обойтись. Сегодня мы поговорим о ведущих представителях рынка корпоративных баз данных, о тех разработках, на которые стоит обратить внимание в 2016-м году.
Рынок корпоративных СУБД существует уже несколько десятилетий. Полагаем, оценивая ту или иную систему, нелишним будет, кроме прочего, учитывать и её историю. Но зрелость рынка не значит, что в наши дни он – место тихое и спокойное. Уровень конкуренции здесь очень высок.
Читать полностью »
Цикл статей «NetRack Guards: на страже клиентской ИТ-инфраструктуры»: история о человеке, который ходит по крышам
2016-09-30 в 8:26, admin, рубрики: NetRack, StoreData, аренда серверов, Блог компании NetRack, дата-центр, инженер, инженерный подход, ит-инфраструктура, кондиционирование, холодильное оборудование, хостинг, хранение данныхВы когда-нибудь задумывались о том, что значит система охлаждения для оборудования, особенно в такой структуре, как дата-центр? По сути, без холодильного оборудования арендованные Вами сервера не смогут работать из-за перегрева, поэтому в ЦОДе всегда есть человек, который отвечает не только за состояние холодильного оборудования, но и за его модернизацию для повышения эффективности инфраструктуры и, как следствие, повышения качества предоставляемого в нем услуг. Стоит отметить, что пока система холодоснабжения еще ни разу не подвела ни нас, ни наших клиентов.
Про релиз и разработку True Image 2017 — все хардкорные фичи на месте
2016-09-29 в 6:37, admin, рубрики: acronis, True Image 2017, бекап, Блог компании Acronis, Inc, бэкап, восстановление, Восстановление данных, ит-инфраструктура, Маша Ведро, разработка, резервное копирование, релиз, хранение данныхУ нас недавно был праздник — вышел в релиз True Image 2017, над которым мы работали целый год. Изменений очень много, но первое, что бросается в глаза, – это «казуальный» минималистичный дизайн. Если наши первые релизы были инструментами продвинутых пользователей и сисадминов, то последние несколько лет мировая популярность продукта такова, что бэкапят им очень и очень разные люди. В том числе те, кто не особо отличает монитор от системного блока.
Поэтому наш подход – сохранить весь старый добрый хардкор, гибкость настроек и множество нетривиальных инструментов, но сделать упор на упрощение интерфейса.
На первом месте – основные действия с заведомо хорошими умолчаниями
Но все настройки на месте
Ещё в этом релизе мы научились делать локальный бэкап iOS и Android на ваш десктоп, бэкапить профиль Facebook (спасибо пользователю Маша Ведро), поработали с архитектурой архива и так далее. Расскажу про основные фичи и сложности в их разработке.Читать полностью »