Рубрика «хранение данных» - 81

в 14:01, , рубрики: postgresql clusterization, Администрирование баз данных, хранение данных, метки:

Благодарность

Спасибо тебе, Хабр, за то, что ты есть и за те прекрасные часы которые я проводил в тебе! Спасибо, отважные хаброписатели, за статьи высокого качества, тонкого юмора и широкого кругозора. Только благодаря вам и Марь Ивановне (которая меня в первом классе научила читать) я добился серьёзных успехов в ИТ, а теперь хочу поделиться историей, когда нестандартное мышление помогло решить идиоматическую задачку от заказчика.

Вступление

Некоторое время назад я работал над проприетарным продуктом. Этот софт хранил свои данные во внешней СУБД. Первоначально работа осуществлялась с MS SQL, однако позже специально для пользователей «я только *nix-подобные системы ставлю» сделали совместимость с PostgreSQL. Тут взяли меня для решения задач класса «база данных упала — нужно восстановить по журналам транзакций».

В один прекрасный день команда поехала реализовывать очередной проект. Первоначально было оговорено, что на объекте уже есть два сервера Windows 2012, на которых будет развёрнут отказоустойчивый кластер MS SQL. Однако в последний момент у заказчика денег на инстансы не хватило, и мне было поручено ставить рostrge'совые БД, а так же как-то решить задачу отказоустойчивости. Спасибо сообществу разработчиков рostgres, которые скомпилировали установщик для Windows. Задачи:
Читать полностью »

в 10:33, , рубрики: cluster, mongodb, mongoengine, pymongo, python, replica set, X.509, Администрирование баз данных, хранение данных

Всем доброго времени суток! Недавно жизнь подкинула автору увлекательную работу по развертыванию MongoDB кластера с настройкой репликации и шардирования, а также аутентификации c использованием x.509 сертификатов. В данной статье я в первую очередь хотел бы изложить свои мысли и поделиться полученными опытом. Так как некоторые вещи оказались не тривиальными и сделать их с первого раза не удавалось, то думаю мои пошаговые инструкции могут пригодиться для освещения вопроса тем кто только знакомится с шардированием данных и работой с MongoDB в целом.
Также я буду очень рад увидеть рекомендации по добавлению/изменению конфигурации кластера и просто вопросы или критику по самой статье или по сути вопроса.
Читать полностью »

в 11:17, , рубрики: Backup Navigator, Data Protector, HPE, vmx, Блог компании Hewlett Packard Enterprise, виртуализация, резервное копирование, хранение данных

Hewlett Packard Enterprise предлагает SMB-компаниям, желающим обезопасить свои виртуализированные системы, простое и недорогое средство резервирования данных.

Виртуализация — очень популярный в наше время способ «обустройства» ИТ-системы. Одной из важнейших задач, которую приходится решать организациям, желающим виртуализировать свой ИТ-ландшафт, является обеспечение безопасности данных путем создания системы резервного копирования и восстановления после сбоев.

Резервирование данных в системах виртуализации для малых и средних компаний - 1 Для решения этой задачи в портфеле Hewlett Packard Enterprise уже давно имеется HPE Data Protector — продукт корпоративного уровня для организации резервного копирования и восстановления данных, который может работать в любых ИТ-средах, в том числе смешанных, когда часть используемых ИТ-систем — физические, а часть — виртуальные. Информация защищается на всех уровнях — от ядра до уровня доступа в рамках физической, виртуальной или облачной инфраструктур. Копирование становится стандартной процедурой вне зависимости от того, с каких платформ виртуализации поступают данные и куда они направляются для хранения. При этом HPE Data Protector обеспечивает не только комплексную защиту данных, но и аналитику в режиме реального времени посредством использования HPE Backup Navigator, а также оптимизацию процесса хранения с помощью решения HPE Storage Optimizer, что позволяет сделать резервное копирование и восстановление простым, надежным, рациональным и недорогим процессом, адаптированным под ИТ-среду вашей организации.
Читать полностью »

в 11:04, , рубрики: BigData, Hadoop, HPE, synergy, ит-инфраструктура, Серверная оптимизация, хранение данных

Изначально я планировал написать одну небольшую статью, но, по мере погружения в тему понял, что скорее всего понадобится серия из 5-6 статей, чтобы раскрыть суть достаточно полно.

О чем пойдет речь? О продукте компании Hewlett-Packard Enterprise (дальше – просто HPE) – Synergy.
Читать полностью »

в 7:49, , рубрики: 1сloud, Блог компании 1cloud.ru, Разработка веб-сайтов, разработка мобильных приложений, Разработка под e-commerce, репозитории, хранение данных, хранение кода

Эффективное хранение данных интересует абсолютно всех, кто хоть как-то связан с ИТ. Мы в IaaS-провайдере 1cloud постоянно анализируем опыт коллег — совсем недавно мы обсуждали, как хранят свои данные крупные компании.

Сегодня мы продолжим эту тему и обсудим, как лучше хранить свой код: в одном репозитории или в нескольких. Также мы взглянем на два примера, которые продемонстрируют особенности обоих подходов.

«В одной корзине»: Немного о хранении кода - 1

/ фото Dennis Skley CC
Читать полностью »

в 12:17, , рубрики: flash, ssd, Блог компании RUVDS.com, Накопители, хранение данных, хранилища данных

Революция флэш-памяти… Она продолжается уже пять лет. Причем все только начинается. Столь радикальных изменений в технологиях хранения, какие происходят сегодня, еще не было. Практически все ведущие вендоры СХД за последние годы представили собственные системы хранения класса AFA (All-Flash Array), целиком построенные на флэш-памяти. Твердотельные накопители широко применяются и в серверах среднего и старшего класса, значительно повышая производительность систем благодаря низким задержкам и высокому быстродействию твердотельных накопителей SSD (Solid State Drive) в IOPS (операциях ввода-вывода в секунду).

Революция флэш-памяти - 1


Читать полностью »

в 9:41, , рубрики: NetApp, NetApp NVLOG, NetApp NVRAM, NVLOG, NVRAM, SAN, память, хранение данных, хранилища данных, метки: ,

В этой статье я хочу рассмотреть внутреннее устройство работы памяти СХД NetApp FAS и как она умеет собирать тетрис.
Как устроена память NetApp FAS: NVRAM, Кеш и Тетрис - 1

System Memory

Память СХД любого контроллера NetApp FAS состоит из модулей оперативной памяти, которые используются для кэширования чтения, и записи, и запитаны батарейкой, отсюда приставка «NV» — Non Volatile MEMory / RAM / LOG. ОЗУ делится на следующие функциональные части: NVRAM, буфер MBUF (или системный кэш), о которых подробнее.
Как устроена память NetApp FAS: NVRAM, Кеш и Тетрис - 2
* Сброс данных на диски происходит из MBUF, по событию заполненности NVRAM, а не из самого NVRAM`а.
Читать полностью »

в 8:42, , рубрики: IBM Deep Flash, Блог компании IBM, дата-центры, ит-инфраструктура, серверы, Сетевые технологии, флеш-хранилище, хранение данных, хранилища данных, метки: ,

На прошлой неделе наша компания расширила модельный ряд универсальных флеш-хранилищ новой моделью — Deep Flash 150. Эта система, которая поступит в продажу уже на этой неделе, может работать с приложениями и данными, с которыми не могут нормально работать обычные all-flash решения. Большинство таких систем ориентировано на традиционные приложения, например, создание виртуальных рабочих станций, а также хранение и обмен блоками сжатой структурированной информации.

Новое флеш-хранилище для Big Data от IBM: Deep Flash 150 - 1

Аналитики нашей компании подсчитали, что около 80% данных, с которыми приходится иметь дело различным телекоммуникационным организациям — это неструктурированные данные. А BigData — это, можно сказать, большая проблема для флеш-хранилищ. Объем таких данных измеряется в петабайтах, не терабайтах. При этом объем неструктурированных данных растет в два раза быстрее, чем объем обычных данных. Поэтому масштабируемость — один из важнейших критериев для флеш-хранилищ.
Читать полностью »

в 11:00, , рубрики: Cisco, logstash-codec-netflow, анализатор netflow cisco ASA., Настройка Linux, хранение данных, метки: ,

Возможно, многие среди тех, кто хоть раз озадачивался поиском программы-анализатора NetFlow v.9, знают, что доступных бесплатных решений нет не так уж и много. Особенно если это решение open source. В моем случаем мне нужно было получить, разобрать и визуализировать трафик NetFlow v.9 cisco ASA 5585. Для этого я использовал ELK (Elasticsearch+Logstash+Kibana):

image

Вот ссылка на официальный сайт.

Спойлер

Данный продукт является open source решением, а это значит, что в нем было и будет немало «багов», с которыми мне посчастливилось пришлось столкнуться. Ниже будет представлена рабочая сборка.

Читать полностью »

в 9:24, , рубрики: IBM, атомное хранилище, Блог компании IBM, информация, хранение данных, хранилища данных

Команда специалистов из Дельфтского технологического университета (Нидерланды) создали хранилище данных, способное хранить информацию на уровне атомов. Данные можно записывать и стирать, устройство перезаписываемое. Каждый атом в хранилище представляет собой один бит информации.

Физики из Дельфтского технологического университета создали атомное хранилище данных - 1

Технология, принцип работы которой ученые опубликовали в авторитетном издании Nature Nanotechnology, позволяет записывать данные с очень высокой плотностью — около 500 ТБ на квадратный дюйм (6.5 см2). Теоретически такое хранилище данных в форме куба с длиной стороны в 0,1 мм может хранить все содержимое Библиотеки Конгресса США. Ученые уже продемонстрировали прототип рабочего устройства с емкостью в 1 КБ.
Читать полностью »

1...1020...808182...90100...107
Главная   |  Архив новостей  |   Android  |   Google  |   Apple  |   Microsoft  |   Информационная безопасность  |   Веб – разработка
Публикации RSS  |  Комментарии RSS
https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js