При работе с Amazon многое остается за кадром. Для обычного пользователя это даже хорошо, ему нужен работающий сервис и не имеет значение, как этот сервис реализован. Но для тех, кто проектирует системы для Amazon или других облачных провайдеров это может быть проблемой. Некоторые внутренние аспекты работы выясняются при общении с тех. поддержкой, но в большинстве случаев для лучшего понимания приходится проводить различные тесты и эксперименты.
Возьмем, к примеру, производительность сети. Гарантирует ли Amazon определенную пропускную способность сети для любой машины или нет, как зависит скорость сети от ресурсов сервера, от региона или времени суток. Скажу сразу, что поддержка Amazon настоятельно рекомендует использовать машины больших размеров, если скорость сети является важным критерием и то, что максимально скорость 1G/s. Но всё всегда лучше проверить на практике.
Читать полностью »
Рубрика «Облачные вычисления» - 73
Тест скорости сети Amazon EC2
2013-02-01 в 5:57, admin, рубрики: amazon, Amazon Web Services, benchmark, cloud, cloud computing, EC2, Блог компании EPAM Systems, Облачные вычисления, метки: amazon, benchmark, cloud, cloud computing, EC2Песочница средствами SCVMM
2013-01-30 в 17:41, admin, рубрики: active directory, powershell, SCVMM, system center, ит-инфраструктура, Облачные вычисления, метки: active directory, powershell, SCVMM, system center С выходом System Center Virtual Machine Manager 2012 у нас появилась возможность создавать так называемые сервисы: т.е. штамповать виртуальные машины не по одиночке и даже не из шаблонов, а комбинировать разные профили, шаблоны, машины, а после — настраивать взаимосвязь между виртуальным оборудованием. Насмотревшись выступлений на TechEd'е, начитавшись статей и книжек, и, конечно, получив от начальства волшебное задание на одном из проектов, я решил, что имеющихся в SCVMM средств достаточно для создания сервиса полноценной песочницы, т.е. набора виртуальных машин, изолированных от остальной инфраструктуры предприятия, но при этом складно взаимодействующих друг с дружкой.
Но все оказалось не так гладко и красиво, как у ashapo на демонстрациях, поэтому милости прошу под кат за дозой обработки напильником.
Читать полностью »
AWS Insight: Virtual Private Cloud
2013-01-30 в 11:17, admin, рубрики: Amazon Web Services, AWS, aws insight, private cloud, VLAN, VPC, Блог компании EPAM Systems, Облачные вычисления, метки: aws, aws insight, private cloud, VLAN, VPC Привет, читатели! 
Сегодня я, наконец, набрался смелости и имею время рассказать вам о замечательном сервисе, который предоставляет Amazon Web Services: Virtual Private Cloud — VPC.
VPC — это сервис, позволяющий создавать приватные изолированные сети в публичном облаке Amazon. Что же предоставляет VPC?
- Подсети серых адресов
- Полный контроль над адресами
- Динамическое и удобное управление сетевыми устройствами и маршрутизацией
- Поддерживает EC2, RDS, SQS, ElastiCache и другие сервисы
- Многое другое..
У VPC есть много внутренних понятий и терминов, давайте я буду их описывать по мере настройки. И сегодня я вместе с вами настрою кроссзонную сеть для VPC для большей отказоустойчивости.
Читать полностью »
Форум DaaS и IaaS — ингредиенты и рецепты
2013-01-29 в 22:46, admin, рубрики: citrix, citrix xenapp, citrix xendesktop, cloud, cloud computing, cloudstack, daas, iaas, openstack, vdi, xenapp, xendesktop, xenserver, ит-инфраструктура, Облачные вычисления, хостинг, метки: citrix, citrix xenapp, citrix xendesktop, cloud, cloud computing, cloudstack, daas, IaaS, openstack, vdi, xenapp, xendesktop, xenserver 1 марта в рамках конференции партнеров Citrix пройдет независимый форум посвященный построению и эксплуатации публичных и частных облаков ориентированных на предоставление виртуальной инфраструктуры (IaaS) и виртуальных рабочих мест (DaaS) в форме услуги. Основная цель форума — обмен положительным и отрицательным опытом в области эксплуатации DaaS и IaaS. Будут затронуты вопросы выбора программного обеспечения и его интеграции, тонкости лицензирования Microsoft, проблемы доверия со стороны заказчиков и сложности взаимодействия с производителями ПО.
Описание и регистрация
Читать полностью »
Облако Selectel — о супер-хабраэффекте, небольшой оптимизации, и расходах за 2 года
2013-01-25 в 10:52, admin, рубрики: selectel, Облачные вычисления, Серверная оптимизация, хостинг, метки: selectel 
Почти 2 года назад я писал обзор о новых тогда «облачных» виртуалках Selectel-а (отличие от всех остальных было и остается в том, что расход памяти, дисковые операции, трафик — все это считается и оплачивается отдельно и весьма подробно).
Cейчас хочу подвести черту под результатами почти 2-х лет использования, поделиться небольшим хаком по экономии 600 рублей в год, и рассказать как я на нем пережил Über-эффект (репост на десятке популярных буржуйских сайтов).Читать полностью »
Дайджест новых материалов на русском TechNet за декабрь 2012 и январь 2013 года
2013-01-24 в 8:05, admin, рубрики: active directory, cloud, cloud computing, hyper-v, iaas, samba, sharepoint, teched, teched russia 2012, technet, Windows Server, Windows Server 2012, Блог компании Microsoft, Облачные вычисления, системное администрирование, метки: active directory, cloud, cloud computing, hyper-v, IaaS, samba, sharepoint, teched, teched russia 2012, technet, Windows Server, Windows Server 2012 
Всем доброго времени суток!
Ниже приведена подборка подготовленных и опубликованных на TechNet материалов за декабрь 2012 — январь 2013. А еще мы опубликовали видео с онлайн трансляции крупнейшей технологической конференции TechEd Russia 2012, которая прошла в Москве 27-28 ноября 2012, где встретились несколько тысяч ИТ-специалистов, руководителей, разработчиков и ИТ-директоров.
Windows Server
- SMB Scale-Out в Windows Server 2012
- Сравнение Hyper-V в Windows Server 2012 и VMware vSphere 5.1
- NIC Teaming в Windows Server 2012
- Настройка Hyper-V Replica в Windows Server 2012
- Заполняем Active Directory тестовыми пользователями для SharePoint
Облако
GPS мониторинг без лишних глаз
2013-01-23 в 13:28, admin, рубрики: Amazon Web Services, gps мониторинг, информационная безопасность, Облачные вычисления, я пиарюсь, метки: Amazon Web Services, gps мониторинг, информационная безопасность, облачные вычисления 
«Если вы не параноик, это еще не означает, что за вами никто не следит». Развитие Интернета перевело это высказывание на качественно новый уровень. Следить уже можно, не выходя из дома, а всю информацию добровольно предоставит сам объект наблюдения. Люди выкладывают в сеть свои личные данные, но не всегда задумываются о том, кому они могут быть доступны. Логин/пароль и «Показывать только друзьям» успокаивают. Создается иллюзия, что мы контролируем приватность собственных данных. Но есть еще администраторы и органы власти, которые узнают все, что их интересует, без спроса и без вашего ведома.
Это проблема всех систем, централизованно обслуживающих множество клиентов. Например, любая социальная сеть имеет единое хранилище данных (возможно, распределенное), которое доступно в служебных целях для некоторого круга лиц. Аналогичная ситуация имеет место и для систем мониторинга транспорта. В нашей системе применяется принципиально другой подход, который позволит каждому полностью контролировать доступ к своим данным.
Идея проста – каждому пользователю дать свой собственный выделенный сервер в облаке!Читать полностью »
I-Teco OpenStack Cloud: Проектирование сетевой части OpenStack
2013-01-22 в 22:09, admin, рубрики: Блог компании Ай-Теко, ит-инфраструктура, облака, Облачные вычисления, Сетевые технологии, метки: smb, ит-инфраструктура, облака, сетевые технологииКак выяснилось, большое количество наших с вами коллег не только интересуются OpenStack, но и имеют достаточный опыт по его сборке и настройке: к нам приходит большое количество самых разных вопросов – от борьбы с багами в разных библиотеках до концептуальных вопросов ИБ и планирования пользовательской среды. На часть вопросов мы отвечаем в частном порядке, а на те, которые интересуют многих, ответим здесь.
Сегодня поговорим о том, какие внутри OpenStack есть варианты планирования виртуальных сетей, подсетей, внутренних IP-адресов виртуальных машин, способов трансляции их в реальные IP-адреса и обеспечения безопасности разделения сред между ВМ разных клиентов.
За работу с сетевой частью OpenStack отвечает библиотека Quantum, которая обеспечивает функцию «сеть как сервис» между сетевыми интерфейсами ВМ (vNIC) под управлением других сервисов OpenStack, фактически предоставляя API, позволяющее управлять всей сетевой частью облака. В зависимости от поставленных задач и спроектированной целевой конфигурации облака, к Quantum можно подключать плагины, обеспечивающие те или иные сетевые функции. Обязательно стоит внимательно рассмотреть такие плагины, как Open vSwith, Cisco UCS/Nexus, Linux Brige, NEC OpenFlow, Nicira Network Virtualization Platform (NVP) и некоторые другие. После чего станет понятно, как именно вы будете проектировать сеть своего Cloud’а. Более подробно о конфигурации Quantum можно прочитать, например, в Administration Guide по Quantum — написано хорошо и достаточно полно. Цель сегодняшнего поста в том, чтобы осветить возможности проектирования различных вариантов построения виртуальной сетевой инфраструктуры OpenStack’а и их основных отличий друг от друга.
Вариант 1. Общая сеть
Самый простой вариант – одна общая подсеть для размещения ВМ.
Каждая ВМ находится в собственном тенанте с IP-адресом из общей сети, которая может быть только одна. Понятно, что данные на всех интерфейсах ВМ доступны на всех других сетевых интерфейсах, подключенных в эту сеть. Tcpdump рулит. Это скорее тестовая среда, нежели реальный рабочий workaround.
Читать полностью »
Автоматическое конфигурирование виртуальных машин в облаках при помощи метаданных
2013-01-22 в 12:23, admin, рубрики: amazon, Amazon Web Services, automation, chef, cloud, puppet, vcloud director, VMware, Блог компании EPAM Systems, Облачные вычисления, метки: amazon, automation, chef, cloud, puppet, vcloud director, vmware 
In God we trust, the rest we automate
— unknown DevOps Engineer
Использование виртуализации и облачных платформ позволяет в десятки раз сократить время затрачиваемое на запуск и обслуживание IT инфраструктуры. Один человек может манипулировать десятками, сотнями и даже тысячами виртуальных серверов, с легкостью их запускать, останавливать, клонировать, изменять конфигурацию оборудования и создавать на их основе готовые образы систем. Если все ваши сервера имеют одинаковую конфигурацию, то особых проблем нет, можно один раз вручную настроить сервер, сделать на его основе образ и запускать столько машин, сколько вам необходимо. Если же у вас большое количество разных операционных систем с разным набором программного обеспечения или если вам необходимо быстро запускать и останавливать сложные кластерные конфигурации, то обслуживание даже нескольких десятков таких серверов будет занимать очень много времени. Можно, конечно иметь набор разных скриптов и образов на все случаи жизни, которые необходимо будет сопровождать и обновлять, но более рационально использовать один скрипт и несколько образов, а все необходимые параметры передавать при старте системы. Многие платформы для облачных вычислений предлагают, так называемый, механизм метаданных (metadata) или пользовательских данных (user-data), используя этот механизм, вы можете передать скрипту все необходимые данные по настройке конкретной виртуальной машины или даже передать сам скрипт, чтобы он выполнился при старте.
Читать полностью »
Яндекс и ЦЕРН: новый этап сотрудничества
2013-01-21 в 14:27, admin, рубрики: Алгоритмы, Блог компании Яндекс, большие объемы данных, квантовая физика, Облачные вычисления, физика элементарных частиц, ЦЕРН, яндекс, метки: большие объемы данных, квантовая физика, физика элементарных частиц, ЦЕРН, яндекс Сегодня Яндекс присоединился к ЦЕРНу.
Наше партнёрство с Европейским центром ядерных исследований переходит на новую стадию развития: у ученых из ЦЕРНа появится доступ к технологии машинного обучения Матрикснет от Яндекса, а также новым вычислительным мощностям. А Яндекс становится ассоциированным членом европейского Центра ядерных исследований в рамках проекта CERN openlab. Кроме него членами openlab являются Intel, HP, Oracle, Siemens и Huaiwei.
Сотрудничество Яндекса с Центром началось в 2011 году, когда мы впервые предоставили ЦЕРНу свои серверные мощности. А в апреле прошлого года наши разработчики создали поиск по событиям эксперимента LHCb. LHCb — один из четырёх основных экспериментов ЦЕРНа и один из примеров того, насколько важными в современной науке стали не только данные опытов, но и их обработка. В ходе опытов LHCb исследуются соударения b-кварка (b от английского beauty, по-русски его называют прелестным). Объём информации об этих событиях только за год достигает тысяч терабайт. Благодаря созданнному нами поисковому индексу у учёных ЦЕРНа появилась возможность мгновенно получать нужную информацию.
В современной фундаментальной науке важную роль стали играть не только технические ресурсы для проведения опытов, но и вычислительные возможности для обработки и понимания их результатов. В наши дни, особенно в ЦЕРНе, данных становится так много, что без применения сложных алгоритмов даже учёному будет сложно делать точные выводы о результатах опытов. Технологии, которые можно применять для таких целей, имеет совсем небольшое количество компаний.
Мы расспросили Андрея Устюжанина, руководителя проекта партнёрства с ЦЕРНом в Яндексе, о подробностях того, для чего именно ЦЕРНу нужна помощь Яндекса и как устроена работа с данными экспериментов. Смотрите видео и читайте более подробную текстовую версию после ката.Читать полностью »