Рубрика «высокая производительность» - 127

В США собираются построить самый мощный суперкомпьютер в мире - 1

Нужда в производительных и супер производительных компьютерных системах перманентно увеличивается. Военные, метеорологи, экономисты, физики — всем нужны суперкомпьютеры. С каждым годом число суперкомпьютеров увеличивается, растет и производительность систем. В 2018 году в США должен появиться самый мощный суперкомпьютер в мире, производительностью в 180 петафлопс. Это примерно в 3 раза больше, чем текущий результат, показанный китайским суперкомпьютером Tianhe-2, находящимся сейчас на первом месте в списке самых мощных систем мира (33,2 ПФ). Называется проект Aurora.

Заказ на создание подобной системы дан Министерстовм энергетики США. Стоит отметить, что в США сейчас разрабатываются проекты по созданию еще более мощных систем, производительность которых будет равна около 300 ПФ. Но пока что неясно, будут ли такие проекты реализованы. A вот Aurora уже получает финансирование.
Читать полностью »

Google открыл новый дата-центр ценой в $600 млн - 1

Корпорация Google открыла новый дата-центр в Орегоне, при этом общая площадь дата-центра составляет 15240 м2. Ранее компания заявляла, что общая сумма средств, вложенных в строительство нового дата-центра, составляет $600 млн. Новым домом для серверов корпорации стал город Даллес.

Стоит отметить, что именно в этом городе был построен первый большой дата-центр корпорации, который открылся в 2006 году. С тех пор строительство дата-центров для своих нужд стало неотъемлемой чертой ведения бизнеса для компании, количество пользователей которой все время увеличивается. Gmail, Google Drive, YouTube и другие сервисы компании требуют все новых мощностей, и корпорация старается вовремя увеличивать мощности своих ДЦ, а также строить новые.
Читать полностью »

Большое обновление пакета Intel® Parallel Studio XE вышло на этой неделе. Версия 2016 включает три совершенно новых продукта:

  1. Intel® Data Analytics Acceleration Library (Intel® DAAL) – C++ и Java решение для аналитики данных (статистика, машинное обучение и другое).
  2. Новый Vectorization Advisor в составе Intel® Advisor XE 2016 Beta для оптимизации кода под SIMD инструкции, т.е. векторизации.
  3. MPI Performance Snapshot для быстрой общей оценки производительности MPI программ.

Бета-версия доступна публично и бесплатно, программа длится до 23 июня, но лицензии будут работать вплоть до 25 сентября 2015 г. Для получения Бета-версии нужно зарегистрироваться здесь.
Эта статья посвящена обзору нового функционала, более детально отдельные продукты постараемся осветить в последующих блогах – пишите в комментариях, к чему есть интерес.
Читать полностью »

Уолл Cтрит меняет подход к датацентрам - 1

В начале прошлого года Wall Street Journal писал о том, что Bank of America (BofA), второй по размеру банк в США, активно меняет инфраструктуру своего дата-центра. BofA переходит от традиционного железа своего ДЦ к аппаратному обеспечению, разработанному в рамках Open Compute Project. Напомню, что этим проектом занимается Facebook вместе с большим количеством партнеров. В течение трех лет BofA собирается перенести 80% задач в среду программно-определяемого дата-центра.

Кроме Bank of America, сейчас и другие тяжеловесы финансово-банковской системы США планируют изменить подход к своим ДЦ. К примеру, инженеры Goldman Sachs уже несколько лет работают с Open Compute Project, а представители компании входят в совет директоров OCP foundation с момента основания организации и проекта. Сейчас Goldman старается повсеместно внедрять концепцию OCP в своих проектах.
Читать полностью »

5 отличий дата-центров будущего от современных ДЦ - 1

Облака и виртуализация — то, что давно уже стало современностью, хотя еще недавно выглядело, как будущее, причем весьма отдаленное. Постепенно в мире телекоммуникаций будут появляться все новые технологии, которые в близком уже будущем станут не менее привычными, чем та же виртуализация. Сейчас уже понять, какие тенденции приведут к изменению современного мира телекоммуникаций.

К примеру, те же облачные технологии еще далеко не достигли пика своего развития и популярности. По прогнозам Gartner, только в Индии GAGR (ежегодный показатель роста) к 2017 году увеличится на 33,2%. В эту оценку входит потенциал всех сфер облачных технологий. SaaS и IaaS покажут даже лучшее результаты: 33,4% и 39,8% соответственно. Рост облачных сервисов приведет (и уже приводит) к миграции традиционных ИТ-сервисов на облачную основу.
Читать полностью »

Приветствую всех читателей. Сегодня попробую продолжить серию достаточно редких статей, посвящённым естественным алгоритмам. В частности, эта статья будет посвящена модификации муравьиного алгоритма, известной как Max-Min Ant System (MMAS). Я расскажу об отличиях от классического муравьиного алгоритма и о причинах внесения таких модификаций. Подробности под катом.
Читать полностью »

И снова в эфире наша постоянная рубрика «Лекции Технопарка». На этот раз предлагаем вам ознакомиться с материалами курса «Проектирование высоконагруженных систем». Цель курса — получение студентами навыков проектирования высокоэффективных программных систем.
Читать полностью »

Big Data идет на войну

Dell выпустила защищенный дата-центр для военных - 1

Обработка данных сейчас нужна везде, особенно в этом нуждаются военные, безразлично, в штабе или в полевых условиях. Но для военных может быть затруднительно поддерживать связь с дата-центром, находящимся за сотни или даже тысячи километров от места военных действий. Но почему бы не взять дата-центр с собой? Именно такое решение предлагает компания Dell, анонсировавшая свой Tactical Mobile Data Center.

Естественно, такая система может использоваться не только военными, но и учеными, нефтяниками, геологами, всеми, кому нужны вычислительная мощь, причем практически каждый день. Tactical Mobile Data Center основан в модифицированном контейнере ISU-96, который обычно используется военными, и часто снабжается охлаждающей установкой. Размещение компьютерных систем в таком контейнере, уже зарекомендовавшем себя как надежная защита при перевозках, вполне логичный шаг.
Читать полностью »

На Хабре уже есть статьи о NoSQL СУБД Tarantool и о том, как его используют в Mail.Ru Group (и не только). Однако нет рецептов того, как работать с Tarantool на Python. В своей статье я хочу рассказать о том, как мы готовим Tarantool Python в своих проектах, какие проблемы и сложности при этом возникают, плюсы, минусы, подводные камни и, конечно же, «в чем фишка». Итак, обо всем по порядку.

Асинхронная работа с Tarantool на Python - 1

Tarantool представляет собой Application Server для Lua. Он умеет хранить данные на диске, обеспечивает быстрый доступ к ним. Tarantool используется в задачах с большими потоками данных в единицу времени. Если говорить о цифрах, то это десятки и сотни тысяч операций в секунду. Например, в одном из моих проектов генерируется более 80 000 запросов в секунду (выборка, вставка, обновление, удаление), при этом нагрузка равномерно распределяется по 4 серверам с 12 инстансами Tarantool. Не все современные СУБД готовы работать с такими нагрузками. Кроме того, при таком количестве данных, очень дорого ожидание выполнения запроса, поэтому сами программы должны быстро переключаться от одной задачи к другой. Для эффективной и равномерной загрузки CPU сервера (всех его ядер) как раз нужен Tarantool и асинхронные приемы в программировании.
Читать полностью »

Привет! Я работаю интерном в Санкт-Петербургском центре разработок ЕМС и хочу дать студентам пару советов о построении будущей карьеры, а также рассказать про задачи, которыми занимаюсь в компании. В этом году за одно из своих решений я получил награду Bright Internship Award как лучший стажёр Центра, и мне интересно получить обратную связь по достигнутым результатам. Эта статья может быть интересна тем, кто занимается тестированием производительности систем.
Читать полностью »


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js