Архив за 18 июля 2018 - 8

в 8:46, , рубрики: dispersed volume, Erasure Coding, glusterfs, Блог компании Облачные сервисы КРОК, виртуализация, гластер, глюстер, Серверное администрирование, файловая система, хранение данных

Гластер в России мало у кого есть, и любой опыт интересен. У нас он большой и промышленный и, судя по дискуссии в прошлом посте, востребованный. Я рассказывал о самом начале опыта переноса бекапов с Enterprise хранилища на Glusterfs.

Это недостаточно хардкорно. Мы не остановились и решили собрать что-то более серьёзное. Поэтому здесь речь пойдёт о таких вещах, как erasure coding, шардинг, ребалансировка и её троттлинг, нагрузочное тестирование и так далее.

Glusterfs + erasure coding: когда надо много, дешево и надежно - 1

  • Больше теории волюмы/сабволюмы
  • hot spare
  • heal / heal full / rebalance
  • Выводы после ребута 3 нод (никогда так не делайте)
  • Как влияет на нагрузку сабволюма запись с разной скоростью от разных ВМ и shard on/off
  • rebalance после вылета диска
  • fast rebalance

Читать полностью »

в 8:46, , рубрики: Новости

Hino Motors — подразделение Toyota Motor, выпускающее грузовые автомобили, представило гибридный грузовик с искусственным интеллектом.

Этот шаг предпринят на фоне отраслевых тенденций перехода к электрическим силовым установкам и внедрения систем самоуправляемого движения.

В частности, конкурирующая японская компания Mitsubishi Fuso, принадлежащая Daimler AG, в прошлом году начала продавать полностью электрическую версию своих небольших грузовиков Canter, в то время как американский производитель электромобилей Tesla анонсировал выпуск грузовиков Semi, обещая начать продажи в 2019 году.

Читать полностью »

в 8:37, , рубрики: Learning to Learn, Алгоритмы, будущее, Исследования и прогнозы в IT, Профессиональная литература, ричард хэмминг, сжатие данных, Системная инженерия, форсайт, цифровая экономика, Читальный зал

«Цель этого курса — подготовить вас к вашему техническому будущему.»

imageПривет. Помните офигенную статью «Вы и ваша работа» (+219, 2442 в закладки, 394k прочтений)?

Так вот у Хэмминга (да, да, самоконтролирующиеся и самокорректирующиеся коды Хэмминга) есть целая книга, написанная по мотивам его лекций. Мы ее переводим, ведь мужик дело говорит.

Это книга не просто про ИТ, это книга про стиль мышления невероятно крутых людей. «Это не просто заряд положительного мышления; в ней описаны условия, которые увеличивают шансы сделать великую работу.»

Мы уже перевели 28 (из 30) глав. И ведем работу над изданием «в бумаге».

Теория кодирования — I

Рассмотрев компьютеры и принцип их работы, сейчас мы будем рассматривать вопрос представления информации: как компьютеры представляют информацию, которую мы хотим обработать. Значение любого символа может зависит от способа его обработки, у машины нет никакого определенного смысла у используемого бита. При обсуждении истории программного обеспечения 4 главе мы рассматривали некоторый синтетический язык программирования, в нём код инструкции останова совпадал с кодом других инструкций. Такая ситуация типична для большинства языков, смысл инструкции определяется соответствующей программой.

Для упрощения проблемы представления информации рассмотрим проблему передачи информации от точки к точке. Этот вопрос связан с вопросом сохранения информация. Проблемы передачи информации во времени и в пространстве идентичны. На рисунке 10.1 представлена стандартная модель передачи информации.

image

Рисунок 10.1
Читать полностью »

в 8:30, , рубрики: mining, Криптовалюты, оборудование, я пиарюсь

После бума 2017 года, когда курсы криптовалют могли меняться за месяц в несколько раз, наступило затишье со средневзвешенными курсами. Например, если 1 марта биткоин стоил $6826, то на 1 июля его стоимость составляла $6417. Майнинг становится прогнозируемым бизнесом, с учетом того, что курсы скачут не сильно, а специальные сайты умеют рассчитывать, сколько удастся получать в день при майнинге криптовалют.

Майнинг: какие возможности и риски дает добыча криптовалюты - 1

Зная мощность оборудования, потребление электроэнергии, ее стоимость и имея базовое понимание, о том, как ведут себя курсы криптовалют, можно рассчитать примерный срок окупаемости и составить бизнес-план. В среднем оборудование удаётся окупить за год. А если обращать внимание на новые разработки, которые позволяют повысить эффективность, то можно сократить этот срок.
Читать полностью »

в 8:28, , рубрики: big data, data mining, data science, data scientist, okr, аналитика, карьера, машинное обучение, менеджер продуктов, причинно-следственные связи, причинность, прогнозирование, сложность, управление данными, управление командой, управление персоналом, Управление продуктом

Секретные материалы

В 2014-м году я присоединился к небольшой команде в Schibsted Media Group в качестве 6-го специалиста по Data Science в этой компании. С тех пор я поработал над многими начинаниями в области Data Science в организации, в которой теперь таких уже 40 с лишним человек. В этом посте я расскажу о некоторых вещах, о которых узнал за последние четыре года, сперва как специалист, а затем как менеджер Data Science.

Этот пост следует примеру Robert Chang и его отличной статьи «Doing Data Science in Twitter», которую я нашел очень ценной, когда впервые прочитал ее в 2015-м году. Цель моего собственного вклада ― поведать настолько же полезные мысли специалистам и менеджерам Data Science по всему миру.

Я поделил пост на две части:

  • Часть I: Data Science в реальной жизни
  • Часть II: Управление командой Data Science

Читать полностью »

в 8:27, , рубрики: Новости

Как и было обещано, сегодня компания HMD Global представила смартфон Nokia X5. Аппарат чуть позже появится за пределами Китая под именем Nokia 5.1 Plus, вероятно, с другой ценой.

Итак, новинка, возможно, является самым интересным смартфоном бренда за последнее время из-за соотношения цены и характеристик.

Читать полностью »

в 8:25, , рубрики: Это интересно

Астрономы открыли 12 спутников Юпитера

Читать полностью »

в 8:25, , рубрики: Новости

В ноябре прошлого года компания EnvisionTEC представила 3D-принтер Aria. По словам производителя, эта модель начального уровня открыла новое поколение настольных 3D-принтеров для профессионального применения. В момент анонса устройство было оценено в 6999 долларов.

На этой неделе производитель объявил о снижении цены до 5999 долларов и начале продаж онлайн. Доставка в настоящее время выполняется в пределах Северной Америки и Европы. Срок отгрузки — 4-6 недель с момента размещения заказа.

Читать полностью »

в 8:23, , рубрики: intel, Intel ME, безопасность, Блог компании Positive Technologies, информационная безопасность, прошивки

image

В начале июля компания Intel выпустила два security advisory (SA-00112 и SA-00118), в которых описала исправления в прошивке Intel Management Engine. Оба бюллетеня безопасности описывают ошибки, позволяющие атакующему произвольное выполнение кода на внутреннем процессоре PCH (Minute IA).

Эти ошибки аналогичны тем, которые специалисты по безопасности компании Positive Technologies обнаружили в ноябре прошлого года (SA-00086). Однако история на этом не закончилась, и теперь Intel выпустила новые исправления уязвимостей в ME.Читать полностью »

в 8:21, , рубрики: bitangent, bump mapping, c++, occlusion parallax mapping, OpenGL, opengl 3, parallax mapping, relief mapping, relief parallax mapping, self shadowing, steep parallax mapping, tangent, tangent space, Программирование, разработка игр

OGL3

Parallax Mapping

Техника текстурирования Parallax Mapping по своему эффекту несколько схожа с Normal Mapping’ом, но основана на другом принципе. Схожесть в том, что, как и Normal Mapping, данная техника значительно увеличивает визуальную сложность и детализацию поверхности с нанесенной текстурой заодно создавая правдоподобную иллюзия наличия на поверхности перепадов высот. Parallax Mapping отлично работает в связке с Normal Mapping для создания весьма достоверных результатов: описываемая техника передает эффект рельефа гораздо лучше Normal Mapping, а Normal Mapping дополняет его для правдоподобной имитации динамического освещения. Parallax Mapping вряд ли можно считать техникой, прямо относящейся к методам имитации освещения, но все же я выбрал этот раздел для его рассмотрения, поскольку метод является логическим развитием идей Normal Mapping. Также отмечу, что для разбора этой статьи требуется хорошее понимание алгоритма работы Normal Mapping, в особенности понятия касательного пространства или tangent space.
Читать полностью »

1...789...13
Главная   |  Архив новостей  |   Android  |   Google  |   Apple  |   Microsoft  |   Информационная безопасность  |   Веб – разработка
Публикации RSS  |  Комментарии RSS
https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js