Архив за 23 сентября 2024 - 9

Самые популярные LLM бенчмарки - 1

Зачем использовать бенчмарки для оценки LLM?

Бенчмарки LLM помогают оценивать точность больших языковых моделей, обеспечивая стандартизированную процедуру измерения метрик выполнения различных задач.

Бенчмарки содержат все структуры и данные, необходимые для оценки LLM, в том числе:

  • «Эталонные» датасеты (релевантные задачи/вопросы/промты с ожидаемыми ответами)
  • Способы передачи входных промтов в LLM
  • Способы интерпретации/сбора ответов
  • Вычисляемые метрики и оценки (а также способы их вычисления)

Всё вместе это позволяет согласованным образом сравнивать точность разных моделей. Но какой же бенчмарк LLM стоит использовать? В основном это зависит от сценария использования, то есть от того, для чего вы намереваетесь применять LLM. Давайте разбираться!
Читать полностью »

Volkswagen, отвечая на сообщения о закрытии своего завода в Нанкине, заявила, что корректировка производственной базы является «необходимой», о чем пишет Reuters со ссылкой на китайское СМИ Yicai.

«Исходя из корпоративного стратегического планирования и реакции на рыночные тенденции, корректировка производственной базы компании является нормальным и необходимым деловым поведением», — заявил представитель Volkswagen.

Ожидается, что Министерство торговли США в понедельник предложит запретить использование китайского программного и аппаратного обеспечения в машинах на американских дорогах из-за проблем национальной безопасности, о чем пишет Reuters со ссылкой сразу на два источника.

Администрация Байдена выразила серьезную обеспокоенность по поводу сбора китайскими компаниями данных о водителях и инфраструктуре США, а также потенциальной иностранной манипуляции транспортными средствами, подключенными к Интернету и навигационным системам.

Привет, жители Хабра. С вами Виктор Сергеев из МТС Диджитал. В начале 2024 года в продажу поступил модульный ноутбук MNT Pocket Reform от компании MNT Research, о котором мы уже писали. Это устройство с хорошей ремонтопригодностью, которое еще и неплохо защищено с точки зрения информационной безопасности. Сейчас вышла новая модель — MNT Reform Next, это уже второе поколение устройства. Что она умеет, читайте под катом.

Читать полностью »

Министерство энергетики США (DOE) объявило о планах выделить более 3 миллиардов долларов на более чем два десятка проектов по производству аккумуляторных батарей в 14 штатах. Деньги пойдут на переработку критически важных минералов, производство аккумуляторов и их компонентов, а также на переработку батарей.

Аккумуляторы становятся все более востребованным товаром, необходимым для электромобилей и для хранения возобновляемой энергии из солнечных и ветровых проектов. Новые аккумуляторные мощности появляются по всей территории США отчасти благодаря федеральной поддержке в виде грантов, займов и налоговых льгот.

За 8 месяцев 2024 года через Уссурийскую таможню в Россию ввезли почти 6,5 тысячи легковых автомобилей, предназначенных для частного использования. Как сообщили в Дальневосточном таможенном управлении, это примерно в пять раз больше, чем за тот же период прошлого года.

Около 1,6 тыс. машин завезли в августе. Половины из них выпущена в Китае, но относятся к японским, корейским или европейским брендам. В Уссурийской таможне отметили, что ранее такие случаи считались единичными.

Команда «Авто.ру» объявила о запуске полезного обновления на платформе. Как сообщили в пресс-службе, в отчёты «Авто.ру» внедрили нейросеть Яндекса YandexGPT. Нейросеть составляет ёмкое изложение истории машины с акцентом на количестве владельцев, юридической чистоте и наличии ДТП. 

На рынке коллекционных автомобилей появилось уникальные предложение – Ferrari 612 TR Teppista 2008 года выпуска, единственный в своем роде экземпляр, оценённый в 9 миллионов долларов.

За основу взяли Ferrari 250 Testarossa 1957 года выпуска, под капотом стоит двигатель V12 объёмом 5,7 литра.

Сегодня, 23 сентября 2024 года, должно состояться возвращение на Землю троих членов экипажа с Международной космической станции. Процесс это не быстрый и сейчас уже завершился один из важных этапов — космонавты Роскосмоса Олег Кононенко и Николай Чуб, а также астронавт NASA Трейси Дайсон перешли на борт  «Союза МС-25» и закрыли переходные люки между бытовым отсеком корабля и модулем «Причал» российского сегмента МКС. 

BAIC Group, которая входит в десятку крупнейших производителей автомобилей в Китае и является вторым по величине производителем коммерческих автомобилей в стране, объявила о смене логотипа.


https://ajax.googleapis.com/ajax/libs/jquery/3.4.1/jquery.min.js