Компания Primate Labs выпустила новое обновление для своего бенчмарка Geekbench для процессоров и графических процессоров, в котором предусмотрены меры по выявлению оптимизаций Intel BOT. Если будет обнаружено вмешательство в исполняемый код, то в соответствии с принципами работы BOT Geekbench 6.7 пометит результат, чтобы пользователи могли учитывать это при сравнении показателей.

Немного истории. На прошлой неделе компания Primate Labs опубликовала расследование об инструменте двоичной оптимизации Intel (Binary Optimisation Tool, BOT), в котором показала, как эти оптимизации могут искажать результаты сравнений производительности в пользу процессоров Intel. BOT находится между загрузчиком ОС и процессором и изменяет последовательность инструкций для повышения производительности в предварительно одобренных приложениях, таких как Geekbench.

Сравнение результатов тестов с включенной и выключенной функцией BOT на ноутбуке с процессором Core 9 386H показало, что при включенной функции BOT результаты улучшаются на 5,5 %, а в некоторых случаях прирост достигает 30 %. Понятно, что при сравнении результатов Geekbench между процессорами разных производителей процессоры Intel будут выглядеть быстрее, что может повлиять на восприятие пользователей.

В связи с этим, а также для обеспечения равных условий конкуренции между брендами, начиная с версии 6.7, Geekbench будет отслеживать, включена ли функция Intel BOT в тестовой системе. При обнаружении этой функции в отчете о тестировании на странице с результатами появится предупреждающее сообщение, чтобы пользователи могли легко отличить результаты, которые не следует сравнивать между брендами.

Помимо этого нового метода обнаружения, в Geekbench 6.7 также улучшена идентификация процессоров Arm и RISC-V: теперь вместо общего названия отображается производитель и модель SoC. Полный список изменений приведен ниже:

• Добавьте функцию обнаружения Intel BOT. Geekbench 6.7 может определить, включена ли функция Intel BOT в текущей системе. Если она включена, результаты тестов в браузере Geekbench будут помечены как недействительные. Этот код обнаружения является частью нашей работы по обеспечению сопоставимости результатов Geekbench на разных системах и платформах.
• Улучшена идентификация SoC на Android. В Geekbench 6.7 теперь указывается производитель и модель SoC (например, QTI SM8850) вместо архитектуры SoC (например, ARM ARMv8).
• Улучшена идентификация процессора на базе RISC-V. Теперь Geekbench сообщает название процессора, а не (иногда невероятно длинную) строку с описанием архитектуры RISC-V. Обратите внимание, что Geekbench для Linux RISC-V все еще находится на стадии предварительной версии и доступен на странице предварительных версий.
• Повышена стабильность работы на системах Linux ARM. В Geekbench 6.7 исправлены зависания, которые могли возникать при многопоточных нагрузках в системах Linux ARM. Обратите внимание, что Geekbench для Linux ARM все еще находится на стадии предварительного тестирования и доступен на странице предварительных версий.

Обратите внимание, что это изменение не влияет на способ измерения производительности. Результаты Geekbench 6.7 полностью сопоставимы с результатами Geekbench 6.3, 6.4, 6.5 и 6.6. В целом мы считаем, что это изменение необходимо, несмотря на то, что Intel BOT действительно повышает производительность в нескольких совместимых приложениях. Другими словами, это сделано только для того, чтобы сравнения были объективными, поэтому конечным пользователям определенно стоит включать Intel BOT в совместимых приложениях, поскольку прирост производительности может достигать 18% в таких играх, как Shadow of the Tomb Raider.

Выводы

• Обновление Geekbench 6.7 стало важным шагом к повышению честности тестирования процессоров, так как теперь бенчмарк умеет определять использование Intel Binary Optimisation Tool (BOT).
• Главная проблема ранее заключалась в том, что BOT модифицировал исполняемый код тестов, увеличивая производительность (иногда до десятков процентов), но при этом такие результаты выглядели как «чистая» мощность CPU.
• Из-за отсутствия детекции все результаты на совместимых CPU считались потенциально недостоверными, что сильно подрывало сравнимость между Intel, AMD и другими платформами.
• В версии 6.7 ситуация изменилась:
  • теперь BOT распознаётся автоматически
  • результаты с его использованием помечаются как недействительные (invalid)
  • «чистые» тесты снова можно сравнивать напрямую
• Это решение — компромисс:
  • с одной стороны, оно не запрещает оптимизации Intel
  • с другой — разделяет реальные и “искусственно ускоренные” результаты, возвращая доверие к бенчмарку
• В целом ситуация показывает, что индустрия движется к более прозрачным и честным методам тестирования, где любые оптимизации должны быть явно обозначены.

Сообщение В Geekbench 6.7 добавлена функция обнаружения Intel BOT, которая помечает некорректные результаты тестов для удобства сравнения появились сначала на Новости технологий, игр и гаджетов — AndreyEx News | Всё о IT, железе и инновациях.

Разработчики популярного бенчмарка Geekbench выразили обеспокоенность по поводу новой технологии Intel — Binary Optimization Tool (BOT, также известной как iBOT). По их мнению, данный инструмент способен существенно влиять на результаты тестов, создавая не совсем корректное представление о реальной производительности процессоров.

Поводом для обсуждения стали результаты тестирования новых процессоров Intel Core Ultra, в которых наблюдался неожиданный рост производительности. После детального анализа специалисты пришли к выводу, что прирост связан не столько с архитектурными улучшениями, сколько с работой самой технологии оптимизации.

Что такое Intel Binary Optimization Tool

Binary Optimization Tool — это инструмент, который изменяет уже скомпилированные программы (бинарные файлы), оптимизируя их под конкретную архитектуру процессора. В отличие от классических компиляторов, которые оптимизируют код заранее, BOT работает уже после сборки программы.

По сути, технология анализирует исполняемый файл и переписывает его участки так, чтобы они эффективнее использовали возможности конкретного CPU. Например, она может заменять последовательные (scalar) инструкции на векторные (SIMD), позволяя обрабатывать сразу несколько данных за одну операцию.

В результате таких преобразований снижается общее количество инструкций и повышается эффективность выполнения кода. В отдельных тестах Geekbench зафиксировал уменьшение числа инструкций примерно на 14% и рост доли векторных операций более чем в 10 раз.

Почему Geekbench считает результаты некорректными

Главная проблема заключается в том, что BOT оптимизирует не реальные приложения пользователя, а конкретные тестовые сценарии. Это означает, что бенчмарк может показывать «идеальные» условия, которые редко встречаются в повседневной работе.

Geekbench отмечает несколько ключевых проблем:

• Ограниченная поддержка приложений — BOT работает лишь с небольшим списком программ, включая сам Geekbench.
• Искажение результатов — оптимизация делает процессор «быстрее» в тесте, чем в реальности.
• Снижение сопоставимости — результаты нельзя корректно сравнивать с CPU без такой оптимизации.
• Отсутствие прозрачности — Intel не раскрывает все детали работы инструмента.

В результате Geekbench пришёл к выводу, что такие тесты измеряют не «реальную производительность», а эффективность оптимизации под конкретный бенчмарк.

Насколько сильно BOT влияет на результаты

Согласно тестам, общий прирост производительности составляет около 5–8%, однако в отдельных сценариях (например, обработка изображений или HDR) ускорение может достигать 30–40%.

Такая разбежка говорит о том, что оптимизация носит точечный характер и наиболее эффективна в заранее подготовленных нагрузках.

Кроме того, была замечена дополнительная задержка при запуске теста — до 40 секунд при первом запуске, что также указывает на активную обработку бинарного файла перед выполнением.

Почему это важно для индустрии

Бенчмарки играют ключевую роль в оценке процессоров, особенно при сравнении решений разных производителей, таких как Intel и AMD. Если результаты могут быть искусственно улучшены, это подрывает доверие к тестам в целом.

Ситуация с BOT поднимает важный вопрос: что именно должны измерять бенчмарки — реальную производительность или максимально возможную эффективность при идеальных условиях?

Если подобные технологии станут массовыми, индустрия может столкнуться с «гонкой оптимизаций», где производители будут адаптировать код под конкретные тесты, а не под реальные задачи пользователей.

Реакция Geekbench

В ответ на ситуацию разработчики Geekbench начали помечать результаты, полученные с использованием BOT, как потенциально недостоверные. Это временная мера, направленная на сохранение доверия к платформе.

В будущих версиях бенчмарка планируется внедрение механизмов обнаружения подобных оптимизаций, чтобы отделять «чистые» результаты от модифицированных.

Выводы

Технология Intel Binary Optimization Tool демонстрирует впечатляющие возможности по ускорению программ без изменения исходного кода. Однако её текущее применение вызывает серьёзные вопросы в контексте бенчмарков.

С одной стороны, это реальный способ повысить производительность. С другой — ограниченность применения и отсутствие прозрачности делают результаты тестов менее объективными.

Пока BOT остаётся нишевой технологией, её влияние ограничено. Но если подобные инструменты станут стандартом, индустрии придётся пересмотреть подход к тестированию производительности.

FAQ

Что такое Intel Binary Optimization Tool?

Это инструмент, который оптимизирует уже скомпилированные программы, изменяя их код для повышения производительности на конкретных процессорах Intel.

Почему Geekbench критикует эту технологию?

Потому что она может искажать результаты тестов, делая процессоры быстрее в бенчмарках, чем в реальных условиях использования.

Насколько сильно BOT увеличивает производительность?

В среднем прирост составляет 5–8%, но в отдельных задачах может достигать 30–40%.

Можно ли считать такие результаты честными?

С точки зрения Geekbench — нет, поскольку они отражают оптимизированные сценарии, а не типичную нагрузку.

Будет ли технология развиваться дальше?

Да, Intel может расширить поддержку BOT, но для этого потребуется повысить прозрачность и обеспечить корректное сравнение результатов.

Сообщение Geekbench недоволен бинарной оптимизацией Intel: результаты тестов могут быть завышены появились сначала на Новости технологий, игр и гаджетов — AndreyEx News | Всё о IT, железе и инновациях.

Инструмент Intel для двоичной оптимизации может повысить производительность процессора Core Ultra 200S Plus в играх, но использование этой функции в Geekbench 6 вызвало неожиданную реакцию со стороны разработчика бенчмарка. В частности, Primate Labs помечает все результаты, полученные на совместимых процессорах, как потенциально неверные.

Основатель компании Джон Пул опубликовал пост в блоге на сайте Geekbench, в котором объяснил, что в настоящее время у компании нет возможности определить, отражают ли результаты использование инструмента бинарной оптимизации или нет. Это проблема, поскольку из-за этого становится сложнее сравнивать результаты. Согласно нашему обзору Core Ultra 7 270K Plus, функция Intel увеличивает количество баллов на 6%.

В связи с этим на всех результатах тестов процессоров, совместимых с инструментом двоичной оптимизации, теперь отображается баннер со следующим текстом: «Этот результат теста может быть недействительным из-за инструментов двоичной модификации, которые могут работать в этой системе». Primate Labs называет эту меру «временным решением», которое, вероятно, будет действовать до тех пор, пока не будет найдено долгосрочное решение совместно с Intel.

Я считаю, что формулировка Primate Labs несколько резковата, поскольку я бы не стал называть результаты, полученные с помощью инструмента бинарной оптимизации, недействительными. Однако легко понять, почему компания указывает на возможность использования этой функции. В конце концов, исходя из нашего собственного опыта, Core Ultra 5 250K Plus может превзойти Ryzen 5 9600X в одноядерных тестах только благодаря этой функции.

Подобные проблемы — обычное дело для большинства новейших приложений, особенно таких, как инструмент бинарной оптимизации. Я помню, что при запуске приложения для оптимизации приложений тоже возникали сложности, но с тех пор это программное обеспечение стало тем, что я рекомендую всем, у кого есть игровой ПК на базе процессора Intel. Поэтому я уверен, что эта функция и Primate Labs скоро начнут работать вместе.

Чтобы узнать больше об обновлении Arrow Lake, ознакомьтесь с нашим приложением my Core Ultra 7 270K Plus vs. Ryzen 7 9700X руководство для тщательного анализа того, как эти два чипа взаимодействуют друг с другом.

Выводы

Ситуация вокруг Geekbench и Intel Binary Optimization Tool показывает важную проблему современных бенчмарков — снижение сопоставимости результатов. Из-за того, что Geekbench не может определить, применялась ли оптимизация бинарного кода, результаты тестов теряют прозрачность и становятся менее надежными для прямого сравнения.

С одной стороны, технология Intel действительно способна повышать производительность (в среднем на несколько процентов), что делает её полезной для реальных задач. С другой — подобные оптимизации могут искажать синтетические тесты, особенно если они применяются выборочно или незаметно для инструментов анализа.

Решение Geekbench помечать результаты как «потенциально недействительные» выглядит временной, но логичной мерой. Это попытка сохранить доверие к базе результатов до тех пор, пока не появится механизм точного определения использования оптимизаций.

В перспективе можно ожидать, что:

• либо бенчмарки научатся корректно учитывать такие технологии,
• либо индустрия пересмотрит подход к тестированию производительности в целом.

FAQ

Что такое Intel Binary Optimization Tool?

Это инструмент Intel, который оптимизирует уже скомпилированные программы на уровне бинарного кода, повышая эффективность выполнения без изменения исходников.

Почему Geekbench считает результаты «недействительными»?

Потому что он не может определить, применялась ли оптимизация. Это нарушает честное сравнение между процессорами.

Насколько сильно влияет оптимизация на результаты?

По данным тестов, прирост может достигать примерно 6–8% в синтетических бенчмарках, а в отдельных сценариях — выше.

Это значит, что Intel «накручивает» тесты?

Не совсем. Оптимизация реальна и повышает производительность, но проблема в том, что она делает результаты несравнимыми с системами без неё.

Будет ли проблема решена?

Скорее всего да. Geekbench уже называет текущие меры временными и работает над способом корректного учета таких оптимизаций.

Сообщение Geekbench называет результаты бинарной оптимизации Intel «недостоверными», но эта оценка может измениться появились сначала на Новости технологий, игр и гаджетов — AndreyEx News | Всё о IT, железе и инновациях.

Arrow Lake Refresh должен стать приемлемым вариантом обновления для пользователей Intel начального и среднего уровня, но энтузиасты вряд ли найдут в нём что-то стоящее своих денег.

Новые процессоры Intel Arrow Lake Refresh начинают появляться в обычных базах данных для тестирования производительности, что даёт нам чёткое представление о том, на какую производительность мы можем рассчитывать. Сегодня в центре внимания процессор Core Ultra 7 365K от Blue Team с 20 ядрами, из которых 8 P-ядер и 12 E-ядер.

Хотя утверждается, что чипы Intel Arrow Lake Refresh немного превосходят по производительности своих собратьев Core Ultra 200, этот ранний тест показывает, что это не так. Согласно результатам Geekbench 6, Core Ultra 7 365K набрал 2140 баллов в одноядерном тесте и 19 744 балла в многоядерном. Оба этих показателя ниже, чем у его предшественника, Core Ultra 7 265K, который опережал его на 5,7 % в многоядерных тестах и на целых 41,6 % в одноядерных. Однако следует отметить, что Geekbench — не самый точный тест.

Кроме того, в то время как предыдущие слухи говорили о возможном повышении частоты Arrow Lake Refresh, Geekbench сообщает об обратном. Если Core Ultra 7 265K работает на частоте до 5,5 ГГц, то, по данным Geekbench, обновлённый чип работает на частоте до 5,4 ГГц. Если бы это было совершенно новое поколение, это не было бы проблемой, так как любое незначительное увеличение IPC компенсировало бы снижение частоты, но поскольку от Arrow Lake Refresh не ожидается каких-либо существенных изменений, мы задаёмся вопросом, почему частота была снижена. Единственное логичное объяснение состоит в том, что этот процессор является инженерным образцом и не разблокирован полностью.

Также сообщается, что Arrow Lake Refresh может похвастаться улучшенным NPU (нейронным процессором) и оптимизированным программным обеспечением, предназначенным для игр и повышения производительности, но это не отразится на результатах Geekbench. Другими словами, мы можем увидеть положительный прирост производительности в определённых приложениях, когда эти процессоры будут выпущены, но не стоит возлагать на это большие надежды.

Хорошая новость заключается в том, что новые процессоры Core Ultra 300 будут совместимы с существующими материнскими платами LGA1851, что подтверждается работой Core Ultra 7 365K на MSI Pro Z890-A Wi-Fi. Таким образом, даже если производительность не сильно повысится, у тех, кто использует платформу Intel начального или среднего уровня, по крайней мере, появится возможность перейти на более продвинутую версию. Понятно, что лучше всего дождаться Nova Lake, но иногда выбора нет.

Хотя Intel ещё не анонсировала линейку Arrow Lake Refresh, если она когда-нибудь выйдет, то, скорее всего, в этом году, поскольку выпуск Nova Lake ожидается в 2026 году. Если реальная производительность этих чипов будет такой же, как в сегодняшнем тесте, Intel может вообще отказаться от этой линейки, поскольку она не будет иметь смысла в сравнении со старыми, более дешёвыми и быстрыми процессорами.

Сообщение Процессор Intel Arrow Lake Refresh Core Ultra 7 365K не впечатлил в первых тестах Geekbench появились сначала на Новости технологий, игр и гаджетов — AndreyEx News | Всё о IT, железе и инновациях.

TOPS (Tera Operations per Second) стал удобным сокращением для описания возможностей глубокого обучения компонента. Однако существует множество переменных, которые влияют на то, как оборудование обрабатывает искусственный интеллект. В попытке уравнять возможности, от процессоров до смартфонов, Geekbench запустил свой новый бенчмарк ИИ.

Называемый просто Geekbench AI, этот тест позволяет вам провести ваш компьютер через несколько тестов, чтобы проверить, как он справляется с задачами ИИ. В конце тестов ваша система получает оценку, которую вы можете бесплатно сравнить с другими устройствами. Вы можете загрузить приложение для себя сейчас, на Windows, Linux, macOS, iOS и Android.

Geekbench AI включает в себя несколько рабочих нагрузок компьютерного зрения, а именно: классификация изображений, сегментация изображений, обнаружение объектов, обнаружение лиц, оценка позы, оценка глубины, сверхразрешение изображений и перенос стиля. Подробнее о каждом из них можно узнать в документации Geekbench.

В настоящее время версия Windows имеет два фреймворка ИИ для своих тестов: OpenVINO и ONNX. В то время как и лучшие ЦП и видеокарты могут справиться с последним, только процессоры могут конкурировать в первом ринге. Оба являются open-source-проектами с авторами, включая Facebook*, Microsoft и Intel.

Поскольку мы не можем упустить возможность протестировать свой ПК, естественно, пришлось скачать Geekbench AI и попробовать его. Без лишних слов, вот результаты Ryzen 5 7600X (работает в режиме ECO) и Radeon RX 7900 XT:

Как и ожидалось, результаты с одной из лучших видеокарт на рынке затмевают результаты процессора начального уровня. Обратите внимание, что GeekBench калибрует свои тесты ИИ по Intel Core i7-10700 с базовым баллом 1500.

Хотите протестировать свой ПК? Загрузите приложение из Geekbench (597 МБ) и запустите его, это займет всего пару минут. Между тем, если вы хотите сравнить производительность вашего ИИ с другими устройствами, ознакомьтесь с таблицей ML Benchmark Chart от разработчика Primate Labs.

Сообщение Geekbench AI проверяет интеллект вашего ПК появились сначала на Новости технологий, игр и гаджетов — AndreyEx News | Всё о IT, железе и инновациях.