Intel манипулировала результатами тестов процессоров

securitylab.ru — Организация по оценке производительности систем SPEC (Standard Performance Evaluation Corporation) аннулировала более 2600 результатов тестирования процессоров Intel Xeon за 2022 и 2023 годы. Причина – использование Intel специальных компиляторов, которые искусственно завышали показатели производительности в бенчмарке CPU 2017.
Новости, Технологии | DmitryX86 05:18 18.02.2024
20 комментариев | 57 за, 0 против |
#1 | 05:19 18.02.2024 | Кому: Всем
Конкретно, речь идет о тестах CPU 2017 от SPEC , в которых Intel обвиняется в том, что компиляторы были настроены таким образом, чтобы специально повысить производительность по определенным показателям, что в результате могло привести к завышению результатов на 9%. Это обнаружение было сделано в ходе анализа собственной базы данных бенчмарков SPEC, которые, хотя и не будут удалены для сохранения исторической ценности, тем не менее, были объявлены недействительными для отчетов организации.

Такие действия Intel вызвали обеспокоенность, поскольку бенчмарки играют ключевую роль в оценке производительности оборудования, и их результаты могут влиять на решения компаний о многомиллионных инвестициях. Этот инцидент поднимает вопросы о достоверности и прозрачности тестирования производительности, особенно учитывая, что обвинения в манипулировании результатами бенчмарков не являются чем-то новым в технологической индустрии.

Важно отметить, что процессоры Xeon и тест SPEC 2017 предназначены для использования в промышленных и образовательных приложениях, что делает их менее релевантными для обычных потребителей. Тем не менее, этот случай подчеркивает общую проблему доверия к результатам тестирования производительности в индустрии.
#2 | 05:29 18.02.2024 | Кому: Всем
Да не может быть!!! Светлоликие правильные рксово афроверные американцы и вдруг соврали!!!
Это всё Путин, небось!!!
Logen Logenov
интеллектуал »
#3 | 06:12 18.02.2024 | Кому: Всем
Цифровой допинг?
#4 | 06:13 18.02.2024 | Кому: Всем
9%? пф!!!
#5 | 06:24 18.02.2024 | Кому: Всем
В Интеловский компилятор встроили оптимизацию, которая работает как на процессорах интела, так и на процессорах AMD - потому что она работает на стадии компиляции, а не рантайма. Хотя тут надо сказать, что интеловский компилятор традиционно генерирует код, который работает хуже на AMD, поэтому результат компиляции не надо запускать на не-интеловских процессорах, но это уже другая история :)

В целом, в заметке к результатам теста, на которые все ссылаются, написано, что SPEC-у не нравится, что эта оптимизация имеет узкую применимость, поэтому они далее они её будут отключать. Но не написано, что эта оптимизация работает исключительно в том самом одном тесте SPEC, что было бы очевидным "жульничеством". Сам SPEC, в отличие от журналистов, никого в жульничестве не обвиняет.

В целом, считаю, что эта оптимизация - в серой зоне. Кому интересно, тот может подождать более подробного разбора; если и правда дело не чисто, наверняка они появятся в большом количестве.
#6 | 06:28 18.02.2024 | Кому: Всем
Дополнительно - вот гораздо более явное "жульничество" со стороны микрософта:

[censored]

Если кратко: когда говно динозавров было ещё свежее, мелкомягких подловили на том, что в IE9 встроили оптимизацию, которая работала исключительно с одним конкретным тестом из популярного бенчмарка, и ломалась, если в этот тест вносились совсем крошечные изменения, которые, по идее, ничего не меняли.
#7 | 06:56 18.02.2024 | Кому: omicron
Вот как теперь выть, биться и хрипеть, а?
#8 | 07:49 18.02.2024 | Кому: Всем
Ну никогда такого не было!
#9 | 08:32 18.02.2024 | Кому: Всем
Вы еще про "честные нанометры" не читали.
#10 | 09:00 18.02.2024 | Кому: Всем
Да всегда так было, "некоторые" тесты очень "оптимизировались" под работу определённых процессоров.

А как пошли P4, так тесты срочно допиливались под удлинённый конвейер, а то не так всё красиво выходило.

Интел собаку съел на своих компиляторах. А может даже и слона. И где надо кому надо бонусы подкладывал. Интел умеет в капитализм.

АМД так не умела. Но говорят, тоже уже научилась. Вечные лавры догоняющего их немного подзадолбали.

Когда АМД, наконец и по TDP подойдет к Интелу, буду считать 1:1.
#11 | 09:22 18.02.2024 | Кому: Всем
Помнится, в БИОСах ещё несколько лет назад встречалась опция ускорения теста 3DMark01. Т.е. специально оптимизация под весьма древний тест для материнок, выпускавшихся в 2018-2019 гг.
[censored]
[censored]
#12 | 09:30 18.02.2024 | Кому: mastan
UEFI и 3DMark 2001, в этом что-то есть волшебное!

[censored]
#13 | 11:44 18.02.2024 | Кому: Enigma
>> -41

Чот не вкурил ваще, а нахера оно тогда надо? Эфект плацебо вызывать?
#14 | 14:11 18.02.2024 | Кому: Enigma
> UEFI и 3DMark 2001, в этом что-то есть волшебное!

Просим, нет, требуем некоторых пояснений!!! Чтобы не было недосказанностей.
#15 | 15:43 18.02.2024 | Кому: Beholder
UEFI - эдак с 2017 года заполонил планету в мамках и ноутах
К этому времени процыки стали толще жирнее матёрее
К этому времени какой гефорс2МХ400 уже превратился в памятник и любая встроенная видяха показывает достойные результаты.

Но.

Остро необходима мифическая оптимизация для тестилки из 2001 года смысла в которой нет. Никакого.
Не хватает мощности среднестатистического современно барахла внутри кампов, что приходиться оптимизировать что-то для приложение аж из 2001 года. Не халва первая, не квака, не анрилка, а 3дМарк.

Волшебство. Это волшебное волшебство!!!
#16 | 16:23 18.02.2024 | Кому: Enigma
> АМД так не умела

Зато АМД первыми придумали частоту процессора в попугаях измерять.
#17 | 16:24 18.02.2024 | Кому: Всем
Вы ещё вспомните, как провайдеры пакеты от СпидТеста без очереди пропускают.
#18 | 16:29 18.02.2024 | Кому: Enigma
> Остро необходима мифическая оптимизация для тестилки из 2001 года смысла в которой нет. Никакого.
> Не хватает мощности среднестатистического современно барахла внутри кампов, что приходиться оптимизировать что-то для приложение аж из 2001 года. Не халва первая, не квака, не анрилка, а 3дМарк.
>
> Волшебство. Это волшебное волшебство!!!

Вот это и интересовало. Тестилки эти помним, любим, скорбим.
#19 | 21:37 18.02.2024 | Кому: Enigma
> Когда АМД, наконец и по TDP подойдет к Интелу, буду считать 1:1.

Вообще-то по TDP современный АМД к Интелу не то что подошёл, а оставил далеко позади.
Рязань уже несколько лет как более выгодный выбор в ноутбук, в полноформатном сегменте Ryzen 9, конечно, печка, но Core i9 - термоядерный реактор.
#20 | 16:30 19.02.2024 | Кому: максимум 20 символов
Неверно. Частоту они как измеряли в Герцах, так и измеряют. Речь, я полагаю, о P-rating? Ну так он на тот момент напрашивался, поскольку напрямую сравнивать частоты камней на разных архитектурах и делать выводы о производительности - глупость.
Войдите или зарегистрируйтесь чтобы писать комментарии.