Samsung снова уличили в мошенничестве в бенчмарках

Проводя тестирование недавно выпущенного планшетофона Samsung Galaxy Note 3, представители портала Arstechnica обратили внимание на то, что в тестах его результаты заметно выше, чем у аппарата LG G2, также представленного не так давно. Примечателен этот факт тем, что в обоих случаях используются процессоры Qualcomm Snapdragon 800, так что результаты должны быть сходными.

Похожая история ранее в этом году приключилась и с моделью Samsung Galaxy S4, так что речь идёт об уже отработанном методе. Как и тогда, был обнаружен специальный режим работы центрального процессора, который повышает производительность и уровень энергопотребления только в популярных бенчмарках. Тогда это было обнаружено на предназначенных для международных рынков аппаратах, теперь на версии для США. Впервые был найден способ деактивации этого режима, так что появилась возможность проанализировать, насколько он повышает тестовые результаты.

Обнаружить этот режим удалось за счёт скорости процессора в режиме ожидания, которая отображается в приложении мониторинга. При простое три из четырёх вычислительных ядер отключены, а последнее потребляет минимальное количество энергии, работая на частоте всего в 300 МГц. При переходе к бенчмаркам включаются на постоянной основе все ядра, достигая максимальной частоты в 2,3 ГГц. Бенчмарки разрабатываются для анализа производительности при стандартных вариантах использования аппаратов в распространённых приложениях, а полную и постоянную нагрузку, которая быстро расходует аккумулятор, стандартным сценарием не назовёшь.

Путём хитрых манипуляций, к числу которых относилась перекомпиляция бенчмарка Geekbench 3 под новым именем, чтобы аппарат не знал, что он работает с бенчмарком, удалось проанализировать прирост производительности и тестовых результатов в данном режиме. Разница в полученных результатах с режимом полной активации и без него показана на графике ниже. Прирост составляет около 20% и результаты в нормальном режиме примерно равны результатам LG G2. Величина прироста наводит на мысль о том, что задействованием всех вычислительных ядер дело не ограничивается.

Анализ активирующего режим файла показал, что он работает со многими берчмарками, такими как Quadrant, Antutu, Linpack, GFXBench и собственными бенчмарками Samsung, активируя также увеличение частоты кадров на дисплее. Эти бенчмарки также были перекомпилированы и показали такой же рост результатов в 20%, кроме Linpack, где он составил разом 50%. Под подозрение попадают и другие устройства южнокорейской компании - в частности, скоро будет исследован планшет Samsung Galaxy Note 3.