В новой версии методики предлагается тестирование систем при помощи встроенных бенчмарков десяти игр. С учетом возможности раздельного включения трассировки лучей (RT) и технологий динамического масштабирования сформировано 17 видов испытаний. Одновременно представлен набор из трех более простых игр, уже в качестве средств для испытания неигровых систем. Вполне вероятно, что после выхода новых игр 2026 г. методика будет изменена и дополнена.
Ныне действующая методика тестирования компьютерных систем (образца 2020 г.) содержит тестовые версии ПО, созданного годом ранее (в 2019 г.), поэтому заметно устарела: за пять лет сильно изменились и специфика компьютерного «железа», и особенности приложений, с которыми оно работает. Поэтому мы разработали настоящее «расширение» процедуры тестирования вычислительных устройств в среде современных креативных приложений в дополнение к существующей методике.
В новой версии методики предлагается тестирование систем при помощи семи игр 2020-2023 гг. выпуска. Главные требования к ним — наличие встроенных бенчмарков и отображение в отчетах о тестировании средних и минимальных fps. С учетом возможности раздельного включения трассировки лучей (RT) и DLSS сформировано 11 видов испытаний. Одновременно представлен набор из четырех «нетяжелых» игр из методики предыдущего пересмотра, уже в качестве эталонов для испытаний неигровых систем. Вполне вероятно, что после выхода наиболее ожидаемых игр 2024 г. оба списка будут дополнены.
Первым и очевидным этапом тестирования кулеров является измерение температуры процессора во время его максимальной загрузки. Кулеры с активными охлаждающими элементами (вентилятор(ы) и/или помпа) шумят, поэтому на втором этапе мы измеряем уровень шума при работе кулера в различных режимах. Чтобы полученные результаты можно было переносить на другие условия, а именно на различные сочетания температуры окружающего воздуха и максимально допустимой температуры процессора, мы рассчитываем полное термическое сопротивление системы процессор—кулер. Это позволяет определить максимально допустимую мощность, потребляемую процессором, для данного уровня шума. В статье приведена ссылка на страницу с интерактивными графиками, где читатель может ввести свои значения для данных параметров и увидеть полученные значения максимальной мощности, а также сравнить выбранный кулер с другими, протестированными в аналогичных условиях.
Текущая версия методики в основном была разработана в 2019 году, использовать ее мы планируем в 2020-м и, возможно, в первой половине 2021 года. Данный материал является описанием новой методики, причем в первую очередь посвящен не способам измерения производительности и других параметров, а тому, как они будут использоваться непосредственно в серии наших обзоров. Принципиальных изменений по сравнению с предыдущими годами в этот раз немного: игровые тесты уже давно стали опциональными, так что последним радикальным обновлением было добавление тестов реального энергопотребления, ввести которые нас давно просили. В остальном же обновленная тестовая методика использует прежние принципы, что позволяет сравнивать результаты разных лет.
Вентилятор — весьма простая вещь, однако его тестирование не такая тривиальная задача, как может показаться на первый взгляд. Для того чтобы оценить конкретный корпусной вентилятор, мы разработали методику тестирования, которая ориентирована на определение таких важных характеристик, как шум и создаваемый воздушный поток.
Заключительная статья цикла, посвященного новому тестовому пакету iXBT Application Benchmark 2018. Здесь мы кратко обсуждаем набор приложений для тестирования накопителя, а также собираем все тесты воедино и приводим алгоритм расчета интегрального показателя производительности на основе референсных результатов.
В шестой статье цикла мы рассмотрим еще три приложения, которые можно использовать для тестирования процессоров и ПК, но нельзя отнести к одной логической группе: это такие относительно распространенные приложения, как Abbyy FineReader 12, WinRAR 5.50 и 7-Zip 18.
В пятой статье цикла мы опишем подход к использованию программ 3D-рендеринга POV-Ray 3.7, LuxRender 1.6 и Вlender 2.79 в качестве теста процессоров и ПК для нашего нового бенчмарка iXBT Application Benchmark 2018.
В четвертой статье цикла мы опишем подход к использованию программ видеоконвертирования HandBrake 1.0.7, MediaCoder x64 0.8.52 и VidCoder 2.63 в качестве теста процессоров и ПК для нашего нового бенчмарка iXBT Application Benchmark 2018.
В третьей статье цикла мы опишем подход к использованию программ видеоредактирования Adobe Premiere Pro СС 2018, Magix Vegas Pro 15, Magix Movie Edit Pro 2017 Premium, Adobe After Effects CC 2018 и Photodex ProShow Producer 9 в качестве теста процессоров и ПК для нашего нового бенчмарка iXBT Application Benchmark 2018.
Процесс смены методик тестирования компьютерных систем в этом году несколько затянулся, но наконец-то дошел до логического завершения. Вместе с первыми статьями мы (по старой доброй традиции) публикуем и описание новой тестовой методики. Как и в прошлом году, посвящено оно не способам измерения производительности и других параметров (для этого есть соответствующие материалы, указания на которые будут присутствовать ниже), а тому, как они будут использоваться в основной линейке материалов. Соответственно, теоретическая часть почти не изменилась и будет повторена практически дословно (можно было бы ограничиться ссылкой, но, как показала практика, те, кому это в наибольшей степени нужно, по ссылкам не ходят, а информация на деле крайне важна для понимания процесса и результатов). Чтобы в будущем не возвращаться к подобным вопросам, сегодня мы постараемся дать на них полные ответы. Во всяком случае, в части, которая традиционно относится к так называемому «тестированию центральных процессоров».
Обычно тестирование кулеров сводится к измерению температуры процессора при различных режимах его загрузки, то есть оценивается эффективность охлаждения конкретного процессора. Еще одним важным параметром для кулеров является шум, издаваемый ими при работе, который достоверно можно измерить только с помощью чувствительного шумомера и в помещении с очень низким уровнем фонового шума. С нашей точки зрения, наглядным представлением результатов тестирования может быть зависимость уровня шума от температуры процессора при фиксированной нагрузке, когда изменяется только производительность кулера. Однако при этом остается жесткая привязка к используемому процессору и температурным условиям стенда, которые заведомо отличаются от реальных. Поэтому мы дополнили методику расчетом максимально допустимой мощности, потребляемой процессором, для условий нагретого до 44 °C воздуха и комфортного уровня шума.
В наш новый бенчмарк iXBT Game Benchmark 2017 входит одиннадцать новых игр, которые в дальнейшем будут использоваться для измерения игровой производительности при тестировании ноутбуков, моноблоков и игровых ПК.
Новому тестовому пакету iXBT Application Benchmark 2017 мы уже посвятили отдельный цикл из восьми статей, в которых были подробно рассмотрены все тесты. Нам осталось лишь собрать все воедино, сделать последние корректировки по результатам обсуждения на форуме и рассмотреть алгоритм расчета интегрального показателя производительности на основе референсных результатов.
Ранее в цикле статей, посвященных новому тестовому пакету iXBT Application Benchmark 2017, рассматривались тесты, результаты которых в основном определяются производительностью процессора и оперативной памяти. В этой статье, которая завершает наш цикл, мы рассмотрим три теста, результаты которых определяются почти исключительно производительностью накопителя. Эти тесты основаны на приложениях WinRAR и UltraISO, а еще один тест представляет собой простое копирование данных.
Это заключительная статья цикла, посвященного различным реальным приложениям, которые могут использоваться для тестирования процессоров и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В этой статье рассмотрены приложения, которые нельзя отнести к одной логической группе, но они при этом достаточно распространены и известны: Abbyy FineReader 12, WinRAR 5.40, Mathworks Matlab 2016a и Dassault SolidWorks 2016 SP0 с пакетом Flow Simulation. Все эти приложения ориентированы именно на тестирование процессоров. В то же время, производительность ПК, ноутбуков, моноблоков и пр. определяется, конечно, не только процессором, поэтому мы планируем выпустить еще одну статью, в которой будут рассмотрены тесты, результаты которых определяются производительностью накопителя.
Эта статья является шестой в цикле, посвященном различным реальным приложениям, которые могут использоваться для тестирования процессоров, компьютеров, ноутбуков и рабочих станций и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В этой статье рассматриваются программы обработки цифровых фотографий: созданы тесты на основе приложений Adobe Photoshop CС 2015.5 (64-битная версия), Adobe Photoshop Lightroom СС 2015.6.1 и PhaseOne Capture One Pro 9.2.0.118.
Это пятая статья цикла, посвященного различным реальным приложениям, которые могут использоваться для тестирования процессоров, компьютеров, ноутбуков и рабочих станций и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В данной статье рассмотрены тесты на основе программ видеоредактирования и создания видеоконтента Adobe Premiere Pro СС 2015.4, Magix Vegas Pro 13, Magix Movie Edit Pro 2016 Premium v.15.0.0.102, Adobe After Effects CC 2015.3 и Photodex ProShow Producer 8.0.3648.
Это четвертая статья цикла, посвященного различным реальным приложениям, которые могут использоваться для тестирования процессоров, компьютеров, ноутбуков и рабочих станций и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В данной статье рассмотрены тесты на основе видеоконвертеров HandBrake 0.10.5 и MediaCoder x64 0.8.45.5852.
В ходе обсуждения статьи, посвященной использованию пакета FFTW 3.3.5 в роли бенчмарка, выяснилось, что проведенные нами измерения некорректны, поскольку мы фактически измеряли не само время реализации преобразования Фурье, а время планирования этого преобразования, которое не является показательным. Кроме того, мы получили ряд конструктивных предложений, которые позволили нам, что называется, довести данный тест «до ума». Тест с использованием пакета FFTW 3.3.5 был полностью переделан.
Эта статья является третьей в цикле, посвященном различным реальным приложениям, которые могут использоваться для тестирования процессоров, компьютеров, ноутбуков и рабочих станций и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В данной статье рассмотрены тесты на основе программ рендеринга POV-Ray, LuxRender и Blender. Показана зависимость времени выполнения тестовых задач от количества ядер процессора, тактовой частоты процессора и частоты памяти.
Эта статья является второй в цикле, посвященном различным реальным приложениям, которые могут использоваться для тестирования процессоров, компьютеров, ноутбуков и рабочих станций и которые в дальнейшем будут положены в основу нового тестового пакета iXBT Application Benchmark 2017. В данной статье рассмотрены тесты на основе математических приложений FFTW и GNU Octave. Показана зависимость времени выполнения тестовых задач от количества ядер процессора, тактовой частоты процессора и частоты памяти.
Первая статья из цикла, посвященного приложениям, которые могут использоваться для тестирования процессоров и ПК и которые в дальнейшем составят основу тестового пакета iXBT Application Benchmark 2017. В данной статье рассмотрены тесты на основе приложений молекулярной динамики LAMMPS и NAMD. Показана зависимость времени выполнения тестовых задач от количества ядер процессора, тактовой частоты процессора и частоты памяти.
Методики измерения производительности компьютерных систем в разных задачах мы обычно документируем достаточно подробно, а вот сам по себе процесс их использования на практике — не всегда. Однако, как выяснилось, в некоторых случаях требуются подробные разъяснения: что это, и как можно воспользоваться полученными результатами. Чтобы в будущем не возвращаться к подобным вопросам, сегодня мы постараемся дать на них полные ответы. Во всяком случае, в той части, которая относится к тому, что традиционно называется «тестированием центральных процессоров» и 2016 году. Возможно также, что и к началу 2017-го: смена версий методик не всегда совпадает со сменой календарных лет. В принципе, принципиальных изменений по сравнению с предыдущими годами тоже немного — существенным добавлением являются лишь тесты энергопотребления, ввести которые давно просили некоторые из наших читателей. В остальном же тестовые методики являются согласованными друг с другом, а один и тот же референсный уровень при желании позволит сравнивать и результаты разных лет (разумеется, лишь приблизительно и осторожно), что особенно актуально для тех решений, повторные тестирования которых проводиться не будут. Поэтому в ближайшее время мы планируем не только тестировать новинки рынка, но и обеспечить достаточное количество «опорных точек» для интересующихся сопоставимостью результатов разных методик. Тем более, подробные результаты прошлых лет уже были опубликованы, а новые (постоянно обновляемые) будут доступны изначально, что позволит желающим иногда сравнивать не только процессоры, но и разные версии программного обеспечения — во всяком случае, когда собственно тестовые задания не изменялись.
