Для чего предназначен тест MobileMark2002?
Тест, разработанный консорциумом BAPCo (Business Applications Performance Corporation), является первым тестом, одновременно измеряющим время автономной жизни и производительность ноутбука. Минимальные системные требования таковы:
- операционная система Windows XP (Professaional или Home) или Windows 2000 SP2;
- 128 MB RAM;
- 2.0 GB свободного места на жестком диске для инсталляции и 100 МВ во время выполнения.
Зачем нужны такие тесты?
По мере развития рынка мобильных компьютеров естественным образом происходит и их дифференциация по размерам, производительности и назначению. Четкой классификации на данный момент нет, но крайние позиции выделить можно.
С одной стороны — это ноутбуки, предназначенные, по сути, для того, чтобы выполнять функции настольного компьютера. Зачастую такие модели комплектуются не мобильным, а обычным процессором (последний пример — ASUS L3), и время автономной работы для них не имеет особого значения. Габариты и вес этих моделей таковы, что с ними особенно не побегаешь. Основная задача батареи — обеспечить непрерывность работы при перемещении ноутбука т.е не допустить потери информации. На первом же месте — производительность при работе от сети.
На другом полюсе — ультрапортативные и субноутбуки. Здесь основное внимание уделяется снижению веса и габаритов, пусть и за счет падения производительности. Как правило, эти модели комплектуются мобильными процессорами с малым энергопотреблением и развитой системой энергосбережения. Время автономной работы для таких ноутбуков, несомненно, имеет важное значение.
Третья, самая обширная группа находится между этими полюсами. При создании этих ноутбуков разработчики вынуждены идти на компромисс — пытаться обеспечить достаточно большое время автономной работы при приемлемой производительности, не забывая при этом о весе.
Естественно, тест MobileMark2002 может применяться для всех моделей ноутбуков, удовлетворяющих системным требованиям, но особый интерес представляет тестирование ноутбуков последней группы.
Что было до появления теста MobileMark2002?
Нельзя сказать, что рассматриваемый тест появился на пустом месте. Тесты, измеряющие время работы ноутбука от полного заряда до полного разряда батареи при выполнении некоего перечня задач (workload) существовали и ранее. Достаточно продолжительное время разработкой подобных тестов занимается компания Ziff-Davis Media. В настоящее время последней является версия 5, но до нас она еще не доехала, поэтому скажу несколько слов о BatteryMark версии 4.0.1, которая использовалась в тестах iXBT до появления MobileMark2002 и используется параллельно с ним в настоящее время.
Основное отличие этих тестов в следующем — BatteryMark не умеет измерять производительность. Тест основан на наборе приложений ZD Business Winstone, и его выполнение может быть представлено следующей диаграммой (масштаб не соблюден):
Работа с тестом достаточно проста. Перед запуском с помощью входящей в комплект утилиты Ziff-Devis Media Startup Manager блокируется загрузка при старте Windows программ, выполнение которых может влиять на результаты теста (программы из Startup и проч.). Затем после перезагрузки запускается тест.
Возможны два варианта работы теста: Conditioning Run — установочный, и Life Test — основной. Выбор варианта можно осуществить вручную, а можно доверить выбор программе. В этом случае сначала производится как минимум два установочных "пробега", во время которых производится "калибровка" аккумуляторной батареи, а затем, если различие во времени работы не превышает границы в 5%, запускается Life Test, результатом которого и является время автономной работы.
Естественно, результаты теста существенно зависят от настроек энергопитания, поэтому для достижения повторяемости результатов необходимо использовать одни и те же настройки.
Итак, чего же не хватает тесту BatteryMark, кроме измерения производительности? По мнению экспертов, основных недостатков три.
- Перечень задач и способ их выполнения (workload вообще-то плохо переводится) не соответствует современной модели пользователя.
- Отсутствует Concurrent Execution of Application (совместное выполнение приложений).
- Отсутствует Background Computing (фоновое выполнение задач).
От себя добавлю, что, на мой взгляд, несоответствие workload BatteryMark 4.0.1 современной модели заключается и в том, что тест не очень хорошо взаимодействует с современными системами управления энергопотреблением, как "общеупотребительными", типа Intel SpeedStep различных модификаций (см, например, обзоры Acer TravelMate 610 и ASUS T9400), так и фирменными, типа ASUS Power4Gear (см, например, тот же обзор ASUS L3).
Что из себя представляет MobileMark2002?
MobileMark2002, как уже было сказано, измеряет и производительность, и время автономной работы ноутбука. При работе теста можно выбрать один из двух наборов задач (workloads).
Первый — Productivity Workload — позволяет оценивать и производительность, и время автономной работы при выполнении следующего набора офисных и дизайнерских приложений (Office Productivity and Light Content Creation).
- Microsoft Word 2002
- Microsoft Exel 2002
- Microsoft PowerPoint 2002
- Microsoft Outlook 2002
- Netscape Communicator 6.0
- McAfee VirusScan 5.13
- WinZip 8.0
- Adobe Photoshop 6.0.1
- Macromedia Flash v.5
При этом предусматривается переключение между задачами (Task Switching), многозадачность (MultiTasking), а также упоминающиеся выше Concurrent Execution of Application и Background Computing. Работа MobileMark похожа на работу теста SysMark (что неудивительно — разработчик-то тот же) и выглядит на диаграмме примерно так (опять-таки не в масштабе).
Тест в данном случае итеративный, то есть, во время 90-минутной итерации, представляющей собой, по мнению разработчиков, 90-минутную деловую встречу (типа бизнес-ланча на свежем воздухе :)) измеряется производительность ноутбука, дальнейшие итерации служат для определения времени работы от батарей. Для определения производительности, как и в тесте SysMark, измеряется среднее время выполнения операции (Average Responce Time), при этом вклад различных приложений в итоговый результат приблизительно такой.
Значение производительности вычисляется в процентах от гипотетической "калибровочной системы".
Второй — Reader workload — измеряет максимальное время работы от батарей при выполнении задачи, не требующей больших энергозатрат — чтении с экрана. В качестве объекта для чтения выбрана "Война и мир" на английском языке. Правда, здесь постоянно задействована матрица, а она на данный момент с большим отрывом лидирует по "прожорливости" среди компонент ноутбука.
Вот, собственно, что представляет из себя тест MobileMark2002. Теперь немного о работе с тестом и первых впечатлениях.
Работа с тестом MobileMark2002
Интерфейс теста максимально дружественный и расчитан на человека с минимальными знаниями о компьютере. На первом этапе вам предлагается проверить, все ли условия для работы теста выполнены.
Если вы не знаете, как выполнить эти действия, к вашим услугам подсказки.
Далее необходимо присвоить проекту имя и выбрать тип теста.
Demo Run служит для демонстрации возможностей теста на настольном компьютере — выполняется Productivity Workload до выключения питания. Результатов, естественно, нет. Возможность задания программы, автоматически запускаемой после окончания теста, позволяет генерировать собственные отчеты (об отчетах — чуть ниже).
На следующем этапе вам предстоит решить, нужно ли оптимизировать систему перед выполнением тестов. Данная процедура, на мой взгляд, не будет лишней, если вы хотите получить реальные результаты.
Следующий этап — проверка уровня заряда батареи.
Опять-таки, доступны подсказки.
Наконец, все готово, осталось только выдернуть шнур питания и отдыхать, пока ноутбук не выключится.
После этого, включив его обратно в сеть и запустив систему, можно любоваться результатами.
Тест выдает три файла с результатами — results.html, results.csv и FDR.txt. Они размещаются в директории program_files_folderBAPCoMobileMark 2002 esultsproject_name. Полное описание этих файлов и их форматов можно прочитать в документации к тесту, например, здесь. Я приведу краткое описание для случая успешного прохождения теста.
- results.html — естественно, html-файл, который можно просмотреть в броузере или собственной программе просмотра теста. Содержит, в частности, имя проекта, название workload, Performance rating, Average response time (в секундах), Battery life rating — время автономной работы (в минутах)
- results.csv — файл формата .csv, содержащий большее количество информации. Для преобразования его в удобный вам формат и предусмотрена возможность автоматического запуска программы по окончании теста. Формат файла и макрос преобразования Excel приведены в документации
- FDR.txt — наиболее полный отчет (Full Disclosure Report), который может быть отослан в BAPCo.
О чем не нужно забывать
MobileMark2002, как и другие тесты измерения времени автономной работы, существенно зависит от установок системы. Рекомендуемый вариант установок приведен здесь. Настоятельно советую выполнять эти рекомендации, так как проведенные эксперименты показали, что путем манипуляций с параметрами энергосбережения можно добиться диапазона времени автономной работы в 40 минут. В моих обзорах практически всегда рекомендации выполнены, насколько это возможно. Если по каким-то причинам целесообразно отойти от рекомендаций, измененные значения указаны в явном виде (пример — обзор ASUS L3). Еще одна рекомендация — ставьте тест на "чистую" систему.
Первый опыт работы
Итак, немного о плюсах и минусах. Насколько точно workload отражает модель пользователя — мне судить сложно, но со здравым смыслом результаты теста MobileMark2002 согласуются, на мой взгляд, лучше, чем результаты ZD BatteryMark 4.0.1. Недостатков же у теста, на мой взгляд, два. Во-первых, не всегда одного установочного прогона достаточно (особенно при новом полностью разряженном аккумуляторе). В этом отношении BatteryMark устроен логичнее, хотя тестирование занимает больше времени. Во-вторых, недавно мне встретился ноутбук, у которого принципиально нельзя достичь полной разрядки батареи — он автоматически отключается где-то при 6% заряда. MobileMark2002 об этом рапортует, но результат не выдает, считая тест неуспешным. Это обратная сторона стандартизации, но можно было бы оставить возможность получения неофициального результата, как в SysMark. А в целом тест успешный и полезный. Советую обратить внимание на результаты в наших обзорах.
