Тестирование на THG
Лаборатория THG давно завоевала себе репутацию экстремального тестирования. К примеру, мы тестируем мобильные компьютеры, нацеленные на такие приложения, как 3D-игры, рендеринг графики, а также high-end обработку звука. Мы будем продолжать наше независимое тестирование и обратим больше внимания на модели ноутбуков, предназначенные для офисных и домашних приложений.
Для этого мы разработали тестовые методики, которыми и хотим поделиться в этой статье. Как мы думаем, наша методика для оценки домашних и офисных ноутбуков следует традициям тестирования, которых мы придерживаемся для других продуктов.
Слово “ноутбук” для каждого представляется по-разному. Мы разбиваем ноутбуки на четыре категории мобильных компьютеров (см. таблицу ниже).
Ультра-портативные и лёгкие ноутбуки практически всегда умещаются на коленке. Мы считаем больших собратьев “стандартными ноутбуками”, если они весят 3 килограмма или меньше, а по размеру составляют не больше 32 см в ширину и 27 см в глубину. Собственно, вряд ли кто-либо согласится держать на коленях более тяжёлую и громоздкую модель. Ноутбуки типа “замена настольного ПК” больше и тяжелее стандартных портативных моделей. Когда мы проводим сравнительное тестирование ноутбуков, мы обычно отбираем модели на основе четырёх категорий.
Тип мобильного компьютера | Вес со стандартным аккумулятором | Размер (ширина и глубина) |
Ультра-портативные ноутбуки | 1,1 кг или меньше | Н/Д |
Портативные ноутбуки | От 1,1 до 1,8 кг | Н/Д |
Стандартные ноутбуки | От 1,8 до 3 кг | 32 x 27 см |
Ноутбуки типа “замена настольного ПК” | Более 3 кг | Более 32 x 27 см |
|
|
|
|
Разные виды мобильных пользователей
Большинство пользователей используют свои компьютеры для запуска офисных приложений, программ с 2D-графикой, для просмотра фильмов и беспроводного подключения к Интернету. Для некоторых людей, кого можно назвать “высоко мобильными пользователями”, прелесть от мобильного ПК заключается в том, что можно работать на нём в любом месте. Для них самое главное – ёмкий аккумулятор, малые размер и вес, а также поддержка беспроводной сети. Они готовы отказаться от лишней производительности и яркости экрана, чтобы получить максимальное время автономной работы. Кроме того, они выбирают ноутбуки по принципу “меньше – лучше”.
Другим людям, которых мы назовём “пользователями с ограниченной мобильностью”, портативность и время жизни без розетки питания уже не так важны. Они хотят получить относительно небольшой ноутбук, которым можно пользоваться в офисе или на кухне, большую часть времени он подключён и в “автономном путешествии” бывает нечасто. Таких пользователей не особо интересует время жизни от батарей – им подавай хорошую производительность, яркий и контрастный экран, а также возможность как проводного, так и беспроводного подключения к сети. Некоторые пользователи используют док-станции, чтобы подключать внешнюю клавиатуру, мышь и периферию. В принципе, данной категории достаточно стандартного ноутбука, но зачастую они выбирают модель “замена настольного ПК”.
Независимо от категории, к которой вы себя относите, при покупке ноутбука следует учесть и другие факторы. Среди них: качество экрана, эргономика мыши и клавиатуры, количество и качество интерфейсов и разъёмов, а также лёгкость их использования, общее качество дизайна корпуса, да и гарантия производителя.
Наша тестовая методика
Во время тестирования ноутбуков мы обращаем внимание на следующее:
- время автономной работы;
- производительность;
- яркость и контрастность экрана (в том числе, возможность использования ноутбука на улице);
- качество картинки;
- габариты;
- вес;
- сетевые возможности;
- качество и удобство использования встроенной клавиатуры и мыши (тач-пада);
- наличие и доступность портов ввода/вывода;
- возможность подключения док-станции;
- качество звука;
- дизайн и качество корпуса;
- срок гарантии.
Тесты времени автономной работы и производительности
Два основных параметра мобильных компьютеров – это время автономной работы и производительность. Существует множество стратегий тестирования этих параметров, включая разработанные нами методики. После тщательного отбора мы решили остановиться на трёх тестовых пакетах: двух от Business Applications Performance Corporation (BAPCo) и одного от FutureMark Inc.
BAPCo является некоммерческим консорциумом основных игроков в индустрии, включая AMD, Intel, HP, Dell, ATi, nVidia, Toshiba и Microsoft, который выпускает тестовые программы. FutureMark – это частная компания, тесно работающая с основными производителями в рамках программы Benchmark Development Program. Среди партнёров можно упомянуть AMD, Intel, Microsoft, nVidia, ATi и Dell. BAPCo и FutureMark работают совместно, и на сайте каждой организации есть ссылка на другую.
Тестовые пакеты BAPCo открыты для исследования, и их пользователи могут выслать результаты тестирования в BAPCo для включения в базу данных разных компьютеров. По сути, чтобы опубликовать результаты нашего тестирования, мы должны сообщить их в BAPCo. Это не только позволяет BAPCo включить наши тесты в базу данных, но и даёт консорциуму информацию, которая позволяет улучшить следующее поколение тестов.
Мы используем тестовые пакеты BAPCo MobileMark 2005 и SYSmark 2004 SE. В частности, MobileMark 2005 используется при работе ноутбуков от батарей, а SYSmark 2004 SE – во время питания от сети. Поскольку все ноутбуки работают как от батареи, так и от сети, мы прогоняем на них оба пакета.
Подобно BAPCo, компания FutureMark проводит очень открытую политику. На её сайте можно обнаружить больше количество результатов тестов разных компьютеров. Тесты PCMark05 проверяют систему в целом, включая жёсткие диски, оперативную память и графику. Их можно запускать по отдельности и вместе. Пакет PCMark05 предназначен больше для тестирования домашних/офисных компьютеров, поэтому он прекрасно подходит для оценки ноутбуков типа “замена настольного ПК”.
Ниже мы более подробно обсудим каждый тест.
MobileMark 2005
MobileMark 2005 фокусируется только на ноутбуках. Он использует популярные приложения, позволяя оценить время автономной работы и дать рейтинг производительности. Коммерческие приложения запускаются с помощью скриптов, симулирующих действия обычного пользователя, причём они включают паузы. Во время тестирования клавиатуру и мышь ноутбука нельзя трогать, иначе тест будет прерван и его придётся начинать по новой. Кроме того, в ряде случаев скрипт может “вылететь” из-за потери синхронизации с окнами приложений. Тогда придётся проводить тест повторно.
MobileMark 2005 включает четыре тестовые группы:
- офисная производительность;
- учёба и чтение;
- воспроизведение DVD;
- беспроводная работа в Интернете.
Для оценки офисной производительности используются Adobe Photoshop 6.0.1, Macromedia Flash 5.0, McAfee Virus Scan 5.13, WinZip Computing WinZip 8.0, а также Microsoft Word, Excel, PowerPoint и Outlook 2002.
Кроме измерения времени автономной работы, MobileMark 2005 вычисляет рейтинг производительности в офисных приложениях. Этот рейтинг основан на времени выполнения разных операций в тестировании. К примеру, на времени, которое проходит от щелчка мышью в Excel для начала вычислений до завершения расчётов. Начальные этапы, вроде ввода текста с клавиатуры или щелчков мыши, не оцениваются, так как здесь всё зависит от пользователя компьютера.
Рейтинг офисной производительности MobileMark 2005 показывает, насколько хорошо ведёт себя ноутбук во время автономной работы. Рейтинг 100 показывает, что тестируемый компьютер имеет ту же производительность, что и эталонная система создателей теста. Рейтинг 200 означает, что компьютер по производительности в MobileMark 2005 превышает эталонную систему в два раза. (Мы рекомендуем обратиться к документации MobileMark 2005 по ссылке ниже, чтобы больше узнать об эталонном компьютере BAPCo.)
Что касается группы учёбы и чтения, то здесь используется Netscape Communicator 6.01, в котором выводится eBook. Подобный режим отражает типичное чтение книги или конспекта лекции с экрана ноутбука. Сетевое подключение не используется, и все данные располагаются на тестируемом ноутбуке.
Для тестирования воспроизведения DVD MobileMark 2005 использует InterVideo WinDVD 6.0, который выводит DVD с фильмом. Тест задействует не только видео, но и звук.
Наконец, в режиме беспроводной работы в Интернете используется беспроводный сервер. Он загружается с CD ROM и запускает версию Linux. Сервер подключается к беспроводной точке доступа через обычный кабель RJ-45, в то время как тестируемый компьютер подключается к той же точке доступа, но уже через беспроводную сеть. Для выхода в Интернет используется версия Internet Explorer, установленная на ноутбуке.
Для получения дополнительной информации о пакете MobileMark 2005 мы рекомендуем ознакомиться с документацией BAPCo.
Основное преимущество MobileMark 2005 заключается в том, что этот пакет измеряет время автономной работы в ряде ситуаций, в то же время, выдавая рейтинг офисной производительности. Все четыре теста MobileMark 2005 проходят только при полностью заряженном аккумуляторе ноутбука и отключённом питании от сети. Единственным заданием тестера после запуска MobileMark 2005 и выбора одного из четырёх режимов является отключение ноутбука от сети, а затем, после окончания заряда аккумулятора, обратного подключения. (Перед тем, как вы захотите поработать тестером, предупреждаем, что необходимо всегда быть на чеку, как днём, так и ночью, чтобы начать новый тест или перезапустить старый, который вылетел из-за ошибки скрипта!)
Мы тестируем мобильные компьютеры с аккумулятором из комплекта поставки. Для большинства компьютеров можно купить дополнительную батарею, которая может существенно увеличить время автономной работы. В целом, время жизни с дополнительной батареей оказывается выше, чем со стандартной. Увеличение времени автономной работы пропорционально дополнительной ёмкости, которую добавляет вторая батарея к стандартной.
Подготовка к запуску MobileMark 2005
Мы просим, чтобы все производители поставляли нам свои тестовые ноутбуки с установленной Windows XP Professional Service Pack 2, но мы будем использовать и обычную Windows XP Home, если она поставляется с ноутбуком. Мы всегда берём ОС, обеспечиваемую производителем, и никогда не устанавливаем собственную версию Windows XP. Это гарантирует, что драйверы и утилиты поддержки установлены должным образом, и тестирование проходит под той же операционной системой, которую вы получите, если купите этот ноутбук. Если нам нужно переустановить систему, мы используем CD восстановления, поставляющийся с компьютером.
Мы проверяем, вышли ли обновления операционной системы и драйверов, и устанавливаем их по мере доступности. Этим мы гарантируем, что разные модели ноутбуков максимально обновлены на момент тестирования.
Мы удаляем все ненужные программы и утилиты. Включая программное обеспечение, которое может конфликтовать с тестами MobileMark 2005, – вроде Microsoft Office и утилит, запрещающих доступ к системным настройкам.
Затем мы стандартизируем ряд параметров, чтобы гарантировать, что все ноутбуки будут выступать в равных условиях. В следующей таблице приведены детали. Кроме того, три параметра требуются BAPCo, если планируется публиковать результаты. Три дополнительных настройки указаны в таблице.
Общее | |
Яркость экрана во время работы от аккумулятора | 60-70 кд/м² |
Управление энергопотреблением CPU | Автоматическое или адаптивное |
Периферийные устройства | Все лишние устройства должны быть удалены |
BIOS | |
Энергопотребление | Включёно |
Время отключения дисплея | Выключено |
Опция приглушать дисплей во время работы от аккумулятора | Выключена |
Время выключения жёсткого диска | Выключено |
Время ухода в режим “сна” | Выключено |
USB и все порты | Все включёны |
Звук | Включён |
Беспроводная сеть | Отключена или удалена, за исключением теста беспроводной работы в Интернете (если в BIOS карту отключить нельзя, то выполните это программно: Control Panel > Network Connections, затем выберите нужную карту и опцию “Disable”) |
Проводная сеть | Отключена, как и беспроводная сеть |
Windows XP | |
Control Panel > Power Options > Power Schemes > Power Schemes (выпадающее меню) | Portable/Laptop – с модификацией ниже |
Control Panel > Power Options > Power Schemes > Turn Off Monitor | Никогда (“Never”) для питания от аккумулятора и сети |
Control Panel > Power Options > Power Schemes > Turn Off Hard Disks | Через 3 минуты для питания от сети и аккумулятора |
Control Panel > Power Options > Power Schemes > System Standby | Никогда (“Never”) для питания от аккумулятора и сети |
Control Panel > Power Options > Power Schemes > System Hibernates | Никогда (этой опции нет, если галочка в окне Control Panel > Power Options > Hibernate > Enable Hibernation не поставлена, см. ниже) |
Control Panel > Power Options > Low Battery Alarm | Отключена (галочку не ставить) |
Control Panel > Power Options > Alarms > Critical Battery Alarm | Отключена (галочку не ставить) |
Control Panel > Power Options > Hibernate > Enable Hibernation | Отключена (галочку не ставить) |
USB и все порты устройств | Включёны |
Звук | Включён |
Громкость | Средняя |
Настройки курсорных устройств | По умолчанию |
Control Panel > Display > Settings > Screen Resolution | Минимум 1024×768 minimum (это уже не требование BAPCo для MobileMark 2005) |
Control Panel > Display > Settings > Color Quality | 65 536 цветов минимум (это уже не требование BAPCo для MobileMark 2005) |
Control Panel > Display > Screen Saver | Нет (это уже не требование BAPCo для MobileMark 2005) |
Control Panel > System > Advanced > Performance > Settings > Visual Effects | Регулировка на максимальную производительность |
Control Panel > System > Advanced > Performance Options > Advanced > Processor Scheduling | Выставить на максимальную производительность программ |
Control Panel > System > Advanced > Performance Options > Advanced > Memory Usage | Выставить на максимальную производительность программ |
Control Panel > System > System Restore > Turn Off System Restore On All Drives | Поставьте галочку, чтобы отключить System Restore |
Control Panel > System > Remote > Allow Remote Assistance Invitations To Be Sent From This Computer | Снимите галочку |
Control Panel > System > Remote > Allow Users To Connect Remotely To This Computer | Снимите галочку |
Control Panel > System > Automatic Updates > Turn Off Automatic Updates | Выбрать |
Подготовка к запуску MobileMark 2005, продолжение
Начинаем тестирование MobileMark 2005.
После выставления параметров, указанных в таблице, мы устанавливаем MobileMark 2005 и выполняем утилиту проверки системы. Она полностью разряжает и заряжает батарею тестового компьютера, чтобы система знала, когда аккумулятор полностью расходуется. Наконец, мы прогоняем все четыре теста MobileMark 2005.
Тест MobileMark 2005 начинается, как только мы отключаем ноутбук от сети.
Тест офисной производительности MobileMark 2005 практически закончился (чёрный индикатор в правой верхней части экрана показывает оставшийся заряд аккумулятора 2%).
Чтобы получить право на публикацию результатов, наше соглашение с BAPCo требует отсылки полного отчёта (Full Disclosure Report, FDR) для каждого протестированного компьютера. В FDR включёно описание параметров, при которых производилось тестирование.
SYSmark 2004 SE (Second Edition)
Пакет SYSmark 2004 SE рассчитан только на измерение производительности. Время жизни от батареи в расчёт не принимается, поэтому при выполнении SYSmark 2004 SE мы питали компьютер от сети. SYSmark 2004 может выполняться на ноутбуках и рядовых ПК.
Подобно MobileMark 2005, SYSmark 2004 SE выполняет последовательность приложений, используя скрипты. Доступна два тестовых режима:
- создание интернет-содержания (Internet content creation);
- офисная производительность (Office productivity).
Тест создания интернет-содержания разделён на три группы:
- создание 3D;
- создание 2D;
- публикация web.
Тест офисной производительности тоже разделён на три группы:
- связь (email, календарь и web-браузер);
- создание документов;
- анализ данных.
Тест создания интернет-содержания использует Adobe After Effects 5.5, Photoshop 7.01 и Premier 6.5, Discreet 3ds max 5.1, Macromedia Dreamweaver MX и Micromedia Flash MX, Microsoft Windows Media Encoder 9 Series, Network Associates McAfee VirusScan 7.0 и WinZip Computing WinZip 8.1.
Тест офисной производительности использует Adobe Acrobat 5.0.5, Microsoft Access, Excel, Outlook, PowerPoint и Word 2002 SP2, ScanSoft Dragon NaturallySpeaking 6, Network Associates McAfee VirusScan 7.0 и WinZip Computing’s WinZip 8.1.
Запускаем прогон SYSmark 2004 SE.
Как и в случае MobileMark 2005, результаты производительности SYSmark 2004 SE базируются на времени выполнения: вроде времени, которое требуется на завершение операции от щелчка мышью (что-либо глобальное в Word) до вывода сообщения о завершении. Как и в случае MobileMark 2005, результаты тестирования выводятся относительно эталонной системы (100).
SYSmark 2004 SE (Second Edition), продолжение
SYSmark 2004 SE высчитывает отдельные рейтинги производительности для каждой из трёх групп внутри двух тестовых сценариев. Затем подсчитывается геометрическое среднее рейтингов групп для каждого тестового сценария и округляется до ближайшего целого. Наконец, SYSmark 2004 SE высчитывает геометрическое среднее для двух сценариев и округляет его до ближайшего целого, что даёт результат SYSmark 2004 SE. Если в одном тестовом прогоне не участвуют оба сценария, то общий результат следует подсчитать вручную, но он будет считаться неофициальным. Эта проблема описана ниже.
Результат прогона теста создания интернет-содержания SYSmark 2004 SE.
Следует отметить, что результаты офисной производительности SYSmark 2004 SE и MobileMark 2005 нельзя сравнивать между собой. Для получения дополнительной информации о тестах SYSmark 2004 SE мы рекомендуем обратиться к соответствующему документу.
SYSmark 2004 SE использует ту же политику публикации результатов, что и MobileMark 2005. Мы должны соответствовать минимальным требованиям BAPCo и представить отчёт Full Disclosure Report. Только тогда мы можем публиковать результат.
Подготовка и запуск SYSmark 2004 SE
За исключением некоторых настроек системы, Windows и других, указанных в таблице MobileMark 2005, для SYSmark 2004 мы проводим ту же подготовку, что и для MobileMark 2005. Мы настраиваем параметры BIOS и Windows на оптимальную производительность для настольного ПК или ноутбука, питающегося от сети. Ниже приведены используемые нами настройки.
BIOS | |
USB и порты устройств | Все включёны |
Адаптеры проводной и беспроводной сети | Выключены (если в BIOS выключить нельзя, то приходится прибегать к программному способу: Control Panel > Network Connections, выберите нужное сетевое подключение, после чего нажмите правой клавишей мыши и укажите Disable) |
Windows XP | |
Control Panel > Power Options > Power Schemes > выпадающее меню Power Schemes | Home/Office Desk |
Control Panel > Power Options > Power Schemes > Turn Off Monitor | Никогда для питания от сети (Never for AC) |
Control Panel > Power Options > Power Schemes > Turn Off Hard Disks | Через 20 минут для питания от сети (After 20 minutes for AC) |
Control Panel > Power Options > Power Schemes > System Standby | Никогда для питания от сети (Never for AC) |
Control Panel > Power Options > Power Schemes > System Hibernates | Никогда (эта опция не показывается, если не стоит галочка Control Panel > Power Options > Hibernate > Enable Hibernation) |
Control Panel > Power Options > Hibernate > Enable Hibernation | Отменена (галочка не стоит) |
Звук | Включён |
Настройки курсорных устройств | По умолчанию |
Control Panel > Display > Settings > Screen Resolution | 1024 x 768 минимум |
Control Panel > Display > Settings > Color Quality | 65 536 цветов минимум |
Control Panel > Display > Screen Saver > выпадающее меню Screen Saver | Нет (None) |
Control Panel > Display > Appearance > Color Scheme | Windows and Buttons: Windows Classic Style; Color Scheme: Windows Standard; Font Size: Normal |
Active Desktop (Control Panel > Display > Desktop > Customize Desktop > Web | Снять все галочки |
Control Panel > System > Advanced > Performance > Settings > Visual Effects | Выбрать максимальную производительность (best performance) |
Control Panel > System > Advanced > Performance > Settings > Advanced > Processor Scheduling | Выбрать максимальную производительность программ (Best Performance of Programs) |
Control Panel > System > Advanced > Performance > Settings > Advanced > Memory Usage | Выбрать максимальную производительность программ (Best Performance of Programs) |
Control Panel > System > Performance > Performance Options > Advanced > Virtual Memory > Change | Выставить объём файла подкачки в два раза выше количества оперативной памяти в системе |
Control Panel > System > System Restore > Turn off System Restore On All Drives | Убрать галочку – отключить System Restore |
Control Panel > System > Remote > Allow Remote Assistance Invitations To Be Sent From This computer | Убрать галочку |
Control Panel > System > Remote > Allow Users To Connect Remotely To This Computer | Убрать галочку |
Control Panel > System > Automatic Updates > Turn Off Automatic Updates | Выбрать |
Когда все предварительные настройки будут выполнены, можно приступать к пробному выполнению SYSmark 2004 SE. При этом проверяется, что все скрипты будут выполнены без проблем, да и оптимизируются настройки Windows XP – к примеру, производится дефрагментация жёсткого диска.
Как только пробный запуск будет выполнен, переходим к самим тестам. Как и у MobileMark 2005, интерфейс SYSmark 2004 SE позволяет легко и просто запустить тесты, а также посмотреть на результаты. Скрипты SYSmark 2004 SE во многом опираются на многозадачность, периодически переключаясь от одного окна к другому. Следует отметить, что скрипты SYSmark 2004 SE вылетают из-за потери синхронизации окон на ноутбуках чаще, чем скрипты MobileMark 2005. Поэтому тесты SYSmark приходится проводить больше раз, чем тесты MobileMark. Иногда мы не могли провести одновременно оба сценария, в результате чего приходилось вычислять для них неофициальный результат.
PCMark05
Мы тестируем производительность системы и компонентов с помощью PCMark05. Этот пакет запускает тесты, включающие однопоточные и многопоточные приложения. PCMark05 включает следующие тесты.
- Система (System): запуск Windows XP с жёсткого диска, 3D-графика и физика, прозрачные 2D-окна, 3D-пиксельные шейдеры, вывод web-страниц, расшифровка файлов, тест графической памяти 2D (64 линии), общее использование жёсткого диска, кодирование видео и сжатие звука [многопоточное]; редактирование текста и декомпрессия изображений [многопоточное]; шифрование файлов, сканирование на вирусы, задержки памяти и сжатие файлов [многопоточное].
- CPU: сжатие файлов, декомпрессия файлов, шифрование файлов, расшифровка файлов, декомпрессия изображений, кодирование звука, сжатие и шифрование файлов [многопоточное]; декомпрессия файлов, расшифровка файлов, декомпрессия звука, декомпрессия изображений [многопоточное].
- Память (Memory): считывание памяти, запись в память, копирование памяти, задержки памяти (размеры блока 16 Мбайт, 8 Мбайт, 192 кбайт и 4 кбайт).
- Графика (Graphics): прозрачные 2D-окна, тест графической памяти 2D (64 линии), тест графической памяти 2D (128 линий), воспроизведение 2D-видео, скорость заполнения 3D, пропускная способность полигонов 3D, пиксельные шейдеры 3D, вершинные шейдеры 3D.
- Жёсткий диск (Hard Disk Drive): запуск XP, загрузка приложений, общая схема использования, запись файлов.
Для получения дополнительной информации о пакете PCMark05 рекомендуем обратиться к официальным документам.
Выбор тестов PCMark05.
PCMark05 выдаёт результат для каждого из перечисленных сценариев. Итоговый результат сценария вычисляется как геометрическое среднее тестов, входящих в него. Каждый результат масштабируется с помощью множителя на основе результатов PCMark для hign-end и слабой эталонных систем. Таким образом, результаты для каждого из пяти тестовых сценариев находятся между 1200 и 5500 PCMarks, причём слабые системы будут ближе к нижней границе, а мощные – к верхней. Конечно же, результаты PCMark могут превысить 5500 по мере того, как системы будут становиться более мощными.
После прогона PCMark05 выдаётся результат.
PCMark05, продолжение
Затем можно переходить к публикации результатов всех пяти сценариев. Следует отметить, что результат PCMark для системного сценария (System) является итоговым для системы в целом. Если какой-либо тест внутри любого тестового сценария не пройдёт, то для системного сценария результат не вычисляется.
Обратите внимание, что на иллюстрации системный и графический сценарии выполнились не полностью, поэтому никаких результатов общего или графического тестов PCMark не сообщается. PCMark05 обращает внимание, что тестируемый компьютер не поддерживает пиксельных или вершинных шейдеров. Первая иллюстрация ниже относится к недорогому ноутбуку Acer TravelMate 2304 LCi. Обратите внимание, что на ней нет информации о пиксельных или вершинных шейдерах во второй из трёх колонок в верхней половине экрана. Это подтверждает тот факт, что TravelMate не поддерживает пиксельных или вершинных шейдеров.
Следующая иллюстрация относится к другому компьютеру, high-end ноутбуку Toshiba Qosmio G25. Во второй колонке показана информация о версиях пиксельных и вершинных шейдеров, то есть Qosmio их поддерживает. Ноутбук Qosmio смог пройти через все системные и графические тесты, поэтому PCMark05 выдал результаты для системных и графических сценариев.
Acer TravelMate 2304CLi не поддерживает пиксельных или вершинных шейдеров.
Toshiba Qosmio G25 поддерживает пиксельные и вершинные шейдеры.
Мы запускаем PCMark05 под Windows XP SP2. Единственным дополнительным программным требованием была установка Microsoft Media Player 10 и Microsoft Media Encoder 9. Мы использовали ту же систему и настройки Windows, как и в случае SYSmark 2004 SE, поэтому вы можете ознакомиться с ними выше.
Яркость и контрастность экрана
Мы измеряли яркость экрана ноутбука с помощью специального прибора, который измеряет интенсивность света, излучаемого объектом. Измеритель яркости использует чёрную трубку, которую необходимо поднести вплотную к экрану, чтобы блокировать окружающее освещение. До измерения яркости тестовый компьютер работал около 30 минут, чтобы подсветка достаточно прогрелась.
Наш измеритель яркости Gossen оснащён памятью, поэтому данные можно легко скачать на компьютер.
Яркость замеряется в канделах на квадратный метр. Тесты времени автономной работы проводились при яркости каждого ноутбука, выставленной на 60-70 кд/м². Такая яркость вполне достаточна для ЖК-экрана внутри помещения.
Идеальный ноутбук имеет равномерную подсветку экрана. Однако на практике подсветка не всегда бывает равномерной, поэтому яркость участков экрана может различаться.
Чтобы протестировать яркость и равномерность подсветки ноутбука, мы используем белое изображение (RGB 255, 255, 255), разделённое на 64 участка. Затем мы выставляем яркость на максимум и измеряем яркость каждого участка с помощью измерительного прибора. Отметим, что яркость всегда измеряется при питании компьютера от сети.
Мы рассчитываем яркость экрана как среднее по 64 измерениям, а затем рассчитываем отклонения яркости по 64 участкам. Чем больше отклонение участков, тем хуже равномерность подсветки.
Яркость и контрастность экрана, продолжение
Кроме того, мы выдаём график равномерности подсветки, выводя яркость каждого из 64 участков по отношению к самому яркому из них. График является относительным, а не абсолютным. Экран с идеальной равномерностью подсветки покажется на графике в виде 64 участков с одинаковой яркостью. Любое отклонение от идеала отражается в виде потемнения участка, причём степень потемнения определяется квадратом отклонения яркости от самого яркого участка. Мы благодарим Джорджа Гербера (Georg Gerber) из Harvard/MIT Health Sciences and Technology за разработку программы для этого тестирования.
Измеритель яркости и картинка с 64 участками позволяет получить значения яркости и равномерности подсветки.
Равномерность подсветки нашего базового ноутбука Acer TravelMate 2403LCi.
Чтобы измерить контрастность, мы используем картинку с 16 чередующимися белыми (RGB 255, 255, 255) и чёрными (RGB 0, 0, 0) участками. Как и в случае измерения яркости, размер картинки подбирается таким образом, чтобы как можно лучше соответствовать габаритам экрана. Мы выставляем яркость ноутбука на максимум, после чего с помощью измерителя яркости получаем значение яркости для каждого участка (белого и чёрного). Затем мы вычисляем соотношение яркости прилегающих участков. В результате мы получаем 8 значений контрастности, которые усредняются для получения общего уровня контрастности экрана. Это значение мы и сообщаем.
Тестовая картинка для измерения контрастности с 16 участками.
Контрастность всегда высчитывается как соотношение яркости белого участка к чёрному, то есть, к примеру, контрастность 100:1 означает, что белый цвет в 100 раз ярче, чем чёрный. Обратите внимание, что в идеале яркость чёрного цвета должна быть равна нулю, но тогда и контрастность вычислить не получится. Впрочем, в реальном мире яркость у чёрного цвета всегда присутствует.
Многие тестеры дисплеев уверены, что для читаемости дисплея при солнечном свете он должен иметь максимальную яркость не меньше 500 кд/м², а уровень контрастности – не меньше 2:1. Некоторые производители наружных дисплеев устанавливают яркость на уровне 1000 или даже 1500 кд/м2, но экраны ноутбуков даже близко не подходят к значению 500 кд/м2. Поэтому мы судим о возможности работы на улице по собственным впечатлениям. Мы оцениваем ноутбук, когда солнце падает на экран сзади, а также спереди.
Качество картинки, размер и вес ноутбука, прочее
Экран у ноутбука может давать великолепные яркость и контрастность, но работать с ним может быть трудно. По этой причине мы субъективно оцениваем качество картинки, тщательно исследуя экран, чтобы определить, насколько легко читаются буквы и насколько хорошо выводятся графические изображения. Мы используем стандартный текст и картинки.
Измерять вес и размер очень просто. Мы калибруем весы перед каждым взвешиванием, после чего оцениваем вес по отдельности (к примеру, ноутбук, блок питания, внешний привод CD/DVD и т.д.). Все измерения размеров осуществляются с помощью стальной линейки.
Кроме того, мы оцениваем сетевые возможности каждого ноутбука. Сюда входят проводной и беспроводный Ethernet, Bluetooth и ИК-порт – в зависимости от того, на чём построена система. Для Ethernet мы указываем стандарт и пропускную способность. Как описано выше, MobileMark 2005 позволяет измерить время автономной работы при использовании беспроводной сети Ethernet. Мы удостоверяемся в том, что все встроенные сетевые возможности работают. В то же время, мы не тестируем действительную пропускную способность интерфейсов, поскольку надеемся, что электроника компонентов достигла уровня зрелости и стандартизации, поэтому разница между ноутбуками будет невелика.
Мы оцениваем качество клавиатуры и лёгкость набора одного абзаца текста. Мы отмечаем слишком тесное расположение клавиш и необычную раскладку, что может привести к замедлению печати и ошибкам в наборе. Кроме того, мы оцениваем субъективные ощущения от нажатия на клавишу. Легко ли они нажимаются, а затем переходят в начальное положение? Дают ли клавиши механический шум?
Мы подсчитываем число входов и выходов на каждом ноутбуке. Затем мы проверяем, легко ли подключать и отключать к ним устройства. Мы сообщаем, использует ли производитель док-станцию, а также какая периферия поддерживается каждой док-станцией.
Мы субъективно оцениваем качество встроенных динамиков, качество вывода на внешние колонки (классическая модель Sony SRS-D2 с большим сабвуфером) и на наушники (JVC Noise Canceling Stereo Headphones Model HA-NC100). Для оценки качества звука мы используем смесь классической музыки, популярной и рока.
Наконец, мы даём субъективную оценку дизайна и качества корпуса. Как мы считаем, дизайн ноутбука должен позволять легко удерживать корпус одной рукой. Мы оцениваем отделку и эргономику: насколько удобно закрывать или открывать компьютер, а также насколько хорошо пригнаны крышка дисплея и сам корпус в закрытом состоянии. Мы оцениваем прочность корпуса, включая степень защиты от перегибов во время открытия и закрытия крышки. Слишком непрочная крышка приводит к искажению картинки или даже повреждению ЖК-панели в худшем случае.
Мы сообщаем срок гарантии на ноутбук. Кроме того, мы указываем, на что распространяется гарантия в этот срок.
Наш эталонный мобильный компьютер
Аппаратная начинка, операционная система, приложения и тестовые пакеты могут меняться. Поэтому нам нужно установить стандартное “железо”, относительно которого указывать изменения в других ноутбуках. Поэтому мы выбрали эталонный ноутбук Acer TravelMate 2304LCi. Перед тестированием других мобильных компьютеров мы провели полный тест эталонной модели с помощью изложенной выше методики.
Ноутбук Acer TravelMate 2304LCi.
Заключение
Как мы надеемся, разработанную нами тестовую методику для оценки ноутбуков для дома и офиса можно считать полной и технически грамотной. Конечно, мы понимаем, что в этом мире ничего не идеально, поэтому продолжим постоянно дорабатывать нашу методику, пытаясь сделать её лучше и адаптировать под новые технологии.