>[оверквотинг удален]
>>>>значит, что работа с подсистемой оперативной памяти на FreeBSD организована лучше.
>>>
>>>Это значит только что 7-Zip на FreeBSD 7.2-RELEASE в сборке по умолчанию
>>>работает быстрее, чем на Ubuntu 9.10 alpha6. Только и всего.
>>
>>Забыл добавить: на данном железе.
>
>Как раз-таки 7Zip не зависит от типа железа. На DDR2 и DDR3
>в одной и той же операциоке он показывает одинаковые результаты. Здесь
>дело не в железе. Это значит, что переход с DDR2 на DDR3 не даёт прироста в 7-Zip. :)
Детальный бенчмарк общего плана (на что претендует данная статья) делается совсем по-другому:
Во-первых, собирается большой парк _разных_ машин — если речь идёт о тестировании в приведённом качестве, то есть что лучше: лошадь или конь. Если всё же изначально поставить целью тестирование скорости работы пользователя с наиболее распространённым комплектом программ, то, конечно, HP Proliant DL380 можно оставить за бортом. :)
Во-вторых, проводится детальный анализ кода, с выявлением наиболее "горячих" мест и порядков изменения потребления ресурсов в зависимости от различных характеристик входных данных (включая их количество). Строятся предположительные кривые.
В-третьих, проверяется идентичность рабочего кода (мы скромно полагаем, что аппаратная архитектура одинаковая, иначе вся затея вообще не имеет смысла). Так как код может компилироваться разными компиляторами, разными версиями компилятора, используя разные опции компилятора...
Только теперь начинаются тесты. Причём их результаты сверяются с результатами анализа кода. И при обнаружении расхождения — происходит анализ причин.
И только после всего этого, когда все нюансы выявлены, можно делать какие-то выводы.
Только лично мне это тестирование всё равно нафиг не сдалось. Я буду измерять производительность нужного мне приложения, которое я планирую использовать для решения стоящей передо мной задачи, в заданных/планируемых объёмах. И только после того как остальные, более важные, требования (вроде устойчивости работы) будут выполнены. Не пофиг ли мне на тесты производительности 7-Zip, если у меня специально оттюнингованная (под мою конкретную задачу) версия PostgreSQL? ;)
