сравнение производительности - gcc и llvm-gcc

Question

Я сравнил gcc и llvm-gcc с опцией -O3 для hmmer и mcf в тесте spec cpu2006. Удивительно, но я обнаружил, что gcc бьет llvm-gcc для обоих случаев. Это потому, что -O3 имеет разные значения? Как мне установить эксперименты, чтобы получить справедливое сравнение?

Кстати, я провел эксперимент, ТОЛЬКО изменив cc в make-файле.

Спасибо, Bo

Answer 1

Вы, кажется, удивлены тем, что gcc побил llvm на вашем тесте. Phoronix проводит множество интересных тестов в этой области.Например, посмотрите:

• Сравнительный анализ LLVM и Clang против GCC 4.5 .
• Тесты компиляторов GCC, LLVM-GCC, DragonEgg, Clang
• ∶

(много ярких цветов.)

До Как мне установить эксперименты, чтобы получить справедливоесравнение? идет, по-видимому, вы должны сравнить самое быстрое время выполнения, самое быстрое время компиляции, самый низкий объем памяти, большинство операций на ватт и масштабируемость по количеству процессоров (вы платите свои деньги и выбираете), для самой быстрой конфигурации каждогокомпилятор в сравнении с самой быстрой конфигурацией других систем.

Прежде всего, вам нужно как минимум установить изменчивость каждой программы - насколько повторяемы переменные для каждого запуска одной программы на вашей платформе.(Да, правдоподобный сравнительный анализ требует тщательности с вашей стороны.)