Java compilers performance

Очевидно что производительность любого разработчика не в последнюю очередь зависти от скорости работы инструментальных средств, которые он использует.
Это и производительность используемой IDE, и скорость работы компилятора, сценариев сборки и развертывания приложения, и тд.

Потому предлагаю беглое сравнение скорости работы популярных Java-компиляторов.

IBM jikes
Сайт проекта: jikes.sourceforge.net
Проприетарная разработка IBM, которая только недавно стала open source.
При компиляции, jikes определяет “подозрительный” код и выводит предложения по улучшению, основываясь на книге Joshua Bloch “Effective Java Programming Language Guide”.
Кроме того, это единственный, из выбранных для тестирования компиляторов, который написан не на Java.
Из минусов можно отметить, что последний релиз jikes был в ноябре 2004 г (тоесть более 3х лет назад), а также необходимость при компиляции указывать кодировку, к которой записан исходный код.
Тем не менее он полностью поддерживает все возможности Java 5 Tiger.

Sun javac
Сайт проекта: java.sun.com
Самый популярный и часто используемый компилятор, часть SUN JDK – в представлении не нуждается.

Eclipse Java Compiler
Сайт проекта: eclipse.org
Инкрементный компилятор, позволяет собирать проект, даже если некоторые его классы ещё не компилируются.
Является частью популярной Java IDE Eclipse и был построен на технологиях, полученных от IBM-овского проекта VisualAge for Java Compiler
Так же как и  jikes, в процессе компиляции по умолчанию выводятся warning-и аналогичные тем, что можно видеть в самом Eclipse Java IDE.

Для тестирования скорости компиляции взял исходный код RegExp из проекта Jakarta.
Компиляцию проводил с указанием целевой платформы Java 5.
Перед каждым тестированием удалял уже скомпилированные файлы.
Запуск и замеры времени проводил утилитой time под cygwin:

bash-3.2$ time jikes --source cp1251 --target 1.5 *.java
bash-3.2$ time javac *.java
bash-3.2$ time java \
-classpath D:/Eclipse/plugins/org.eclipse.jdt.core_3.3.0.v_708.jar \
org.eclipse.jdt.internal.compiler.batch.Main -classpath "$CLASSPATH" *.java

Результаты можно увидеть на диаграмме:

Даже отняв от времени компиляции секунду-полторы, которую javac и eclipse тратят на запуск и инициализацию JVM – самым производительным оказался jikes.

Перед тем как писать этот мини-обзор, наткнулся на сообщение в одном и maillists, автор которого активно восхвалял производительность  eclipse compiler, аргументируя это тем, что тот “даже быстрее jikes”.
Мои же тесты, как видно, этого не подтверждают :)
Также не совсем ясно почему, но хваленный eclipse-овский инкрементный компилятор не показывал прироста в скорости компиляции даже в том случае, когда часть классов уже были скомпилированы.