В итоге мы использовали SPECjvm2008, поскольку нам нужно было что-то более "стандартное", чем "строгое".
Целью было быстро сравнить производительность между различными средами JVM и показать это системной группе. SPECjvm2008 был довольно прост в настройке и хорошо справился с поставленной задачей.
Java Grande Forum Benchmark Suite кажется немного устаревшим, но это единственный найденный мной инструмент, в котором говорится о вводе-выводе и пропускной способности сети.