А что кроме классов хранится в Perm Gen Space?
Выполняю однотипные действия в своем приложении и вижу в jvisualvm что PermGen сначала пристарте приложения вырос, потом рост замедлился, но потихоньку продолжается.
Так как я делаю однотипные действия, то классы должны быть уже все загружены.