Generar logfile con varios archivos

[jars]

Hola amigos.
Estoy usando en mis proyectos archivos de log que al llegar a un tamaño parametrizado se renombran y arranca uno nuevo. Es decir genero MiProyecto1.log y al llenarse, lo renombro como MiProyecto2.log y creo uno nuevo MiProyecto1.log.
Lo que estoy necesitando para un proyecto que genera muchísima información y llega al tamaño máximo muy rápido, es poder tener mas historia para poder auditar en caso de necesidad. Quisiera poder generar lo siguiente:
MiProyecto1.log, MiProyecto2.log, MiProyecto3.log, MiProyecto4.log, MiProyecto5.log, MiProyecto6.log, MiProyecto7.log, MiProyecto8.log, MiProyecto9.log, MiProyecto10.log
El problema es que a medida que se van llenando se van renombrando para que siempre el 1 es el actual, el que le sigue sea el 2 y el mas viejo el 10. Hay algo hecho así?
Gracias.