Либо писать какую-то автоматику\скрипт, которая будет ходить в API, выгребать из нужного неймспейса все теги, соритровать по датам и оставлять 5 последних
В дополнение к предыдущей новости: если вы используете для хостинга приватных репо Sonatype Nexus, то его разработчики выложили скрипт который проверяет нет ли в проксируемых репозиториях пакетов с такими же именами, что и ваших приватных. Качать тут.