Не так, как сейчас. Канал Gitweb (RSS и Atom) просто показывает историю (журнал) данной ветви (по умолчанию HEAD, то есть текущая ветка). Вы можете сортировать теги по имени, используя сортировку по версии или по дате тегирования, но по своей сути тег не имеет указателя на предыдущий тег, такой как commit.
Тем не менее, у вас есть источники, так что вы можете расширить gitweb (и, надеюсь, предоставить исправления для списка рассылки git, git@vger.kernel.org).