Да, это поведение, которое вы должны ожидать, потому что если страница, ссылающаяся на манифест, не объявлена в самом манифесте (явном), она будет неявно рассматриваться как часть "главной" страницы манифеста - и от эта точка вперед будет кэшироваться и не обновляться, пока не изменится манифест.
Это было не совсем понятно и для меня, пока я не испытал то же поведение (в приложении, к которому я добавлял офлайн-возможности) и копался в спецификации, чтобы лучше понять наблюдаемое поведение.
Мое решение для этого состояло в том, чтобы превратить динамические части этой страницы в отдельные вызовы Ajax, чтобы, хотя страница была кэширована (неявно или явно), ее части, которые обновлялись, продолжали обновляться через (не кэшированные) Аякс звонит. Однако вы захотите создать резервные записи для указанных вызовов Ajax, если хотите, чтобы они работали хорошо в автономном режиме (или обрабатывали возникающие ошибки Ajax, если нет).