Спасибо за быстрый ответ! Решение, которое вы опубликовали, было и моим решением, но я упустил одну деталь, которая, казалось, все испортила.
Я попробовал еще раз, включив в каждый макет макет прокрутки, но на layout_height у меня был fill_parent, изменив его на wrap_content, казалось, все исправлено, проблема решена!
Я не знаю, почему мы установили его в fill_parent, я думаю, это произошло из-за некоторых проблем с цветом фона.