Да, и более 3 уровней предположительно не рекомендуется. Это одна из причин, почему был создан новый GridLayout. Кроме того, инструменты lint иierarchyviewer в SDK помогут вам оптимизировать макеты.
Однако, в зависимости от ваших потребностей, вам, возможно, придется вкладываться глубже. Просто используйте инструменты SDK и некоторые устройства для тестирования, чтобы убедиться в наличии узких мест в производительности при рендеринге. Скорее всего, они где-то еще в вашем коде ..
Одним из основных слогов производительности в отношении представлений является не рендеринг, а раздувание их из XML-файлов.