Ого, это было трудно читать.Вы должны отредактировать вопрос и попытаться объяснить себя лучше.
Чтобы включить прослушиватель щелчка по этим кнопкам, необходимо добавить прослушиватель в метод getView () адаптера.Если вы используете шаблон держателя вида
holder.button.setOnClickListener(...)
и затем получаете доступ к родителю или что-то еще, чтобы изменить фон.вещь, смотри это видео , оно в начале.
Удачи!