Я думаю, что модуль задач будет использовать имя и значок из определения приложения вашей команды (вашего манифеста или определения из App Studio, если вы используете его для создания / развертывания), а не из настроек бота Azure.
В этом случае вы можете изменить имя и изображение модуля задач, изменив значок и имя приложения. Вам, конечно, нужно будет повторно развернуть его, чтобы увидеть изменения.