Я пробовал
Config.set('kivy', 'window_icon', 'my_icon.png')
, но он меняет только значок окна, но не значок на панели задач.