Вы не можете открыть карту прямо в Pycharm. Тем не менее, как вы сказали, вы можете создать HTML файл из него.
Вот небольшая функция для автоматического открытия его в браузере:
def auto_open(path):
html_page = f'{path}'
f_map.save(html_page)
# open in browser.
new = 2
webbrowser.open(html_page, new=new)
Я использую фулиону, как это в приложении Django он также весьма полезен в качестве инструмента рендеринга.
Folium также предоставляет возможность сохранять карту в изображения, проверить ее.