Вам нужно конвертировать avi в mp4 с помощью ffmepg
!ffmpeg -i input.avi output.mp4
Затем получить содержимое файла в data_url
from IPython.display import HTML
from base64 import b64encode
mp4 = open('output.mp4','rb').read()
data_url = "data:video/mp4;base64," + b64encode(mp4).decode()
Затем отобразить его с помощью HTML ()
HTML("""
<video controls>
<source src="%s" type="video/mp4">
</video>
""" % data_url)
Вот рабочий пример .