Doy mi versión para el problema con mysql. Un modulo de reemplazo, puede ser pymysql.

pip install pymysql

Luego en manage.py en las importaciones. Ejecutamos esta instrucción antes de cualquier instrucción Django.

#!/usr/bin/env python
"""Django's command-line utility for administrative tasks."""
import os
import sys
#Las dos siguiente lineas, son para poder, usar,
#pymysql y MySQLdb.
import pymysql
pymysql.install_as_MySQLdb()

Si aún así sigue dando error, vamos a la ruta: "..\env\Lib\site-packages\django\db\backends\mysql" y modificamos el archivo "operations.py", recordar que en ese archivo se usan 4 espacios como indentación, no TAB;

Modificamos la linea qu dice "query = query.decode(errors='replace')"

por: 

            if type(query) is str:
                query = query
            else:
                query = query.decode(errors='replace')
        return query

En qué caso se utiliza mysql y en qué caso postgresql?

Creo que con Heroku debe ser con postgrest pero no se que servidor admite mysql.

Que tal chicos, si tuvieron problemas en windows les dejo la solución:

1.-Vean con exactitud que version de python tienen, en la linea de comando pongan python --version

2.-Visiten https://www.lfd.uci.edu/~gohlke/pythonlibs/#mysqlclient  y busquen su versión, yo tengo una arquitectura de 64 bits, tengo python 3.8, me bajé la de "mysqlclient‑1.4.5‑cp38‑cp38‑win_amd64.whl" y me dio error, no sé porque pero me funcionó con mysqlclient‑1.4.5‑cp37‑cp37m‑win32.whl, ejecuten pip install mysqlclient-su_version_de_python.win32/64.whl REPITO, no sé porque me funcionó con la de 32 bits, y listo, creanme que me costó toda la mañana y parte de la tarde pero espero ayudarlos.

Y bueno, no sé si el tutor me ayudaría a entender porque no puedo hacer las migraciones, no me sale error de nada simplemente me dice no migrations apply, seguí las instrucciones del video al pie de la lera.