no Windows, use binários não oficiais python para instalar o MySQL. use este link e baixe seu pacote python de requisitos.
instalá-lo usando,
pip install ~/Downloads/mysqlclient‑1.3.10‑cp36‑cp36m‑win_amd64.whl
a partir desse link, pesquise mysql ou mysqlclient-1.3.10-cp36-cp36m-win_amd64.whl baixe e instale usando o mesmo pip