Ik kwam dit probleem tegen met een debian-container. Wat het oploste, was het installeren van elk pakket met afzonderlijke opdrachten. Dus in plaats van
RUN apt-get install -y python-pip libmysqlclient-dev
doen
RUN apt-get install -y python-pip
RUN apt-get install -y libmysqlclient-dev