Ja, het is mogelijk, u moet de gegevens uit de CSV-bestanden lezen met behulp van de CSV-module.
http://docs.python.org/library/csv.html
En injecteer de gegevens met behulp van Python MySQL-binding. Hier is een goede beginnershandleiding:
http://zetcode.com/databases/mysqlpythontutorial/
Als je python al kent, zal het gemakkelijk zijn