Ja, det er muligt, du skal læse dataene fra CSV-filerne ved hjælp af CSV-modulet.
http://docs.python.org/library/csv.html
Og injicer dataene ved hjælp af Python MySQL-binding. Her er en god begyndervejledning:
http://zetcode.com/databases/mysqlpythontutorial/
Hvis du allerede kender python, vil det være nemt