Sí, es posible, deberá leer los datos de los archivos CSV utilizando el módulo CSV.
http://docs.python.org/library/csv.html
Y luego inyectar los datos usando el enlace Python MySQL. Aquí hay un buen tutorial de inicio:
http://zetcode.com/databases/mysqlpythontutorial/
Si ya conoces Python será fácil