in genere con quel tipo di file (.csv) si riesce ad interagire con mysql in phpmyadmin.
C'è stata una discussione di qualche settimana fa con un po di istruzioni.
L'alternativa, se esiste, sarebbe quella di avere un componente che ti fa fare l'importazione; basta controllare la JED (extensions.joomla.org)