LOAD DATA INFILE is erg snel en is de juiste manier om tekstbestanden in MySQL te importeren. Het is een van de aanbevolen methoden om het invoeren van gegevens te versnellen - tot 20 keer sneller, volgens dit:
https://dev.mysql.com/doc/refman /8.0/en/insert-optimization.html
Ervan uitgaande dat het terugschrijven van de verwerkte gegevens naar een tekstbestand sneller is dan het invoegen in de database, dan is dit een goede manier om te gaan.