Ik weet niet hoe duur het is, maar een alternatieve manier is om een andere tabel met een primaire sleutel te maken, alle gegevens daar in te voeren en de dubbele vermeldingen in stilte te weigeren, zoals hier vermeld
eigenlijk, met behulp van IGNORE_DUP_KEY