Приложение Java Desktop для загрузки файлов CSV в базу данных

Похоже, для этого можно использовать CloverETL. Это инструмент интеграции данных и ETL на основе Java. Наряду с коммерческими выпусками у него есть бесплатный движок ETL с открытым исходным кодом. Его должно быть довольно легко встроить в ваше приложение в виде библиотеки Java. У вас также не должно быть проблем с производительностью, о которых вы упоминали выше, если только узкое место не находится на стороне БД. Говорят, что CloverETL работает быстро.

Если вам нужно узнать другие технические подробности, вы можете спросить меня или использовать форум CloverETL.

Если у вас есть оболочка bash, вы можете сделать это:

sqlite3 my_database_file <<< .import <(gawk 'NR>1 { a = $0; if(NR>2){print a;}}' my_csv_file) my_table_name

Я предполагаю, что вы используете утилиту управления командной строкой SQLITE.

Самый простой способ сделать это — удалить строки заголовка и нижнего колонтитула из файла импорта перед его импортом в sqlite, используя любую функцию редактирования, которая вам наиболее удобна в вашей системе.

Если файл примера, который вы разместили, точен, вам все равно придется сделать это, поскольку последняя строка, содержащая только один столбец, будет отклонена командой SQLITE .import, что приведет к прерыванию всего ввода.

Если вы исправите проблему с нижним колонтитулом и настаиваете на использовании команд SQLITE, вот предлагаемый метод:

Исправить нижний колонтитул

HEADER1, HEADER2, HEADER3
row1,row2,row3
row11,row22,row33
row111,row222,row33
FOOTER, FOOT1, FOOT2

Сделать импорт

sqlite> select * from test;
HEADER1, HEADER2, HEADER3
row1,row2,row3
row11,row22,row33
row111,row222,row33
FOOTER, FOOT1, FOOT2

Удалить нижний колонтитул

sqlite> select count() from test;
5
sqlite> delete from test where rowid=5;

Удалить заголовок

sqlite> delete from test where rowid=1;
sqlite> select * from test;
row1,row2,row3
row11,row22,row33
row111,row222,row33