Вопросы по теме 'bulkinsert'

Является ли пакетная вставка SQL Server транзакционной?
Если я выполню следующий запрос в анализаторе запросов SQL Server 2000: BULK INSERT OurTable FROM 'c:\OurTable.txt' WITH (CODEPAGE = 'RAW', DATAFILETYPE = 'char', FIELDTERMINATOR = '\t', ROWS_PER_BATCH = 10000, TABLOCK) В текстовом файле,...
21779 просмотров
schedule 22.08.2023

Вы знаете библиотеку массовых / пакетных потоков для C #?
Я работаю над проектом с требованиями к быстродействию, поэтому для повышения эффективности нам нужно выполнить массовую (пакетную?) Несколько операций (например, сохранение данных в базе данных). Однако я хочу, чтобы наш код поддерживал простой...
354 просмотров

В чем заключаются подводные камни при вставке миллионов записей в SQL Server из плоского файла?
Я собираюсь начать путешествие с написания приложения для форм Windows, которое будет открывать текстовый файл с разделителями по вертикальной линии и размером около 230 МБ. Затем это приложение вставит эти данные в базу данных sql server 2005...
2761 просмотров

Можно ли использовать таблицу sql для генерации хэша? [sqlserver2005]
Я хотел бы взять таблицу, сгенерировать ее хеш-строку, сохранить ее, затем сравнить ее в более позднее заданное время и посмотреть, совпадает ли она, если не принять к сведению время модификации и сохранить ее с новой датой изменения. Это потому,...
138 просмотров

TSQL: ОБНОВЛЕНИЕ с INSERT INTO SELECT FROM
поэтому у меня есть старая база данных, которую я перехожу на новую. У нового есть немного другая, но в основном совместимая схема. Кроме того, я хочу перенумеровать все таблицы с нуля. В настоящее время я использую написанный мной инструмент,...
35674 просмотров
schedule 24.07.2023

Копирование данных между схемами Oracle с помощью SQL
Я пытаюсь скопировать данные из одной схемы Oracle ( CORE_DATA ) в другую ( MY_DATA ) с помощью инструкции SQL INSERT INTO (...) . Как будет выглядеть оператор SQL?
41673 просмотров
schedule 25.05.2024

Нормализация данных - массовые вставки с использованием цикла
Есть ли у кого-нибудь какие-либо советы, которые могут помочь ускорить процесс разбивки таблицы и вставки большого количества записей в новую таблицу. В настоящее время я использую Access и VBA для преобразования таблицы, содержащей записи с...
432 просмотров
schedule 14.03.2023

Пакетные вставки с PHP
Java имеет PreparedStatement addBatch + executeBatch для эффективного выполнения нескольких вставок. Каков быстрый способ сделать партию вставок с использованием расширения php mysqli? Спасибо!
6925 просмотров
schedule 24.09.2022

Массовая вставка sqlite3 из C?
Я наткнулся на команду .import для этого (массовая вставка), но есть ли версия запроса, которую я могу выполнить с помощью sqlite3_exec(). Я просто хотел бы скопировать содержимое небольшого текстового файла в таблицу. Версия запроса этого ниже,...
1972 просмотров
schedule 13.09.2022

Массовая вставка кода перед тегом ‹/body› в 100 файлах
я хотел бы вставить <?php include_once('google_analytics.php'); ?> перед закрывающим тегом body около 100 файлов php. К сожалению, человек, который сделал сайт, не сделал шаблон шапки или футера. Как лучше всего это сделать? Я...
1383 просмотров
schedule 30.05.2022

Как быстрее всего вставить 100 000 записей из одной базы данных в другую?
У меня есть мобильное приложение. У моего клиента большой набор данных ~ 100 000 записей. Он часто обновляется. Когда мы синхронизируем, нам нужно копировать из одной базы данных в другую. Я подключил вторую базу данных к основной и запустил...
7145 просмотров
schedule 17.06.2023

импортировать объемные данные в MySQL
Поэтому я пытаюсь импортировать некоторые данные о продажах в свою базу данных MySQL. Данные изначально представлены в виде необработанного CSV-файла, который моему PHP-приложению необходимо сначала обработать, а затем сохранить обработанные данные о...
6156 просмотров
schedule 11.09.2022

Оптимизация массивных операций MySQL INSERT
У меня есть приложение, которому нужно запускать ежедневный скрипт; ежедневный сценарий состоит из загрузки CSV-файла с 1 000 000 строк и вставки этих строк в таблицу. Я размещаю свое приложение в Dreamhost. Я создал цикл while, который проходит...
8184 просмотров
schedule 19.02.2022

SQLBulkCopy или массовая вставка
У меня около 6500 файлов на сумму около 17 ГБ данных, и это первый раз, когда мне пришлось переместить то, что я бы назвал большим объемом данных. Данные находятся на сетевом диске, но отдельные файлы относительно малы (не более 7 МБ). Я пишу...
8062 просмотров
schedule 12.05.2023

Проблема с форматом номера Oracle ODP.NET BulkCopy
Я использую ODP.NET BulkCopy для копирования данных из таблицы данных в таблицу базы данных оракула. В моей таблице данных поля представляют собой строку, поэтому число может быть представлено как «123 456 789,111» (правильный формат) или...
406 просмотров
schedule 03.03.2022

Медленная пакетная/массовая вставка в SQLite
Я пытаюсь импортировать данные из файла csv в таблицу sqlite. Мои тестовые данные составляют всего около 8 МБ (50 000 строк) и занимают около 15 секунд. Однако производственные данные занимают почти 400 МБ и занимают вечность (по крайней мере, 30...
3815 просмотров
schedule 24.10.2022

SQL Alchemy - INSERT результаты запроса
Я ищу способ в SQLAlchemy сделать массовое INSERT , чьи строки являются результатом запроса. Я знаю, что в сеансе есть функция add , которую можно использовать для добавления отдельного объекта, но я не могу понять, как она работает с подзапросом....
2762 просмотров
schedule 12.06.2022

Ошибка массовой загрузки Salesforce с использованием загрузчика данных Apex: превышено ограничение на объем хранилища
Когда я пытаюсь выполнить массовую загрузку 25 000 записей пользовательского объекта (сотрудника), я получаю сообщение об ошибке «Превышены пределы хранения». Я убедился, что в Salesforce нет объектов сотрудников (с помощью удаления загрузчика...
3186 просмотров

BulkInsert в таблицу со столбцом Identity (T-SQL)
1) Могу ли я сделать BulkInsert из CSV-файла в таблицу, чтобы в таблице был столбец идентификаторов, которого нет в CSV, и который автоматически назначается? 2) Есть ли какое-либо правило, согласно которому таблица, в которую я выполняю массовую...
3355 просмотров
schedule 11.03.2023

Преобразуйте файл, полный INSERT INTO xxx VALUES, во что-то, что массовая вставка может проанализировать
Это продолжение моего первого вопроса « Перенос экспорта «SQL» в T-SQL ». Я работаю со сторонней программой, которую не могу контролировать и не могу изменить. Эта программа экспортирует свою внутреннюю базу данных в набор из .sql каждого в...
639 просмотров