Задать вопрос
@FNY3PM
python

Нормальная ли скорость записи?

Здравствуйте. Есть файл с массивом тестовых данных (1 миллион элементов: логин, пароль, дата регистрации). Python считывает файл и записывает его в БД за 23 секунды. Нормальный ли это результат? Какие хорошие показатели есть при записи подобного в БД? Возможно, есть какие-то фичи, которые помогут ускорить процесс?
  • Вопрос задан
  • 153 просмотра
Комментировать
Подписаться 1 Простой Комментировать
Решения вопроса 1
jcmvbkbc
@jcmvbkbc
"I'm here to consult you" © Dogbert
Возможно, есть какие-то фичи, которые помогут ускорить процесс

Запись всех данных в БД одной транзакцией, вместо отдельной транзакции на запись каждой строки данных.
Ответ написан
1 комментарий
1 комментарий
Пригласить эксперта
Ответы на вопрос 1
inoise
@inoise
Solution Architect, AWS Certified, Serverless
Потоковое чтение файла и распределенная запись в базу разве что быстрее) но тут надо либо четко делить файл по частям, либо же иметь message broker. Но для разовой операции это излишнее усложнение
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Team Lead (С++, Python)
TopAssistant • Москва
от 400 000 ₽
Python developer
Bell Integrator
До 350 000 ₽
Python developer
Greenway Global • Новосибирск
от 150 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Консультация ПЛИС (FPGA)
24 апр. 2024, в 22:00
500 руб./в час
SEO сайта услуг
24 апр. 2024, в 21:49
10000 руб./за проект
Разработка стратегий продвижения в соц сетях FB
24 апр. 2024, в 20:50
10000 руб./за проект
Ещё заказы