Задать вопрос
doublench21
@doublench21
mysql

Как удалить дубликаты в таблице MySql на 29 миллионов строк?

Каким запросом у меня не встанет система при такой операции ?
  • Вопрос задан
  • 657 просмотров
Комментировать
Подписаться 2 Оценить Комментировать
Решения вопроса 1
DmitriyEntelis
@DmitriyEntelis
Думаю за деньги
Если есть возможность остановить запись/изменение таблицы - наиболее быстрым методом будет следующая схема.

1.
Создаем новую таблицу table2 со структурой аналогичной исходной table1.

2.
insert into table2 (select distinct ... from table 1);
в случае если структура сложная - можно вместо distinct использовать group by

3.
drop table1;

4.
Переименовываем table2 в table1;
Ответ написан
Комментировать
Комментировать
Пригласить эксперта
Ответы на вопрос 2
@art_karetnikov
Лучший мой проект: Мобильный банк Сбербанка РФ.
Я бы не стал на вашем месте удалять из таблицы ничего. А просто создал бы новую, уже без дублей. В плане потребления ресурсов - оно значительно экономней будет. И никто не мешает сделать так:
1. Первые сто тысяч отобрал, запомнить id последней записи.
2 .Пауза.
3. Отобрал следующие сто тысяч начиная с последнего айди. Гоу ту пункт два.

Все.
Ответ написан
Комментировать
Комментировать
Chvalov
@Chvalov
Посмотрите - stackoverflow.com/questions/4685173/delete-all-dup...
stackoverflow.com/questions/3311903/remove-duplica...
stackoverflow.com/questions/14046355/how-do-i-dele...
Ответ написан
2 комментария
2 комментария
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Программист C++ Builder / базы данных MySQL
RU Electronics • Москва
от 180 000 до 200 000 ₽
Инженер технической поддержки с английским языком и знанием PHP/MySQL
IT-Aces
от 100 000 до 150 000 ₽
Системный аналитик
ROBOTMIA • Новосибирск
от 100 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Скопировать верстку, посадить на функционал
20 апр. 2024, в 12:01
20000 руб./за проект
Разработать сайт-визитку на Wordpress
20 апр. 2024, в 11:52
5000 руб./за проект
Написать программу иммитирующую поведение человека для выбора услуг
20 апр. 2024, в 11:21
1000 руб./за проект
Ещё заказы