communauté Apprendre Bibliothèque d'outils Loisirs
recherche
Français
Maison > base de données > tutoriel mysql > le corps du texte

为某XXX手机公司删除重复数据优化一例

WBOY
Libérer： 2016-06-07 17:41:25
original
986 Les gens l'ont consulté

这是他们一个开发写的SQL，目的是删除重复数据，且id是最小值的行不删除：deletefromjd_chapterawherea.`id`in(select`id`fromjd_chaptergroup&nbs..

这是他们一个开发写的SQL，目的是删除重复数据，且id是最小值的行不删除：

因为表大（千万级别），且使用了两个子查询，执行了很久没有执行完。
 

--------------------------思路----------------------------

采用临时表做关联，以下是步骤：

一、先到Slave库上把重复数据导出来，网站空间，避免造成主库压力过大。

  • into outfile '/tmp/jd_chapter.sql' FIELDS TERMINATED BY ','; 

    • 二、拷贝导出的SQL到Master主库的/tmp/目录下

    三、在Master主库上，建立一张临时表，并创建主键：

  • Query OK, 0 rows affected (0.07 sec) 

    • 四、在Master主库上，LOAD方式导入至临时表里

  • load data infile '/tmp/jd_chapter.sql' into table tmp FIELDS TERMINATED BY ','; 

    • 五、在Master主库上，删除临时表最小的id

  • delete from tmp limit 1; 

    • 六、用临时表做关联，删除jd_chapter表重复数据

  •  

     

    本文出自 “贺春旸的技术专栏” 博客，网站空间，请务必保留此出处

    ，虚拟主机
    • Étiquettes associées：
    delete 优化 表连接 répéter
    source：php.cn
    Article précédent： 关于oracle数据库高版本向低版本迁移的解决方法 Article suivant： 使用DBCC CHECKPRIMARYFILE 查询Detach数据库信息
    Déclaration de ce site Web
    Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn
    Derniers articles par auteur
    Derniers numéros
    La requête et la formule forment la table entière, avec de nouvelles colonnes, où les nouvelles colonnes sont des formules impliquant d'autres valeurs de colonnes conditionnelles. EDIT : La formule doit être la colonne "valeur" - la colonne "valeur" ...
    Depuis 2024-04-06 21:23:40
    0
    2
    530
    Sélectionnez les produits liés au woocommerce à l'aide d'une taxonomie personnalisée avec une hiérarchie à 3 niveaux J'ai une boutique woocommerce avec une classification personnalisée « Sports ». La classif...
    Depuis 2024-04-06 20:05:30
    0
    1
    544
    Calculer la somme des champs dans une autre table à l'aide d'une requête MySQL SQL J'ai un schéma comme celui-ci : Table utilisateur avec les attributs "user_id" e...
    Depuis 2024-04-06 19:39:29
    0
    1
    441
    MySQL : "Sélectionnez le texte de... comme <variable ici ou sous-requête>" J'ai le tableau suivant avec les données suivantes : id texte langue 1 texte allemand alle...
    Depuis 2024-04-06 19:25:54
    0
    2
    529
    Comment regrouper et compter dans MySQL ? J'essaie d'écrire une requête qui extrait le nombre total de messages non supprimés envoyé...
    Depuis 2024-04-06 18:30:17
    0
    1
    353
    Rubriques connexes
    Plus>
    Recommandations populaires
    Tutoriels populaires
    Plus>
    Tutoriels associés
    Recommandations populaires
    Derniers cours
    Derniers téléchargements
    Plus>
    effets Web
    Code source du site Web
    Matériel du site Web
    Modèle frontal