Maison base de données tutoriel mysql Problème de pagination MySQL sous des millions de données

Problème de pagination MySQL sous des millions de données

Apr 17, 2019 pm 05:23 PM
pagination mysql

Nous utilisons souvent la pagination pendant le processus de développement. La technologie de base consiste à utiliser la limite pour lire les données. Lors du test d'utilisation de la limite pour la pagination, les données suivantes ont été obtenues :

select * from news order by id desc limit 0,10
耗时0.003秒
select * from news order by id desc limit 10000,10
耗时0.058秒
select * from news order by id desc limit 100000,10 
耗时0.575秒
select * from news order by id desc limit 1000000,10
耗时7.28秒

Nous avons été surpris de constater que lorsque le volume de données est important, plus le point de départ de la pagination dans MySQL est grand, plus le processus est lent. vitesse de requête. Pour les requêtes à partir de 1 million La vitesse prend déjà 7 secondes. C’est une valeur que nous ne pouvons pas accepter !

Plan d'amélioration 1

select * from news 
where id >  (select id from news order by id desc  limit 1000000, 1)
order by id desc 
limit 0,10

Le temps de requête est de 0,365 seconde, l'amélioration de l'efficacité est très évidente ! ! Quel est le principe ? ? ?

Nous avons utilisé des conditions pour filtrer l'identifiant. Dans la sous-requête (sélectionner l'identifiant dans l'ordre des nouvelles par limite d'identifiant desc 1000000, 1), nous avons uniquement interrogé le champ identifiant par rapport à la sélection * ou à la sélection de plusieurs champs. de surcharge de requête !

Plan d'amélioration 2

Convient aux systèmes avec identifiants continus, extrêmement rapide !

select * from news 
where id  between 1000000 and 1000010 
order by id desc

ne convient pas aux requêtes avec des conditions et des identifiants discontinus. Très vite !

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration de ce site Web
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn

Outils d'IA chauds

Undress AI Tool

Undress AI Tool

Images de déshabillage gratuites

Undresser.AI Undress

Undresser.AI Undress

Application basée sur l'IA pour créer des photos de nu réalistes

AI Clothes Remover

AI Clothes Remover

Outil d'IA en ligne pour supprimer les vêtements des photos.

Clothoff.io

Clothoff.io

Dissolvant de vêtements AI

Video Face Swap

Video Face Swap

Échangez les visages dans n'importe quelle vidéo sans effort grâce à notre outil d'échange de visage AI entièrement gratuit !

Article chaud

Rimworld Odyssey Comment pêcher
1 Il y a quelques mois By Jack chen
Puis-je avoir deux comptes Alipay?
1 Il y a quelques mois By 下次还敢
Guide du débutant de Rimworld: Odyssey
1 Il y a quelques mois By Jack chen
Porce de variable PHP expliquée
3 Il y a quelques semaines By 百草

Outils chauds

Bloc-notes++7.3.1

Bloc-notes++7.3.1

Éditeur de code facile à utiliser et gratuit

SublimeText3 version chinoise

SublimeText3 version chinoise

Version chinoise, très simple à utiliser

Envoyer Studio 13.0.1

Envoyer Studio 13.0.1

Puissant environnement de développement intégré PHP

Dreamweaver CS6

Dreamweaver CS6

Outils de développement Web visuel

SublimeText3 version Mac

SublimeText3 version Mac

Logiciel d'édition de code au niveau de Dieu (SublimeText3)

Sujets chauds

Tutoriel PHP
1508
276
Stratégies pour l'optimisation des performances de la requête MySQL Stratégies pour l'optimisation des performances de la requête MySQL Jul 13, 2025 am 01:45 AM

L'optimisation des performances de la requête MySQL doit partir des points principaux, y compris l'utilisation rationnelle des index, l'optimisation des instructions SQL, la conception de la structure de table et les stratégies de partitionnement, et l'utilisation des outils de cache et de surveillance. 1. Utiliser les index raisonnablement: créer des index sur les champs de requête couramment utilisés, éviter la numérisation complète de la table, faire attention à l'ordre d'index combiné, n'ajouter pas d'index dans des champs sélectifs faibles et éviter les index redondants. 2. Optimiser les requêtes SQL: Évitez de sélectionner *, n'utilisez pas de fonctions dans l'endroit, réduisez la nidification des sous-requêtes et optimisez les méthodes de requête de pagination. 3. Conception et partitionnement de la structure du tableau: sélectionnez le paradigme ou l'anti-paradigme en fonction des scénarios de lecture et d'écriture, sélectionnez les types de champ appropriés, nettoyez régulièrement les données et considérons les tables horizontales pour diviser les tableaux ou partitionner par le temps. 4. Utiliser le cache et la surveillance: utilisez le cache Redis pour réduire la pression de la base de données et activer la requête lente

Sécuriser les connexions MySQL avec le cryptage SSL / TLS Sécuriser les connexions MySQL avec le cryptage SSL / TLS Jul 21, 2025 am 02:08 AM

Pourquoi ai-je besoin de la connexion MySQL de cryptage SSL / TLS? Étant donné que les connexions non cryptées peuvent provoquer l'interception des données sensibles, l'activation de SSL / TLS peut empêcher les attaques de l'homme au milieu et répondre aux exigences de conformité; 2. Comment configurer SSL / TLS pour MySQL? Vous devez générer un certificat et une clé privée, modifier le fichier de configuration pour spécifier les chemins SSL-CA, SSL-CERT et SSL-Key et redémarrer le service; 3. Comment forcer SSL lorsque le client se connecte? Implémenté en spécifiant les exigences ou requirex509 lors de la création d'un utilisateur; 4. Les détails qui sont facilement négligés dans la configuration SSL incluent les autorisations de chemin de certificat, les problèmes d'expiration des certificats et les exigences de configuration du client.

Comment connecter Excel à la base de données MySQL Comment connecter Excel à la base de données MySQL Jul 16, 2025 am 02:52 AM

Il existe trois façons de connecter Excel à la base de données MySQL: 1. Utilisez PowerQuery: Après avoir installé le pilote MySQLODBC, établissez des connexions et importez des données via la fonction PowerQuery intégrée d'Excel et prends en charge la rafraîchissement chronométré; 2. Utilisez le plug-in MySqlforexcel: le plug-in officiel fournit une interface amicale, prend en charge la synchronisation bidirectionnelle et l'importation de table dans MySQL et faites attention à la compatibilité des versions; 3. Utilisez la programmation VBA ADO: adaptée aux utilisateurs avancés et réalisez des connexions et des requêtes flexibles en écrivant un code macro. Choisissez la méthode appropriée en fonction de vos besoins et de votre niveau technique. PowerQuery ou MySqlforexcel est recommandé pour une utilisation quotidienne, et VBA est meilleur pour le traitement automatisé.

Exemple d'expression de la table commune MySQL (CTE) Exemple d'expression de la table commune MySQL (CTE) Jul 14, 2025 am 02:28 AM

CTE est un résultat temporaire défini dans MySQL utilisé pour simplifier les requêtes complexes. Il peut être référencé plusieurs fois dans la requête actuelle, améliorant la lisibilité et la maintenance du code. Par exemple, lorsque vous recherchez les dernières commandes pour chaque utilisateur dans la table des commandes, vous pouvez d'abord obtenir la dernière date de commande pour chaque utilisateur via le CTE, puis l'associer à la table d'origine pour obtenir l'enregistrement complet. Par rapport aux sous-requêtes, la structure CTE est plus claire et la logique est plus facile à déboguer. Les conseils d'utilisation incluent des alias explicites, la concaténation des CTES multiples et le traitement des données d'arborescence avec des CTE récursifs. La maîtrise du CTE peut rendre SQL plus élégant et efficace.

Choisir des types de données appropriés pour les colonnes dans les tables MySQL Choisir des types de données appropriés pour les colonnes dans les tables MySQL Jul 15, 2025 am 02:25 AM

Lors de la mise en œuvre de la dataTypescucialForcial et de l'échelle de choix.

Automatisation des déploiements MySQL avec infrastructure comme code Automatisation des déploiements MySQL avec infrastructure comme code Jul 20, 2025 am 01:49 AM

Pour réaliser l'automatisation du déploiement MySQL, la clé est d'utiliser Terraform pour définir les ressources, la configuration de gestion anible, le GIT pour le contrôle de version et le renforcement de la gestion de la sécurité et de l'autorisation. 1. Utilisez Terraform pour définir les instances MySQL, telles que la version, le type, le contrôle d'accès et d'autres attributs de ressources d'AWSRD; 2. Utilisez ANSIBLEPLAYBOOK pour réaliser des configurations détaillées telles que la création d'utilisateurs de base de données, les paramètres d'autorisation, etc.; 3. Tous les fichiers de configuration sont inclus dans la gestion GIT, le suivi du changement de support et le développement collaboratif; 4. Évitez les informations sensibles à code dur, utilisez Vault ou ANSIBLEVAULT pour gérer les mots de passe et définissez les principes de contrôle d'accès et d'autorisation minimale.

Configuration de la réplication semi-synchrone dans MySQL Configuration de la réplication semi-synchrone dans MySQL Jul 15, 2025 am 02:35 AM

Les étapes de définition de la réplication semi-synchrone MySQL sont les suivantes: 1. Confirmez la version prend en charge et chargez le plug-in; 2. Allumez et activez le mode semi-synchrone; 3. Vérifiez l'état et l'état de fonctionnement; 4. Faites attention aux paramètres de délai d'expiration, à la configuration de la bibliothèque multi-esclaves et au traitement de commutation maître-esclave. Il est nécessaire de s'assurer que les versions MySQL 5.5 et au-dessus sont installées, RPL_SEMI_SYNC_MASSER et RPL_SEMI_SYNC_SLAVE, Activer les paramètres correspondants dans la bibliothèque maître et consciente, et de configurer le chargement automatique dans MY.CNF, de redémarrer le délai après le paramètre, de vérifier le statut de l'équilibre, d'ajuster raisonnablement le temps et de surveiller la bouche.

MySQL Incorrect String Value for Colonne MySQL Incorrect String Value for Colonne Jul 15, 2025 am 02:40 AM

Erreur MySQL "IncorrectStringValueForColumn" est généralement dû au jeu de caractères de champ ne prend pas en charge les caractères de quatre octets tels que les emoji. 1. Cause d'erreur: le jeu de caractères UTF8 de MySQL prend en charge uniquement les caractères de trois octets et ne peut pas stocker des emoji quatre octets; 2. Solution: Modifiez la base de données, la table, les champs et les connexions vers un jeu de caractères UTF8MB4; 3. Vérifiez également si les fichiers de configuration, les tables temporaires, le codage de la couche d'application et les pilotes du client prennent tous en charge UTF8MB4; 4. Solution alternative: si vous n'avez pas besoin de prendre en charge les caractères de quatre octets, vous pouvez filtrer des caractères spéciaux tels que les emoji sur la couche d'application.

See all articles