La correspondance régulière est généralement utilisée lors de l'exploration du contenu Web d'un seul site Web. Cependant, les structures de différents sites Web sont si étranges qu'il est difficile de les faire correspondre avec une expression régulière unifiée. L'auteur de « Algorithme général d'extraction de texte de page Web basé sur la fonction de distribution de blocs de lignes » a résumé les méthodes générales d'extraction de texte d'article à partir de pages Web, a proposé un algorithme d'extraction de texte basé sur la distribution de blocs de lignes et a fourni des implémentations en PHP, Java, etc. Les grands principes de cet algorithme reposent sur deux points : 1. Densité de la zone de texte : après avoir supprimé toutes les balises en HTML, la densité des caractères dans la zone de texte est plus élevée et il y a moins de lignes multiples de blancs. 2. Longueur des blocs de lignes : la longueur des blocs de lignes ; le contenu des zones non textuelles est moyen. Plus court dans les étiquettes individuelles (blocs de lignes). Les étapes de l'algorithme sont les suivantes : 1. Supprimez toutes les balises, y compris les styles, le contenu du script Js, etc., mais conservez les sauts de ligne d'origine n2. Divisez le contenu de la page Web par lignes et définissez le bloc de ligne $block_i$ comme premier. $[i, i + blockSize] $ La somme des lignes de texte et donne la fonction de distribution de la longueur du bloc de ligne en fonction du numéro de ligne : 3. Le texte apparaît dans le bloc de ligne le plus long, intercepte la plage des deux côtés jusqu'au longueur de bloc de ligne de 0 : 4. Si vous devez extraire les images qui apparaissent dans la zone de texte, il vous suffit de conserver dans la première étape de suppression de la balise 1. [Tutoriel Python] Algorithme d'extraction de texte et d'image de contenu de page Web Introduction : La correspondance régulière est généralement utilisé lors de l'exploration du contenu Web d'un seul site Web. Cependant, les structures de différents sites Web sont si étranges qu'il est difficile d'utiliser des expressions régulières unifiées. L'auteur de « Algorithme général d'extraction de texte de page Web basé sur la fonction de distribution de blocs de lignes » a résumé les méthodes générales d'extraction de texte d'article à partir de pages Web, a proposé un algorithme d'extraction de texte basé sur la distribution de blocs de lignes et a fourni des implémentations en PHP, Java, etc. Le principe principal de cet algorithme repose sur deux points : 2 Exemple de tutoriel d'extraction php de page web text_PHP <.>Introduction : Un exemple d'extraction du contenu du corps d'une page web avec PHP. Exemple de php extrayant le contenu textuel d'une page Web. La difficulté réside dans la façon d'identifier et de conserver la partie article de la page Web, et de supprimer les autres informations inutiles. Elle doit être universelle et ne peut pas être comme un train Où sont généralement stockées les informations textuelles des pages Web_html/css_WEB-ITnose 4. Exemple de php extrayant le contenu du corps d'une page Web 5. Introduction : généralement lorsque vous ouvrez une page Web, en plus du contenu textuel de l'article, il y a généralement beaucoup d'informations de navigation, de publicité et d'autres informations. Le but de cet article est d'expliquer comment extraire le contenu textuel d'un article d'une page Web et supprimer d'autres informations non pertinentes. 6. Introduction : Prévoir le texte principal de la page Web, fonction de commutation entre les polices petites, moyennes et grandes. Utilisez le code js pour définir l'attribut fontSize du style div. 7. Introduction : La largeur ou la hauteur de la zone visible de la page Web, la largeur ou la hauteur du texte intégral de la page Web et la partie gauche ou droite du corps du texte de la page Web. Veuillez voir ci-dessous. détails J'espère que cela sera utile à tout le monde [Recommandations de questions et réponses associées] : objective-c - Extraction de texte de page Web iOS ouverte. bibliothèque source javascript - Quel est le principe d'implémentation du clipping du plug-in Chrome d'Evernote Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!