Questions et réponses pour le scrapy :

Scrapy est un framework de capture d'écran et d'analyse Web de haut niveau et open source rapide écrit en Python utilisé pour explorer des sites Web et extraire des données structurées de leurs pages. Il peut être utilisé pour un large éventail d'objectifs, de l'exploration de données à la surveillance et aux tests automatisés.

5
votes
J'essaie d'écrire un petit script qui extraira les balises du jeu Steam et les stockera dans un fichier csv. Le problème que j'ai actuellement est que je ne sais pas comment supprime ...

3
votes
L'ordre par défaut dans scrapy est l'alphabet, j'ai lu un article pour utiliser OrderedDict pour afficher l'élément dans un ordre personnalisé. J'écris une ...

2
votes
J'ai le code suivant qui explore l'adresse de site Web donnée, mais le problème est qu'il duplique l'URL lors de l'exploration. J'ai besoin d'une liste unique et complète d'UR ...

2
votes
Je dois accéder aux paramètres personnalisés transmis par la CLI en utilisant: -s SETTING_NAME = "SETTING_VAL" à partir de la méthode ...