comment analyser une chaîne à spider à partir d'un autre script

Question

Je suis nouveau sur python et scrapy. Je suis en cours d'exécution le scrapy-ctl.py d'un autre script python utilisant subprocess module.But Je veux analyser le « URL de démarrage » à l'araignée de ce script itself.Is permet d'analyser start_urls (qui sont déterminé dans le script à partir duquel scrapy-ctl est exécuté) à l'araignée? Je serai pour greatful des suggestions ou des idées sur ce .... :)

Remerciant à l'avance ....

Answer 1

Vous pouvez remplacer la méthode start_requests() dans votre araignée pour obtenir les demandes de départ (qui, par défaut, sont générés à l'aide des URL de l'attribut start_urls).