scraper

1La chaleur

1Répondre

Est-il possible de récupérer du contenu et de générer un flux RSS à partir d'un site d'adhésion?

Est-il possible d'extraire du contenu d'un site d'adhésion pour que je puisse créer un flux Rss à importer dans ma boîte de réception? Vous voyez, je suis membre de plusieurs sites qui fournissent des

0La chaleur

1Répondre

adresses e-mail Grattez

fff.html est un e-mail avec des adresses e-mail dans ce certains ont href mailto liens et d'autres non, je veux les gratter et les sortir dans le format suivant [email protected],[email protected],[em

2La chaleur

3Répondre

Comment créer un scraper HTML en PHP et le faire fonctionner correctement?

S'il vous plaît HELP! :( Je cherche à développer un script PHP pour effectuer les opérations suivantes: Scrap une page HTML à distance et d'extraire des données sélectionnées (par exemple une table pa

1La chaleur

1Répondre

L'erreur de l'API Facebook stream fonctionne dans le navigateur mais pas côté serveur

Si je saisis cette URL dans un navigateur, elle me renvoie les données XML valides que je souhaite scrapper. Cependant, si je le fais du côté serveur, cela ne fonctionne pas comme précédemment. Mainte

0La chaleur

2Répondre

Existe-t-il un moyen de trouver le lien de toutes les pages par URL?

Si j'ai un lien, disons http://yahoo.com/ alors est-ce que je peux avoir les liens à l'intérieur de yahoo? Par exemple, j'ai un site Web http://umair.com/ et je sais qu'il n'y a que 5 pages Accueil, À

4La chaleur

2Répondre

beautifulsoup et mécaniser pour obtenir le résultat de l'appel ajax

Salut im construire un grattoir en utilisant python 2.5 et beautifulsoup mais im stuble sur un problème ... une partie de la page Web génère après que l'utilisateur a cliqué sur un bouton, qui démarre

0La chaleur

1Répondre

Obtention de tous les fichiers PDF à partir d'un domaine (par exemple * .adomain.com)

Je dois télécharger tous les fichiers PDF d'un certain domaine. Il y a environ 6000 pdf sur ce domaine et la plupart d'entre eux n'ont pas de lien html (soit ils ont supprimé le lien, soit ils n'en on

8La chaleur

2Répondre

Impossible de faire fonctionner le pipeline Scrapy

J'ai une araignée que j'ai écrite en utilisant le framework Scrapy. J'ai de la difficulté à faire fonctionner des pipelines. J'ai le code suivant dans mon pipelines.py: class FilePipeline(object):