web-crawler

-1La chaleur

1Répondre

S'il vous plaît donnez-moi un exemple de macros IMacros pour visiter tout le site entièrement

Donc, je donne la première page et les macros doivent visiter toutes les pages de ce site. (ouvre un nouvel onglet par exemple de chaque page) Celui-ci je l'ai trouvé dans le net, mais cette macros vi

0La chaleur

2Répondre

Suggestion avec les meilleurs crawlers et grattoirs personnalisables

J'ai un site Web qui est assez bon mais avec très moins d'informations. Donc je me sentais comme ajoutant des informations comme des nouvelles concernant le secteur particulier (par exemple, la politi

1La chaleur

1Répondre

meta refresh télécharger/C# crawler

J'essaye de créer un crawler pour télécharger du contenu d'un site Web. En supposant que l'URL pour consommer est quelque chose comme clickUrl ="http://www.example.com/idocs-nph/search/pdfViewerForm.h

2La chaleur

1Répondre

Comment dessiner la toile d'araignée

Je dois dessiner une toile d'araignée en utilisant des structures de données. pas si grand sur l'imagination. Devrais-je utiliser un arbre binaire ou un graphique? ou d'autres structures de données?

1La chaleur

3Répondre

Une URL secrète peut-elle être indexée par les moteurs de recherche?

Mon patron est récemment venu à moi avec un problème de sécurité. Mon entreprise effectue des recherches et envoie ensuite un rapport au client (ce rapport est unique pour chaque client et contient de

3La chaleur

5Répondre

Moteur de recherche sans rampement?

Existe-t-il un moyen de collecter du contenu Web afin de l'utiliser dans un moteur de recherche sans passer par la phase d'exploration Web? Toute alternative à l'exploration Web? Merci

1La chaleur

1Répondre

Exploration des données ou utilisation de l'API

Comment ces sites collectent-ils toutes les données - questionhub, bigresource, theevedea, developererbay? Est-ce légal d'afficher les données dans le cadre comme bigresource?

0La chaleur

2Répondre

Chaîne de conversion PHP de Windows-1250 à utf-8

Je suis en train d'explorer le site Windows-1250 (meta http-equiv = "Content-Type" content = "text/html; jeu de caractères = windows-1250"). Étant donné que ma base de données est utf-8, j'ai besoin d

17La chaleur

2Répondre

Un crawler/spider Web C++ très simple?

J'essaie de faire une application web crawler/spider très simple en C++. J'ai été recherché google pour un simple pour comprendre le concept. Et je trouve ceci: http://www.example-code.com/vcpp/spider

2La chaleur

1Répondre

Que devrais-je utiliser pour explorer de nombreux articles de presse?

J'ai un projet de traitement du langage naturel, mais pour cela j'ai besoin d'explorer de nombreux articles web à partir de certaines sources comme Yahoo nouvelles, Google nouvelles ou blogs ... Je su