obtenir les 10 premiers résultats de Google en utilisant googleapi

Question

Je dois obtenir les 10 premiers résultats de Google

par exemple:

... query = urllib.urlencode({'q' : 'example'}) 
... 
... url = 'http://ajax.googleapis.com/ajax/services/search/web?v=1.0&%s' \ 
... % (query) 
... search_results = urllib.urlopen(url) 
... json = simplejson.loads(search_results.read()) 
... results = json['responseData']['results'] 

cela va me donner les résultats de la première page, mais comme `d pour obtenir plus de résultats google, quelqu'un sait-il comment faire cela?

Answer 1

Je l'ai fait dans le passé, voici exemple complet (je ne suis pas gourou python, mais il fonctionne):

#!/usr/bin/env python 
# -*- coding: utf-8 -*- 

import sys, getopt 
import urllib 
import simplejson 

OPTIONS = ("m:", ["min="]) 

def print_usage(): 
    s = "usage: " + sys.argv[0] + " " 
    for o in OPTIONS[0]: 
     if o != ":" : s += "[-" + o + "] " 
    print(s + "query_string\n") 

def search(query, index, offset, min_count, quiet=False, rs=[]): 
    url = "http://ajax.googleapis.com/ajax/services/search/web?v=1.0&rsz=large&%s&start=%s" % (query, offset) 
    result = urllib.urlopen(url) 
    json = simplejson.loads(result.read()) 
    status = json["responseStatus"] 
    if status == 200: 
     results = json["responseData"]["results"] 
     cursor = json["responseData"]["cursor"] 
     pages = cursor["pages"] 
     for r in results: 
      i = results.index(r) + (index -1) * len(results) + 1 
      u = r["unescapedUrl"] 
      rs.append(u) 
      if not quiet: 
       print("%3d. %s" % (i, u)) 
     next_index = None 
     next_offset = None 
     for p in pages: 
      if p["label"] == index: 
       i = pages.index(p) 
       if i < len(pages) - 1: 
        next_index = pages[i+1]["label"] 
        next_offset = pages[i+1]["start"] 
       break 
     if next_index != None and next_offset != None: 
      if int(next_offset) < min_count: 
       search(query, next_index, next_offset, min_count, quiet, rs) 
    return rs 

def main(): 
    min_count = 64 
    try: 
     opts, args = getopt.getopt(sys.argv[1:], *OPTIONS) 
     for opt, arg in opts: 
      if opt in ("-m", "--min"): 
       min_count = int(arg) 
     assert len(args) > 0 
    except: 
     print_usage() 
     sys.exit(1) 
    qs = " ".join(args) 
    query = urllib.urlencode({"q" : qs}) 
    search(query, 1, "0", min_count) 

if __name__ == "__main__": 
    main() 

Edit: j'ai fixé les options de ligne de commande évidentes mauvaise manipulation; vous pouvez appeler ce script comme suit:

python gsearch.py --min=5 vanessa mae 

--min moyens de commutation « au moins 5 résultats » et est facultative, vous obtiendrez le nombre de résultats maximum autorisé (64) si elle n'est pas spécifié.

De même, la gestion des erreurs est omise par souci de concision.

Answer 2

Voir docs http://code.google.com/apis/websearch/docs/reference.html#_intro_fonje

Vous êtes à la recherche du paramètre de démarrage.

Il n'y a pas de paramètre pour obtenir plus de résultats dans une réponse, mais vous pouvez parcourir le paramètre start.

Answer 3

Cette méthode est maintenant mentionné comme deprecated par Google, vous pouvez essayer:

http://code.google.com/apis/customsearch/v1/overview.html