Utiliser urllib et BeautifulSoup pour récupérer des informations du web avec Python

Question

Je peux obtenir la page html en utilisant urllib, et utiliser BeautifulSoup pour analyser la page html, et il me semble que je dois générer un fichier à lire depuis BeautifulSoup.

import urllib          
sock = urllib.urlopen("http://SOMEWHERE") 
htmlSource = sock.read()        
sock.close()           
--> write to file 

Y at-il un moyen d'appeler BeautifulSoup sans générer de fichier depuis urllib?

Answer 1

from BeautifulSoup import BeautifulSoup 

soup = BeautifulSoup(htmlSource) 

Aucune écriture de fichier nécessaire: Transmettez simplement la chaîne HTML. Vous pouvez également transmettre directement l'objet renvoyé par urlopen:

f = urllib.urlopen("http://SOMEWHERE") 
soup = BeautifulSoup(f)