Telecharger fichier a partir d'urlRésolu

Question

bonjour a tous ,
je voudrais avoir une piste de recherche quant a telecharger un fichier a partir d'une url connu : 
peut recuperer comme en java le flux d'entre d'un objet urllib2 (genre un getInputStream)
 ou alors une urllib2.openurl(monurl).read() ou alors derniere solution :
j'ouvre une socket et je fais une requete get sur l'url donnant le fichier ? et je lis le fichier en lisant dans la socket

selon vous qu'elle est la meilleur maniere ?

merci
bonne journee
 "n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

cs_DoudouBidou · Accepted Answer

ben tu peux le faire aussi avec urllib2
exemple : je veux récupérer la d'accueil de google

import urllib2
url = "http://www.google.fr"
fp = urllib2.urlopen(url)

#longueur du fichier
lg = fp.headers.get('content-length')

data = ''
for i in range(lg):
    data += fp.read(1) # <= ici je lis le fichier bit par bit

fp.close()

cs_DoudouBidou · Answer

Tout dépends ce que tu veux faire et la taille de ton fichier mais perso je pense que le simple et rapide est de faire urllib2.openurl(monurl).read()
au moins tu ne t'occupe de rien pour ce qui est du socket et du protocol

sheorogath · Answer

ben en fait je voulais pouvoir gerer l'avancement du telechargment ...
c'etait pour faire un prog qui telecharge les video sur youtube (je l'ai fais en java) et je voulais pour mon second prog python faire cela ...
je vais m'oriente cote socket je pense ...
merci bien
++

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

sheorogath · Answer

ouais je vois mais si je fais openurl il charge le fichier donc apres ca ne sert a rien de le lire bit par bit ... ce que je veux c'est la progression au cours du temps et mise a part les socket je vois pas d'autre moyen de le faire ...

en tout cas merci poru tes reponses

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

cs_DoudouBidou · Answer

il charge le fichier? c'est nouveau ça
non ! urlopen ne charge pas le fichier il ouvre simplement la connexion
les données ne sont télécharger qu'au moment du read

sheorogath · Answer

excuse pardon j'ai supperpose mon code au tien en fait je crois que tu viens de resoudre mon pb 

je croyais avoir lu un fp = urllib2.urlopen(url).read() ...
je met resolu car je pense que c ca que je cherchais 
merci bien 
bonen soiree

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

cs_DoudouBidou · Answer

fp.headers.get('content-length') #<= ne pas oublier de le convertir en int car c'est du texte

je ne dis pas que c'est la meilleur solution, j'ignore ce que ça vaut niveau rapidité de téléchargement, je pense qu'il vaut mieux lire les bits 16 par 16 ou 32 par 32 plutot que 1 par 1
cette méthode ne te permet pas de télécharger un morceau du fichier situé n'importe où dans le fichier, tu commences obligatoirement par le début, mais je pense qu'on doit pouvoir le faire n'utilisant pas directement urlopen mais en créant un opener "spécial"
comme je le disais c'est la méthode la plus simple pour suivre un téléchargement

sheorogath · Answer

oui en tout cas ca me conviens parfaitement ... ce que je voulais c'etait pouvoir suivre l'avancement et ta methode semble repondre a ce probleme je vais d'ailleurs l'essayer de suite ^^
pour la conversion ok merci de me le dire car comme le type n'est pas explicite jeme serais fait avoir je pense

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

cs_DoudouBidou · Answer

pour récupérer la taille on peut faire comme ça aussi, ça revient au même
int(fp.info()['content-length'])

pour faire un calcul sur la vitesse de téléchargement c'est plus simple de récupérer 1024 bits à chaque fois, tu pourras faire un calcul en ko directement

sheorogath · Answer

perso j'ai fait ceci :

lg =  vid.headers.get( 'content-length' 
)

print
"lg en string  = %s"
 % lg
lg =  int(lg)
print "lg int = %i" 
 % lg
data  = 
''

for i in range(lg):
   data = vid.read(4096)
   ifnot data: 
break
   file.write(data)
   data = None 
file.flush()

par contre la video ne se lit pas il semblerais que j'ajoute des bit qui ne devraient pas y etre lors de l'ecriture

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

sheorogath · Answer

resolu : changer le mode d'ecriture :

file = open(titre +

".flv" , 
"a+b")

au lieu de "w"

"n'est pas mort ce qui semble a jamais dormir et en d'etrange temps meme la mort peut mourrir"

Telecharger fichier a partir d'url

11 réponses

Votre réponse

Discussions similaires