Pobierz Plik z Internetu w Pythonie 3

Jeśli chcesz uzyskać zawartość strony internetowej do zmiennej, wystarczy read odpowiedź urllib.request.urlopen:

import urllib.request
...
url = 'http://example.com/'
response = urllib.request.urlopen(url)
data = response.read()      # a `bytes` object
text = data.decode('utf-8') # a `str`; this step can't be used if data is binary

Najprostszym sposobem na pobranie i zapisanie pliku jest użycie urllib.request.urlretrieve funkcja:

import urllib.request
...
# Download the file from `url` and save it locally under `file_name`:
urllib.request.urlretrieve(url, file_name)

import urllib.request
...
# Download the file from `url`, save it in a temporary directory and get the
# path to it (e.g. '/tmp/tmpb48zma.txt') in the `file_name` variable:
file_name, headers = urllib.request.urlretrieve(url)

Ale należy pamiętać, że urlretrieve jest uważany za dziedzictwo i może stać się przestarzały(choć Nie wiem dlaczego).

Więc najbardziej poprawnym sposobem na to byłoby użycie urllib.request.urlopen funkcja zwracająca obiekt podobny do pliku, który reprezentuje odpowiedź HTTP i kopiująca go do rzeczywistego pliku za pomocą shutil.copyfileobj.

import urllib.request
import shutil
...
# Download the file from `url` and save it locally under `file_name`:
with urllib.request.urlopen(url) as response, open(file_name, 'wb') as out_file:
    shutil.copyfileobj(response, out_file)

Jeśli wydaje się to zbyt skomplikowane, możesz pójść prościej i zapisać cały pobrany plik w obiekcie bytes, a następnie zapisać go do pliku. Ale to działa dobrze tylko dla małych plików.

import urllib.request
...
# Download the file from `url` and save it locally under `file_name`:
with urllib.request.urlopen(url) as response, open(file_name, 'wb') as out_file:
    data = response.read() # a `bytes` object
    out_file.write(data)

Możliwe jest wyodrębnianie .gz (i być może innych formatów) skompresowanych danych w locie, ale taka operacja prawdopodobnie wymaga serwera HTTP do obsługi losowego dostępu do pliku.

import urllib.request
import gzip
...
# Read the first 64 bytes of the file inside the .gz archive located at `url`
url = 'http://example.com/something.gz'
with urllib.request.urlopen(url) as response:
    with gzip.GzipFile(fileobj=response) as uncompressed:
        file_header = uncompressed.read(64) # a `bytes` object
        # Or do anything shown above using `uncompressed` instead of `response`.