¿Descargar archivos grandes y transmitirlos en streaming a S3?

Necesito descargar archivos grandes y escribirlos en S3. En lugar de descargar los archivos al disco duro local y copiarlos a S3, ¿es posible transmitir los archivos directamente a S3?

Encontré el siguiente código en https://www.python-httpx.org/advanced/. ¿Cómo escribir el fragmento en S3?

import tempfile

import httpx
from tqdm import tqdm

with tempfile.NamedTemporaryFile() as download_file:
url = “https://speed.hetzner.de/100MB.bin”
with httpx.stream(“GET”, url) as response:
total = int(response.headers[“Content-Length”])

    with tqdm(total=total, unit_scale=True, unit_divisor=1024, unit="B") as progress:
        num_bytes_downloaded = response.num_bytes_downloaded
        for chunk in response.iter_bytes():
            download_file.write(chunk)
            progress.update(response.num_bytes_downloaded - num_bytes_downloaded)
            num_bytes_downloaded = response.num_bytes_downloaded