s3fs是一个方便的 Python 文件系统接口,用于 S3,建立在botocore 之上。要使用 asyncio 访问 S3,aiobotocore是botocore的替代方案。是否可以将 s3fs 与 asyncio/ aiobotocore而不是 vanilla botocore 一起使用?
我的用例是我需要收集三个项目:一个来自磁带存档,一个来自 S3,一个是用 CPU 计算的。它们都需要 10-30 分钟,但这里应该可以并发。
s3fs是一个方便的 Python 文件系统接口,用于 S3,建立在botocore 之上。要使用 asyncio 访问 S3,aiobotocore是botocore的替代方案。是否可以将 s3fs 与 asyncio/ aiobotocore而不是 vanilla botocore 一起使用?
我的用例是我需要收集三个项目:一个来自磁带存档,一个来自 S3,一个是用 CPU 计算的。它们都需要 10-30 分钟,但这里应该可以并发。