इस पोस्ट में हम दिखाते हैं कि Python और Boto 3 लाइब्रेरी का उपयोग करके AWS S3 बकेट से फ़ाइलों और इमेजेस को कैसे डाउनलोड किया जाए।
Boto Python के लिए एक AWS SDK है। यह उपयोग में आसान फ़ंक्शन प्रदान करता है जो EC2 और S3 बकेट जैसी AWS सेवाओं के साथ इंटरैक्ट कर सकते हैं।
Python और Boto 3 के साथ S3 ऑब्जेक्ट्स डाउनलोड करें
निम्न उदाहरण में, हम एक निर्दिष्ट S3 बकेट से एक फ़ाइल डाउनलोड करते हैं।
पहले हमें boto3.client(s3) का उपयोग करके S3 क्लाइंट बनाना होगा।
import boto3
BUCKET_NAME = 'my_s3_bucket'
BUCKET_FILE_NAME = 'my_file.json'
LOCAL_FILE_NAME = 'downloaded.json'
def download_s3_file():
s3 = boto3.client('s3')
s3.download_file(BUCKET_NAME, BUCKET_FILE_NAME, LOCAL_FILE_NAME)
download_file मेथड तीन पैरामीटर्स लेता है:
पहला पैरामीटर S3 में बकेट नाम है। दूसरा वह फ़ाइल (नाम और एक्सटेंशन) है जिसे हम डाउनलोड करना चाहते हैं और तीसरा पैरामीटर उस फ़ाइल का नाम है जिसे हम सेव करना चाहते हैं।
निर्दिष्ट बकेट में सभी S3 ऑब्जेक्ट्स डाउनलोड करें
निम्न उदाहरण में, हम एक निर्दिष्ट S3 बकेट में सभी ऑब्जेक्ट्स डाउनलोड करते हैं।
कोड स्निपेट मानता है कि फ़ाइलें बकेट के रूट में सीधे हैं न कि सब-फोल्डर में।
import boto3
def download_all_files():
# s3 रिसोर्स इनिशियलाइज़ करें
s3 = boto3.resource('s3')
# बकेट चुनें
my_bucket = s3.Bucket('bucket_name')
# करंट डायरेक्टरी में फ़ाइल डाउनलोड करें
for s3_object in my_bucket.objects.all():
filename = s3_object.key
my_bucket.download_file(s3_object.key, filename)
S3 बकेट में सब-फोल्डर में सभी ऑब्जेक्ट्स डाउनलोड करें
निम्न कोड दिखाता है कि S3 बकेट में सब-फोल्डर में मौजूद फ़ाइलों को कैसे डाउनलोड करें।
मान लीजिए फ़ाइलें निम्न बकेट और स्थान पर हैं:
BUCKET_NAME = 'images'
PATH = pets/cats/
import boto3
import os
def download_all_objects_in_folder():
s3_resource = boto3.resource('s3')
my_bucket = s3_resource.Bucket('images')
objects = my_bucket.objects.filter(Prefix='pets/cats/')
for obj in objects:
path, filename = os.path.split(obj.key)
my_bucket.download_file(obj.key, filename)
संदर्भ
Boto 3 डॉक्यूमेंटेशन