Computer >> कंप्यूटर ट्यूटोरियल >  >> प्रोग्रामिंग >> Python

Python और Boto3 का उपयोग करके S3 ऑब्जेक्ट्स को आसानी से पुनर्प्राप्त करें: चरण-दर-चरण गाइड

इस पोस्ट में हम दिखाते हैं कि Python और Boto 3 लाइब्रेरी का उपयोग करके AWS S3 बकेट से फ़ाइलों और इमेजेस को कैसे डाउनलोड किया जाए।

Boto Python के लिए एक AWS SDK है। यह उपयोग में आसान फ़ंक्शन प्रदान करता है जो EC2 और S3 बकेट जैसी AWS सेवाओं के साथ इंटरैक्ट कर सकते हैं।

Python और Boto 3 के साथ S3 ऑब्जेक्ट्स डाउनलोड करें

निम्न उदाहरण में, हम एक निर्दिष्ट S3 बकेट से एक फ़ाइल डाउनलोड करते हैं।

पहले हमें boto3.client(s3) का उपयोग करके S3 क्लाइंट बनाना होगा।

import boto3
BUCKET_NAME = 'my_s3_bucket'
BUCKET_FILE_NAME = 'my_file.json'
LOCAL_FILE_NAME = 'downloaded.json'

def download_s3_file():
    s3 = boto3.client('s3')
    s3.download_file(BUCKET_NAME, BUCKET_FILE_NAME, LOCAL_FILE_NAME)

download_file मेथड तीन पैरामीटर्स लेता है:

पहला पैरामीटर S3 में बकेट नाम है। दूसरा वह फ़ाइल (नाम और एक्सटेंशन) है जिसे हम डाउनलोड करना चाहते हैं और तीसरा पैरामीटर उस फ़ाइल का नाम है जिसे हम सेव करना चाहते हैं।

निर्दिष्ट बकेट में सभी S3 ऑब्जेक्ट्स डाउनलोड करें

निम्न उदाहरण में, हम एक निर्दिष्ट S3 बकेट में सभी ऑब्जेक्ट्स डाउनलोड करते हैं।

कोड स्निपेट मानता है कि फ़ाइलें बकेट के रूट में सीधे हैं न कि सब-फोल्डर में।

import boto3

def download_all_files():
    # s3 रिसोर्स इनिशियलाइज़ करें
    s3 = boto3.resource('s3')
    # बकेट चुनें
    my_bucket = s3.Bucket('bucket_name')
    # करंट डायरेक्टरी में फ़ाइल डाउनलोड करें
    for s3_object in my_bucket.objects.all():
        filename = s3_object.key
        my_bucket.download_file(s3_object.key, filename)

S3 बकेट में सब-फोल्डर में सभी ऑब्जेक्ट्स डाउनलोड करें

निम्न कोड दिखाता है कि S3 बकेट में सब-फोल्डर में मौजूद फ़ाइलों को कैसे डाउनलोड करें।

मान लीजिए फ़ाइलें निम्न बकेट और स्थान पर हैं:

BUCKET_NAME = 'images'

PATH = pets/cats/

import boto3
import os

def download_all_objects_in_folder():
    s3_resource = boto3.resource('s3')
    my_bucket = s3_resource.Bucket('images')
    objects = my_bucket.objects.filter(Prefix='pets/cats/')
    for obj in objects:
        path, filename = os.path.split(obj.key)
        my_bucket.download_file(obj.key, filename)

संदर्भ

Boto 3 डॉक्यूमेंटेशन

  1. ह्यू कलरमैप और लीजेंड के साथ Python Matplotlib में 3D स्कैटरप्लॉट ह्यू कलरमैप और लीजेंड के साथ Python Matplotlib में 3D स्कैटरप्लॉट

    Python में ह्यू कलरमैप और लीजेंड के साथ 3D स्कैटर प्लॉट बनाने के लिए, हम निम्नलिखित चरण अपना सकते हैं:फिगर का आकार सेट करें और सबप्लॉट के बीच और आसपास पैडिंग समायोजित करें।Numpy का उपयोग करके x, y और z डेटा पॉइंट्स बनाएं।figure() मेथड का उपयोग करके एक नया फिगर बनाएं या मौजूदा फिगर को सक्रिय करें।वर्

  1. Python प्रोग्राम में डेटा विश्लेषण और विज़ुअलाइज़ेशन Python प्रोग्राम में डेटा विश्लेषण और विज़ुअलाइज़ेशन

    इस ट्यूटोरियल में, हम Python में pandas और matplotlib जैसे मॉड्यूल का उपयोग करके डेटा विश्लेषण और विज़ुअलाइज़ेशन के बारे में सीखेंगे। Python डेटा विश्लेषण चीजों के लिए एक उत्कृष्ट फिट है। निम्न कमांड का उपयोग करके pandas और matplotlib मॉड्यूल इंस्टॉल करें।pip install pandaspip install matplotlibइंस्

  1. पायथन में फाइल ऑब्जेक्ट्स: पूरी गाइड पायथन में फाइल ऑब्जेक्ट्स: पूरी गाइड

    पायथन में, जब भी हम फाइल्स पढ़ने या लिखने का प्रयास करते हैं, हमें कोई लाइब्रेरी इम्पोर्ट करने की आवश्यकता नहीं होती क्योंकि यह नेटिवली हैंडल किया जाता है। सबसे पहली चीज जो हम करेंगे वह है बिल्ट-इन open फंक्शन का उपयोग करके एक फाइल ऑब्जेक्ट प्राप्त करना। open फंक्शन एक फाइल खोलता है और एक फाइल ऑब्ज