Google Cloud Storage
Google Cloud Storage से Roboflow में इमेजें अपलोड करें
Google Cloud Storage में इमेज डेटा स्टोरेज और Roboflow पर अपलोड करने के मामले में, आपके पास आम तौर पर दो विकल्प होते हैं: साइन किए गए URL का उपयोग करना या इमेजों को स्थानीय रूप से मैन्युअल रूप से डाउनलोड करना (gsutil CLI के माध्यम से) ताकि उन्हें स्थानीय रूप से अपलोड किया जा सके। इन तरीकों में से चुनाव आपकी डेटा प्रोसेसिंग और प्रबंधन की विशिष्ट आवश्यकताओं पर निर्भर करता है।
साइन किए गए URL: यह तरीका विशेष रूप से लाभदायक है यदि आप अपनी स्थानीय मशीन पर इमेज डाउनलोड करने से जुड़े अतिरिक्त चरण और समय-खपत से बचना चाहते हैं। साइन किए गए URL के साथ, आप इमेज डेटा को Google Cloud Storage से सीधे Roboflow API पर अपलोड कर सकते हैं, बिना उसे कभी स्थानीय रूप से स्टोर किए। इससे प्रोसेसिंग तेज होती है और आपके स्थानीय सिस्टम पर कम लोड पड़ता है।
स्थानीय रूप से CLI: ऐसे परिदृश्य हो सकते हैं जहाँ आप पहले इमेजों को अपने स्थानीय वातावरण में डाउनलोड करना पसंद करें। उदाहरण के लिए, यदि आपको Roboflow पर अपलोड करने से पहले इमेजों को प्रीप्रोसेस करना है या उन्हें मैन्युअल रूप से जांचना है, तो स्थानीय प्रतियाँ होना लाभदायक होगा।
सही तरीका चुनना आपकी विशिष्ट उपयोग-मामला आवश्यकताओं पर निर्भर करेगा, जैसे डेटा ट्रांसफर की गति, प्रीप्रोसेसिंग की आवश्यकता, या इमेजों का मैन्युअल निरीक्षण।
Google Cloud JSON कुंजी
बकेट के लिए उपयुक्त अनुमतियों वाला एक सर्विस अकाउंट बनाएं और JSON कुंजी फ़ाइल डाउनलोड करें। इस फ़ाइल में आपकी एप्लिकेशन को प्रमाणित करने के लिए उपयोग किए जाने वाले क्रेडेंशियल्स होंगे।
विकल्प 1: साइन किए गए URL के माध्यम से अपलोड करें
आप Python में Google Cloud SDK का उपयोग करके अपने Google Cloud Storage बकेट में अपनी इमेजों के लिए साइन किए गए URL जनरेट कर सकते हैं।
def get_gcs_signed_url(bucket_name: str, blob_name: str) -> str:
"""GCS ऑब्जेक्ट के लिए एक साइन किया गया URL जनरेट करें।"""
storage_client = storage.Client.from_service_account_json(GOOGLE_APPLICATION_CREDENTIALS)
bucket = storage_client.get_bucket(bucket_name)
blob = bucket.get_blob(blob_name)
url = blob.generate_signed_url(
version="v4",
expiration=3600, # 1 घंटे के लिए सेकंड
method="GET"
)
return urlऊपर दिए गए कोड स्निपेट में, आपको अपने Google Cloud Storage बकेट का नाम और blob का नाम चाहिए। इमेज का साइन किया गया URL जनरेट किया जाता है और लौटाया जाता है।
इसके आधार पर, हम एक संपूर्ण समाधान बना सकते हैं जो बकेट में उपलब्ध सभी ऑब्जेक्ट्स को खींचता है, और फिर उन्हें API के माध्यम से Roboflow पर अपलोड करता है। इस समाधान की रूपरेखा नीचे देखी जा सकती है:
विकल्प 2: GCP से डेटा को स्थानीय रूप से डाउनलोड करें
GCP से डेटा डाउनलोड करने के लिए, पहले GCP CLI इंस्टॉल करें। फिर, अपने GCP उपयोगकर्ता खाते से प्रमाणित करें।
इमेज या इमेजों के फ़ोल्डर को डाउनलोड करने के लिए, निम्न कमांड का उपयोग करें:
बदलें mybucket अपने GCP स्टोरेज बकेट के नाम के साथ और folder उस फ़ाइल या फ़ोल्डर के गंतव्य के साथ जिसे आप कॉपी करना चाहते हैं। यह कमांड लक्षित फ़ाइल या फ़ोल्डर को आपकी वर्तमान कार्यशील निर्देशिका में सहेज देगा (.).
Roboflow में डेटा अपलोड करें
अब जब हमने डेटा डाउनलोड कर लिया है, तो हम इसे Roboflow पर या तो निम्न का उपयोग करके अपलोड कर सकते हैं अपलोड वेब इंटरफ़ेस या Roboflow CLI.
यह भी देखें
डेटासोर्सेज़ (Bucket Mirror) - बिना स्क्रिप्टिंग के GCS से निरंतर, स्वचालित सिंक
अंतिम अपडेट
क्या यह उपयोगी था?