अपने ऐप्लिकेशन से Google Cloud API को कॉल करने के लिए, आपको एक बीच का REST API बनाना होगा. यह एपीआई अनुमति देने को मैनेज करता है और एपीआई पासकोड जैसी सीक्रेट वैल्यू को सुरक्षित रखता है. इसके बाद, आपको इस बीच के लेवल पर मिलने वाली सेवा की पुष्टि करने और उससे संपर्क करने के लिए, अपने मोबाइल ऐप्लिकेशन में कोड लिखना होगा.
इस REST API को बनाने का एक तरीका, 'Firebase ऑथेंटिकेशन' और 'फ़ंक्शन' का इस्तेमाल करना है. इससे आपको Google Cloud API के लिए, बिना सर्वर वाला एक मैनेज किया गया गेटवे मिलता है. यह गेटवे, पुष्टि करने का काम करता है. साथ ही, पहले से बने SDK टूल की मदद से, आपके मोबाइल ऐप्लिकेशन से कॉल किया जा सकता है.
इस गाइड में इस तकनीक का इस्तेमाल करके, अपने ऐप्लिकेशन से Cloud Vision API को कॉल करने का तरीका बताया गया है. इस तरीके से, पुष्टि किए गए सभी उपयोगकर्ता आपके Cloud प्रोजेक्ट के ज़रिए Cloud Vision की बिलिंग सेवाओं को ऐक्सेस कर पाएंगे. इसलिए, आगे बढ़ने से पहले यह देख लें कि आपके इस्तेमाल के उदाहरण के लिए, पुष्टि करने का यह तरीका काफ़ी है या नहीं.
शुरू करने से पहले
अपना प्रोजेक्ट कॉन्फ़िगर करना
- अगर आपने पहले से Firebase को नहीं जोड़ा है, तो अपने Android प्रोजेक्ट में Firebase जोड़ें.
-
अगर आपने पहले से अपने प्रोजेक्ट के लिए क्लाउड-आधारित एपीआई चालू नहीं किए हैं, तो अभी करें:
- Firebase कंसोल का Firebase ML एपीआई पेज खोलें.
-
अगर आपने अपने प्रोजेक्ट को पहले से ब्लेज़ प्राइसिंग प्लान में अपग्रेड नहीं किया है, तो ऐसा करने के लिए अपग्रेड करें पर क्लिक करें. (अगर आपका प्रोजेक्ट ब्लेज़ प्लान में नहीं है, तो आपको अपग्रेड करने के लिए कहा जाएगा.)
सिर्फ़ ब्लेज़-लेवल के प्रोजेक्ट ही क्लाउड-आधारित एपीआई का इस्तेमाल कर सकते हैं.
- अगर क्लाउड-आधारित एपीआई पहले से चालू नहीं हैं, तो क्लाउड-आधारित एपीआई चालू करें पर क्लिक करें.
- Cloud Vision API को ऐक्सेस करने की अनुमति न देने के लिए, अपनी मौजूदा Firebase API कुंजियां कॉन्फ़िगर करें:
- Cloud Console का क्रेडेंशियल पेज खोलें.
- सूची में मौजूद हर एपीआई पासकोड के लिए, बदलाव करने वाला व्यू खोलें. इसके बाद, 'कुंजी की पाबंदियां' सेक्शन में, Cloud Vision API को छोड़कर सभी उपलब्ध एपीआई को सूची में जोड़ें.
कॉल करने लायक फ़ंक्शन को डिप्लॉय करें
इसके बाद, उस Cloud फ़ंक्शन को डिप्लॉय करें जिसका इस्तेमाल आपको अपने ऐप्लिकेशन और Cloud
Vision API को जोड़ने के लिए करना है. functions-samples
रिपॉज़िटरी में एक उदाहरण दिया गया है
जिसका इस्तेमाल किया जा सकता है.
डिफ़ॉल्ट रूप से, इस फ़ंक्शन से Cloud Vision API को ऐक्सेस करने पर, आपके ऐप्लिकेशन के सिर्फ़ पुष्टि किए गए उपयोगकर्ता ही Cloud Vision API को ऐक्सेस कर पाएंगे. अलग-अलग ज़रूरी शर्तों के हिसाब से, फ़ंक्शन में बदलाव किया जा सकता है.
फ़ंक्शन को डिप्लॉय करने के लिए:
- फ़ंक्शन-सैंपल रेपो को क्लोन करें या डाउनलोड करें और
Node-1st-gen/vision-annotate-image
डायरेक्ट्री में बदलें:git clone https://github.com/firebase/functions-samples
cd Node-1st-gen/vision-annotate-image
- डिपेंडेंसी इंस्टॉल करें:
cd functions
npm install
cd ..
- अगर आपके पास Firebase सीएलआई नहीं है, तो उसे इंस्टॉल करें.
vision-annotate-image
डायरेक्ट्री में, Firebase प्रोजेक्ट शुरू करें. जब कहा जाए, तब सूची में से अपना प्रोजेक्ट चुनें.firebase init
- यह फ़ंक्शन डिप्लॉय करें:
firebase deploy --only functions:annotateImage
अपने ऐप्लिकेशन में Firebase पुष्टि करने की सुविधा जोड़ें
ऊपर दिए गए कॉल करने लायक फ़ंक्शन, आपके ऐप्लिकेशन के गैर-पुष्टि किए गए उपयोगकर्ताओं के किसी भी अनुरोध को अस्वीकार कर देंगे. अगर आपने पहले से ऐसा नहीं किया है, तो आपको अपने ऐप्लिकेशन में Firebase पुष्टि जोड़नी होगी.
अपने ऐप्लिकेशन में ज़रूरी डिपेंडेंसी जोड़ें
<project>/<app-module>/build.gradle.kts
या <project>/<app-module>/build.gradle
) में 'Firebase के लिए Cloud Functions' और gson Android लाइब्रेरी
के लिए डिपेंडेंसी जोड़ें:
implementation("com.google.firebase:firebase-functions:21.0.0") implementation("com.google.code.gson:gson:2.8.6")
अब आप इमेज को लेबल करने के लिए तैयार हैं.
1. इनपुट इमेज तैयार करें
Cloud Vision को कॉल करने के लिए, इमेज को base64 कोड में बदली गई स्ट्रिंग के तौर पर फ़ॉर्मैट किया जाना चाहिए. सेव की गई फ़ाइल के यूआरआई से इमेज प्रोसेस करने के लिए:- इमेज को
Bitmap
ऑब्जेक्ट के तौर पर पाएं:Kotlin+KTX
var bitmap: Bitmap = MediaStore.Images.Media.getBitmap(contentResolver, uri)
Java
Bitmap bitmap = MediaStore.Images.Media.getBitmap(getContentResolver(), uri);
- वैकल्पिक रूप से, बैंडविड्थ पर बचत करने के लिए इमेज को छोटा करें.
Cloud Vision के लिए सुझाए गए इमेज साइज़ देखें.
Kotlin+KTX
private fun scaleBitmapDown(bitmap: Bitmap, maxDimension: Int): Bitmap { val originalWidth = bitmap.width val originalHeight = bitmap.height var resizedWidth = maxDimension var resizedHeight = maxDimension if (originalHeight > originalWidth) { resizedHeight = maxDimension resizedWidth = (resizedHeight * originalWidth.toFloat() / originalHeight.toFloat()).toInt() } else if (originalWidth > originalHeight) { resizedWidth = maxDimension resizedHeight = (resizedWidth * originalHeight.toFloat() / originalWidth.toFloat()).toInt() } else if (originalHeight == originalWidth) { resizedHeight = maxDimension resizedWidth = maxDimension } return Bitmap.createScaledBitmap(bitmap, resizedWidth, resizedHeight, false) }
Java
private Bitmap scaleBitmapDown(Bitmap bitmap, int maxDimension) { int originalWidth = bitmap.getWidth(); int originalHeight = bitmap.getHeight(); int resizedWidth = maxDimension; int resizedHeight = maxDimension; if (originalHeight > originalWidth) { resizedHeight = maxDimension; resizedWidth = (int) (resizedHeight * (float) originalWidth / (float) originalHeight); } else if (originalWidth > originalHeight) { resizedWidth = maxDimension; resizedHeight = (int) (resizedWidth * (float) originalHeight / (float) originalWidth); } else if (originalHeight == originalWidth) { resizedHeight = maxDimension; resizedWidth = maxDimension; } return Bitmap.createScaledBitmap(bitmap, resizedWidth, resizedHeight, false); }
Kotlin+KTX
// Scale down bitmap size bitmap = scaleBitmapDown(bitmap, 640)
Java
// Scale down bitmap size bitmap = scaleBitmapDown(bitmap, 640);
- बिटमैप ऑब्जेक्ट को base64 कोड में बदली गई स्ट्रिंग में बदलें:
Kotlin+KTX
// Convert bitmap to base64 encoded string val byteArrayOutputStream = ByteArrayOutputStream() bitmap.compress(Bitmap.CompressFormat.JPEG, 100, byteArrayOutputStream) val imageBytes: ByteArray = byteArrayOutputStream.toByteArray() val base64encoded = Base64.encodeToString(imageBytes, Base64.NO_WRAP)
Java
// Convert bitmap to base64 encoded string ByteArrayOutputStream byteArrayOutputStream = new ByteArrayOutputStream(); bitmap.compress(Bitmap.CompressFormat.JPEG, 100, byteArrayOutputStream); byte[] imageBytes = byteArrayOutputStream.toByteArray(); String base64encoded = Base64.encodeToString(imageBytes, Base64.NO_WRAP);
Bitmap
ऑब्जेक्ट के ज़रिए दिखाई गई इमेज, सीधी
होनी चाहिए. इसमें अलग से घुमाने की ज़रूरत नहीं है.
2. इमेज को लेबल करने के लिए, कॉल करने लायक फ़ंक्शन को शुरू करें
किसी इमेज में ऑब्जेक्ट को लेबल करने के लिए, JSON Cloud विज़न अनुरोध पास करने वाला कॉल करने वाला फ़ंक्शन शुरू करें.सबसे पहले, Cloud Functions के इंस्टेंस को शुरू करें:
Kotlin+KTX
private lateinit var functions: FirebaseFunctions // ... functions = Firebase.functions
Java
private FirebaseFunctions mFunctions; // ... mFunctions = FirebaseFunctions.getInstance();
फ़ंक्शन शुरू करने का तरीका तय करें:
Kotlin+KTX
private fun annotateImage(requestJson: String): Task<JsonElement> { return functions .getHttpsCallable("annotateImage") .call(requestJson) .continueWith { task -> // This continuation runs on either success or failure, but if the task // has failed then result will throw an Exception which will be // propagated down. val result = task.result?.data JsonParser.parseString(Gson().toJson(result)) } }
Java
private Task<JsonElement> annotateImage(String requestJson) { return mFunctions .getHttpsCallable("annotateImage") .call(requestJson) .continueWith(new Continuation<HttpsCallableResult, JsonElement>() { @Override public JsonElement then(@NonNull Task<HttpsCallableResult> task) { // This continuation runs on either success or failure, but if the task // has failed then getResult() will throw an Exception which will be // propagated down. return JsonParser.parseString(new Gson().toJson(task.getResult().getData())); } }); }
टाइप को
LABEL_DETECTION
पर सेट करके JSON अनुरोध बनाएं:Kotlin+KTX
// Create json request to cloud vision val request = JsonObject() // Add image to request val image = JsonObject() image.add("content", JsonPrimitive(base64encoded)) request.add("image", image) // Add features to the request val feature = JsonObject() feature.add("maxResults", JsonPrimitive(5)) feature.add("type", JsonPrimitive("LABEL_DETECTION")) val features = JsonArray() features.add(feature) request.add("features", features)
Java
// Create json request to cloud vision JsonObject request = new JsonObject(); // Add image to request JsonObject image = new JsonObject(); image.add("content", new JsonPrimitive(base64encoded)); request.add("image", image); //Add features to the request JsonObject feature = new JsonObject(); feature.add("maxResults", new JsonPrimitive(5)); feature.add("type", new JsonPrimitive("LABEL_DETECTION")); JsonArray features = new JsonArray(); features.add(feature); request.add("features", features);
आखिर में, फ़ंक्शन शुरू करें:
Kotlin+KTX
annotateImage(request.toString()) .addOnCompleteListener { task -> if (!task.isSuccessful) { // Task failed with an exception // ... } else { // Task completed successfully // ... } }
Java
annotateImage(request.toString()) .addOnCompleteListener(new OnCompleteListener<JsonElement>() { @Override public void onComplete(@NonNull Task<JsonElement> task) { if (!task.isSuccessful()) { // Task failed with an exception // ... } else { // Task completed successfully // ... } } });
3. लेबल किए गए ऑब्जेक्ट के बारे में जानकारी पाना
इमेज को लेबल करने की कार्रवाई पूरी होने पर, टास्क के नतीजे में BatchAnnotateImageResponse का JSON जवाब मिलेगा.labelAnnotations
कलेक्शन में मौजूद हर ऑब्जेक्ट, इमेज में लेबल की गई किसी चीज़ के बारे में बताता है. हर लेबल के लिए, आपको लेबल के टेक्स्ट की जानकारी, उसका नॉलेज ग्राफ़ का इकाई आईडी (अगर उपलब्ध हो), और मैच का कॉन्फ़िडेंस स्कोर दिख सकता है. उदाहरण के लिए:
Kotlin+KTX
for (label in task.result!!.asJsonArray[0].asJsonObject["labelAnnotations"].asJsonArray) {
val labelObj = label.asJsonObject
val text = labelObj["description"]
val entityId = labelObj["mid"]
val confidence = labelObj["score"]
}
Java
for (JsonElement label : task.getResult().getAsJsonArray().get(0).getAsJsonObject().get("labelAnnotations").getAsJsonArray()) {
JsonObject labelObj = label.getAsJsonObject();
String text = labelObj.get("description").getAsString();
String entityId = labelObj.get("mid").getAsString();
float score = labelObj.get("score").getAsFloat();
}