इस पेज पर, हाइब्रिड और उपयोगकर्ता के डिवाइस पर मौजूद अनुभवों के लिए, कॉन्फ़िगरेशन के इन विकल्पों के बारे में बताया गया है:
देखें कि उपयोगकर्ता के डिवाइस पर काम करने वाला मॉडल उपलब्ध है या नहीं.
यह तय करना कि डिवाइस पर या क्लाउड में इन्फ़रेंस का इस्तेमाल किया गया था या नहीं.
जवाबों को कंट्रोल करने के लिए, मॉडल कॉन्फ़िगरेशन का इस्तेमाल करें. जैसे, तापमान.
पक्का करें कि आपने हाइब्रिड अनुभव बनाने के शुरुआती निर्देश पढ़ लिए हों.
"अनुमान लगाने का मोड" सेट करना
शुरू करने से जुड़ी गाइड में दिए गए उदाहरणों में, यह दिखाया गया है कि सबसे पहले उपयोगकर्ता के डिवाइस पर अनुमान लगाने की कोशिश कैसे की जाती है. इसके बाद, क्लाउड पर होस्ट किए गए मॉडल का इस्तेमाल कैसे किया जाता है. यह उपलब्ध "अनुमान लगाने के मोड" में से सिर्फ़ एक है, जिसे लागू किया जा सकता है.
हाइब्रिड इन्फ़रेंस
डिवाइस पर मौजूद मॉडल को प्राथमिकता दें:
primaryको "सिस्टम" मॉडल पर औरsecondaryको क्लाउड मॉडल पर सेट करें.अगर डिवाइस पर मौजूद मॉडल उपलब्ध है और अनुरोध के टाइप के साथ काम करता है, तो उसका इस्तेमाल करने की कोशिश करें. ऐसा न होने पर, डिवाइस पर गड़बड़ी लॉग करें. इसके बाद, क्लाउड पर होस्ट किए गए मॉडल पर अपने-आप वापस आ जाएं.
// Imports + initialization of Gemini API backend service // ... // Initialize a cloud model that supports your use case let cloudModel = ai.geminiModel(name: "GEMINI_MODEL_NAME") // Initialize an on-device model that supports your use case let systemModel = FirebaseAI.SystemLanguageModel.default // Create a GenerativeModelSession with a hybrid model. // Provide your preferred model as `primary` and your fallback model as `secondary` // Attempt to use the on-device model; otherwise, fall back to the cloud-hosted model. let session = ai.generativeModelSession( model: .hybridModel(primary: systemModel, secondary: cloudModel) )क्लाउड में अनुमान को प्राथमिकता दें:
primaryको क्लाउड मॉडल पर औरsecondaryको "सिस्टम" मॉडल पर सेट करें.अगर डिवाइस ऑनलाइन है और मॉडल उपलब्ध है, तो क्लाउड पर होस्ट किए गए मॉडल का इस्तेमाल करें. अगर डिवाइस ऑफ़लाइन है, तो उपयोगकर्ता के डिवाइस पर मौजूद मॉडल का इस्तेमाल करें. अगर कोई और समस्या आती है, तो अपवाद दिखाएं.
// Imports + initialization of Gemini API backend service // ... // Initialize a cloud model that supports your use case let cloudModel = ai.geminiModel(name: "GEMINI_MODEL_NAME") // Initialize an on-device model that supports your use case let systemModel = FirebaseAI.SystemLanguageModel.default // Create a GenerativeModelSession with a hybrid model. // Provide your preferred model as `primary` and your fallback model as `secondary` // Attempt to use the cloud-hosted model; otherwise, fall back to the on-device model. let session = ai.generativeModelSession( model: .hybridModel(primary: cloudModel, secondary: systemModel) )
सिर्फ़ उपयोगकर्ता के डिवाइस पर या सिर्फ़ क्लाउड में अनुमान लगाने की सुविधा
एसडीके, सिर्फ़ एक model सेट करने की सुविधा देता है. इसका मतलब है कि एसडीके, सिर्फ़ उपयोगकर्ता के डिवाइस पर या क्लाउड में अनुमान लगाने की कोशिश करेगा. साथ ही, इस इस्तेमाल के उदाहरण के लिए HybridModel नहीं बनाया जाता. हालांकि, हाइब्रिड अनुभव के लिए, आपको HybridModel बनाना होगा. साथ ही, ऊपर बताए गए तरीके से primary और secondary, दोनों मॉडल सेट करने होंगे.
सिर्फ़ डिवाइस पर अनुमान लगाने की सुविधा:
modelको "सिस्टम" मॉडल पर सेट करें. इस्तेमाल के इस उदाहरण के लिए,HybridModelनहीं बनाया जाता.अगर डिवाइस पर मौजूद मॉडल उपलब्ध है और अनुरोध के टाइप के साथ काम करता है, तो उसका इस्तेमाल करने की कोशिश करें. अगर ऐसा नहीं है, तो अपवाद दिखाएं.
// Imports + initialization of Gemini API backend service // ... // Initialize an on-device model that supports your use case let systemModel = FirebaseAI.SystemLanguageModel.default // Create a GenerativeModelSession with the on-device model. let session = ai.generativeModelSession( model: systemModel )सिर्फ़ क्लाउड में मौजूद मॉडल से अनुमान लगाना:
modelको क्लाउड मॉडल पर सेट करें. इस इस्तेमाल के उदाहरण के लिए,HybridModelनहीं बनाया जाता.अगर डिवाइस ऑनलाइन है और मॉडल उपलब्ध है, तो क्लाउड पर होस्ट किए गए मॉडल का इस्तेमाल करें. ऐसा न होने पर, अपवाद दिखाएं.
// Imports + initialization of Gemini API backend service // ... // Initialize a cloud model that supports your use case let cloudModel = ai.geminiModel(name: "GEMINI_MODEL_NAME") // Create a GenerativeModelSession with a cloud model. let session = ai.generativeModelSession( model: cloudModel )
देखें कि उपयोगकर्ता के डिवाइस पर मौजूद मॉडल उपलब्ध है या नहीं
डिवाइस पर मॉडल की उपलब्धता की मैन्युअल तरीके से जांच करना सिर्फ़ तब ज़रूरी होता है, जब आपको उपयोगकर्ता को वह जानकारी दिखानी हो या आपको यह अनुरोध करना हो कि उपयोगकर्ता, डिवाइस पर मॉडल डाउनलोड करने के लिए कार्रवाई करें. अगर उपयोगकर्ता के डिवाइस पर मौजूद मॉडल उपलब्ध नहीं है और आपने primary को उपयोगकर्ता के डिवाइस पर मौजूद मॉडल और secondary को क्लाउड मॉडल पर सेट किया है, तो एसडीके अपने-आप क्लाउड पर होस्ट किए गए मॉडल का इस्तेमाल करेगा.
मैन्युअल तरीके से यह देखने के लिए कि डिवाइस पर मौजूद मॉडल का इस्तेमाल किया जा सकता है या नहीं, isAvailable प्रॉपर्टी की जांच करें:
if FirebaseAI.SystemLanguageModel.default.isAvailable {
// The on-device model is ready to use.
} else {
// The on-device model is unavailable.
}
डिवाइस पर मौजूद मॉडल की उपलब्धता की खास वजहें देखने के लिए, availability प्रॉपर्टी की जांच करें:
switch FirebaseAI.SystemLanguageModel.default.availability {
case .available:
// The on-device model is ready to use.
break
case .unavailable(.deviceNotEligible):
// This device does not support Apple Intelligence.
break
case .unavailable(.appleIntelligenceNotEnabled):
// The user has not enabled Apple Intelligence in Settings.
break
case .unavailable(.modelNotReady):
// The model is still being downloaded.
break
case let .unavailable(reason):
// The model is unavailable due to the specified `reason`.
break
}
यह तय करना कि उपयोगकर्ता के डिवाइस पर या क्लाउड में अनुमान का इस्तेमाल किया गया है
अगर आपने HybridModel का इस्तेमाल किया है और primary और secondary, दोनों मॉडल सेट किए हैं, तो यह जानना मददगार हो सकता है कि किसी अनुरोध के लिए कौनसे मॉडल का इस्तेमाल किया गया था.
यह जानकारी, हर जवाब में rawResponse की modelVersion प्रॉपर्टी से मिलती है.
इस प्रॉपर्टी को ऐक्सेस करने पर, आपको इनमें से कोई एक वैल्यू मिलेगी:
- क्लाउड पर होस्ट किए गए मॉडल का इस्तेमाल किया गया: मॉडल का नाम, उदाहरण के लिए
gemini-3.1-flash-lite - इस्तेमाल किया गया उपयोगकर्ता के डिवाइस पर मॉडल:
apple-foundation-models-system-language-model
// let response = try await session.respond(to: ...
print("You used: \(response.rawResponse.modelVersion)")
print(response.content)
जवाबों को कंट्रोल करने के लिए, मॉडल कॉन्फ़िगरेशन का इस्तेमाल करना
मॉडल को किए गए हर अनुरोध में, मॉडल कॉन्फ़िगरेशन भेजा जा सकता है. इससे यह कंट्रोल किया जा सकता है कि मॉडल जवाब कैसे जनरेट करे. क्लाउड पर होस्ट किए गए मॉडल और उपयोगकर्ता के डिवाइस पर मौजूद मॉडल, कॉन्फ़िगरेशन के अलग-अलग विकल्प देते हैं (क्लाउड बनाम उपयोगकर्ता के डिवाइस पर पैरामीटर).
- क्लाउड पर होस्ट किए गए मॉडल: इनके कॉन्फ़िगरेशन को
GenerationConfigमें सेट करें. - डिवाइस पर मौजूद मॉडल:
FirebaseAI.GenerationOptionsमें जाकर, इनके कॉन्फ़िगरेशन सेट करें.
इन विकल्पों को मॉडल से किए गए हर अनुरोध के लिए कॉन्फ़िगर किया जाता है.
यहां एक उदाहरण दिया गया है, जिसमें हाइब्रिड इन्फ़्रेंस के लिए, क्लाउड पर होस्ट किए गए और डिवाइस पर मौजूद मॉडल के कॉन्फ़िगरेशन सेट किए गए हैं:
// ...
let response = try await session.respond(
to: "Why is the sky blue?",
options: .hybrid(
// Config for cloud-hosted model
gemini: GenerationConfig(
temperature: 0.8,
topP: 0.9,
thinkingConfig: ThinkingConfig(thinkingLevel: .high)
),
// Config for on-device model
foundationModels: FirebaseAI.GenerationOptions(
sampling: .random(probabilityThreshold: 0.9),
temperature: 0.8
)
)
)
// ...
Firebase AI Logic के साथ अपने अनुभव के बारे में सुझाव/राय दें या शिकायत करें