
इस लेख में (4)
मॉडल रिलीज़ थकान विश्लेषण: स्विच करना सबसे समझदारी भरा
मुख्य बातें
- नए मॉडल लॉन्च को मूल्यांकन घटनाओं के रूप में लें, स्वचालित माइग्रेशन ट्रिगर के रूप में नहीं।
- दबाव में स्विच करने की ज़रूरत पड़ने से पहले रूटिंग, रोलबैक और लागत डैशबोर्ड बना लें।
- प्रोक्योरमेंट को बेंचमार्क की धारणाएँ और चैटबॉट स्क्रीनशॉट नहीं, बल्कि वर्कलोड के प्रमाण दें।
फ्रंटियर मॉडल की प्रतिस्पर्धा अब कच्चे IQ के बारे में कम और मूल्यांकन, रूटिंग, रोलबैक, और खरीद-प्रक्रिया की समझदारी के बारे में अधिक होती जा रही है।
फ्रंटियर मॉडल की प्रतिस्पर्धा अब कच्ची IQ से कम और मूल्यांकन, रूटिंग, रोलबैक, और समझदारी भरी खरीद-प्रक्रिया से अधिक जुड़ी होती जा रही है।
एक और फ्रंटियर मॉडल आता है, और खरीद-प्रक्रिया वाली एक और स्प्रेडशीट 12 conditional formatting रंगों में पसीना बहाने लगती है। पुराना सवाल काफी साफ था: कौन-सा मॉडल सबसे स्मार्ट है? नया सवाल ज्यादा उलझा हुआ, ज्यादा उपयोगी, और लॉन्च पार्टियों में काफी कम मजेदार है: टीमें मॉडल्स का मूल्यांकन, रूटिंग और स्विचिंग कैसे करें, बिना प्रोडक्शन को benchmark-themed escape room बनाए? बेहतर मॉडल अब भी मायने रखते हैं, जाहिर है। कोई भी ऐसा customer support bot नहीं चाहता जो WiFi वाले गीले fortune cookie की तरह reasoning करे। लेकिन ध्यान का केंद्र model IQ से model operations की ओर जा रहा है, क्योंकि release cycle अब इतनी तेज है कि ज्यादातर संगठन उसे जिम्मेदारी से absorb नहीं कर पाते।
ValueAddVC के अनुसार, क्या हुआ
ValueAddVC के Trace Cohen समस्या को सीधे शब्दों में रखते हैं: labs frontier updates को enterprises द्वारा उनका मूल्यांकन करने की क्षमता से तेज़ी से ship कर रहे हैं, और इस mismatch की लागत उन buyers पर आती है जो migrations चला रहे होते हैं। यही frontier race के अंदर छिपा core bug है। Lab के लिए release एक press moment होता है, लेकिन बाकी सभी के लिए यह regression suite, legal review, latency test, budget argument, और stakeholder meeting बन जाता है—सब एक trench coat पहने हुए।
Cohen यह भी तर्क देते हैं कि model fatigue, consumer problem बनने से पहले founder problem होती है, ValueAddVC के अनुसार। अनुवाद: अगर आपकी product strategy हर नए model के पीछे वैसे भागना है जैसे golden retriever हर squirrel के पीछे भागता है, तो आपके users progress के बजाय churn महसूस कर सकते हैं। जीतने वाली चाल latest leaderboard की पूजा करना नहीं है; यह model change को boring, observable, और reversible बनाना है।
Procurato के अनुसार, procurement वह जगह है जहाँ vibes paperwork बन जाती हैं
Procurato के article title में procurement और insurance को सीधे frame में रखा गया है, यह पूछते हुए कि AI adoption बार-बार क्यों fail होती है और इन sectors के leaders इसके बारे में क्या कर सकते हैं। उपलब्ध evidence हर failure mode को विस्तार से नहीं बताता, इसलिए नहीं, मैं breadcrumbs से procurement white paper का cosplay नहीं करूँगा। लेकिन title अकेला ही practical shift को पकड़ लेता है: AI adoption अब सिर्फ demo problem नहीं रही; यह buying, rollout, और repeatability problem है।
यह इसलिए मायने रखता है क्योंकि model switching बदल देती है कि procurement को AI teams से क्या चाहिए। किसी team को charisma और chatbot के suspiciously polished जवाब वाले screenshot के आधार पर approval नहीं माँगना चाहिए। उसे workload-specific evaluations, cost per successful task, latency expectations, fallback behavior, और यह clear policy लानी चाहिए कि model कब replace किया जा सकता है। Procurement को और mysticism नहीं चाहिए; उसे invoice numbers से जुड़ी कम surprises चाहिए।
Mind the Product के अनुसार,
product teams पहले से ही थक चुकी हैं Mind the Product ने 20 जून, 2025 को report किया कि कई product managers workstreams में AI use करने की लगातार mandate से exhausted महसूस करते हैं। लेख बताता है कि teams "everyone wants to use AI for everything" जैसे phrases सुन रही हैं, जो एक product strategy भी है और वह आवाज़ भी जो roadmap सीढ़ियों से गिरने से पहले करता है। यह Slingshot की 2024 Digital Work Trends Report का भी हवाला देता है, जिसके अनुसार 77% workers अपने jobs में AI का उपयोग कैसे करें, इसे लेकर confused महसूस करते हैं।
यह confusion, model release fatigue का human version है। Mind the Product यह भी नोट करता है कि 2022 और 2024 के बीच, US के tech sector में काम कर रहे लगभग 400,000 लोगों ने अपनी jobs खो दीं—एक ऐसा context जिसमें performative AI enthusiasm, experimentation से कम और workplace weather से ज्यादा महसूस होता है। अगर teams anxious, confused, और लगातार redirect हो रही हैं, तो एक और model announcement अपने आप मदद नहीं करता। यह बस एक और shiny object बन सकता है, जिसे ऐसे process पर tape कर दिया गया है जिसमें अब भी steering wheel नहीं है।
Builder response boring है, और इसी से पता चलता है कि यह काम करता है
Migration cost buyers द्वारा absorb किए जाने पर ValueAddVC की बात AI teams को launch chasing के बजाय infrastructure की ओर धकेलनी चाहिए। एक evaluation harness बनाइए जो आपके actual tasks को test करे, abstract trivia को नहीं जो models को calculator में फँसे valedictorians जैसा दिखाती है। Quality, latency, और cost को साथ में track करें, क्योंकि जो model 2% बेहतर है लेकिन operationally 5 गुना ज्यादा messy है, वह पैसे में आग लगाने का बहुत elegant तरीका हो सकता है।
Practical pattern है model optionality with guardrails। Providers को abstraction layer के पीछे रखें, task type के आधार पर route करें, rollback paths ready रखें, और document करें कि switch करने से पहले किन बातों का true होना जरूरी है। कुछ workloads के लिए सही जवाब newest frontier model हो सकता है; दूसरों के लिए वह stable option हो सकता है जिसे आपकी team समझती है। यह कम ambitious नहीं है, यह बस seatbelt पहने ambition है।
आगे क्या देखना है, यह सिर्फ यह नहीं कि कौन-सी lab सबसे flashy benchmark post करती है। देखिए कि कौन-सी teams real workloads के against models compare कर सकती हैं, traffic को safely move कर सकती हैं, costs को clearly explain कर सकती हैं, और हर बार model को नया नाम मिलने पर procurement को वही approval cycle फिर से जीने से बचा सकती हैं। Model race अब भी loud है, लेकिन durable advantage शांत होता जा रहा है: यह जानना कि कब switch करना है, और कब स्थिर रहना है।
AI progress में आपका स्वागत है, जहाँ सबसे smart system शायद वह हो जो humans से reality के लिए support ticket file करवाए बिना models बदल सके।