AI और ML · 30 अग॰
AI तर्क को 11 गुना तक कम खर्चीला बनाना, अनुमान दक्षता को बेंचमार्क से आगे रखता है
एक सस्ता तर्क-आधारित तरीका संकेत देता है कि अगली AI प्रतियोगिता लीडरबोर्ड की चमक-दमक नहीं, बल्कि रनटाइम की अर्थव्यवस्था के बारे में हो सकती है।
- अनुमान लागत को सटीकता स्कोर के साथ एक बाद का विचार नहीं, बल्कि एक मुख्य मूल्यांकन मीट्रिक मानें।
- उन तकनीकों पर नज़र रखें जो रीजनिंग टोकन घटाती हैं या कंप्यूट को चयनात्मक रूप से रूट करती हैं, खासकर एजेंट वर्कफ़्लो के लिए।
- यह मानकर न चलें कि प्रति रन सस्ता होना बड़े पैमाने पर भी सस्ता होगा; विलंबता, पुनः प्रयासों और कुल टोकन उपयोग को मापें।