Zyphra कडून विद्यमान AI मॉडेल्ससाठी कार्यक्षम अटेन्शन पद्धत
Zyphra AI ने Zyphra Hierarchical Attention नावाची नवी पद्धत मांडली आहे. तिचा उद्देश AI मॉडेल्सना लांब मजकूर अधिक कार्यक्षमतेने हाताळण्यात मदत करणे हा आहे. ही पद्धत आधीपासून असलेल्या मॉडेल्समध्ये जोडता येते, आणि तर्क व लांब दस्तऐवज शोधण्याच्या चाचण्यांमध्ये ती नेहमीच्या कामगिरीइतकीच असल्याचे सांगितले जाते.
सोपा शब्दकोशZyphra AI, attention, distillation
- Zyphra AI
- AI कंपनी जी स्वतःची भाषा मॉडेल्स आणि AI संशोधन साधने तयार करते.
- attention
- AI मॉडेलचा तो भाग जो मजकूर वाचताना आधीच्या कोणत्या शब्दांना जास्त महत्त्व आहे हे ठरवतो.
- distillation
- एक प्रशिक्षण शॉर्टकट, ज्यात लहान किंवा जुळवून घेतलेले मॉडेल मोठ्या मॉडेलचे आउटपुट कॉपी करून शिकते.
बर्निंग पोटॅटो स्कोअर: 71%