Google, OpenAI आणि इतरांचा नवीन AI स्क्रॅपिंग नियंत्रणांना पाठिंबा
Google, OpenAI, Anthropic आणि Microsoft यांनी robots.txt साठी नव्या समान सिग्नलला पाठिंबा देण्याचे वचन दिले आहे. हा सिग्नल AI प्रशिक्षणासाठी वेबसाइटवरील मजकूर स्क्रॅप करण्यास अडथळा आणतो. वेबसाइट मालकांना त्यांची पाने AI प्रणाली प्रशिक्षित करण्यासाठी वापरली जाऊ नयेत, यासाठी एक सामायिक मार्ग मिळतो.
सोपा शब्दकोशGoogle, robots.txt, scraping
- शोध, YouTube आणि Android फोन प्रणाली चालवणारी अमेरिकन टेक कंपनी.
- robots.txt
- वेबसाइटवरील एक छोटी मजकूर फाइल, जी स्वयंचलित बॉट्सना कोणती पाने पाहता येतील ते सांगते.
- scraping
- सहसा हाताने नव्हे तर सॉफ्टवेअरच्या साहाय्याने वेबसाइटवरील मोठ्या प्रमाणात मजकूर आपोआप कॉपी करणे.
बर्निंग पोटॅटो स्कोअर: 72%