ओपन सोर्स डेवलपर्स एआई क्रॉलर को सरलता और प्रतिशोध के साथ मुकाबला करते हैं
कई सॉफ्टवेयर डेवलपर्स के अनुसार, एआई वेब-क्रॉलिंग बॉट इंटरनेट का प्रतिबंध बन गए हैं। जवाब में, कुछ देवों ने रचनात्मक और अक्सर मनोरंजक रणनीतियों के साथ वापस लड़ने के लिए लिया है।
ओपन सोर्स डेवलपर्स को इन दुष्ट बॉट्स द्वारा विशेष रूप से कड़ी टक्कर दी जाती है, जैसा कि लिनक्स डेस्कटॉप प्लाज्मा और ब्लॉग लाइब्रेन्यूज के पीछे डेवलपर निकोलो वेनरंडी द्वारा नोट किया गया है। FOSS साइटें, जो मुफ्त और खुले स्रोत परियोजनाओं की मेजबानी करती हैं, उनके बुनियादी ढांचे को उजागर करती हैं और आम तौर पर वाणिज्यिक साइटों की तुलना में कम संसाधन होते हैं।
समस्या को बढ़ा दिया गया है क्योंकि कई एआई बॉट्स रोबोट एक्सक्लूसिव प्रोटोकॉल के रोबोट.टैक्स फ़ाइल को अनदेखा करते हैं, जिसका अर्थ है कि क्रॉल नहीं करने के लिए बॉट्स को निर्देश देना।
जनवरी में एक मार्मिक ब्लॉग पोस्ट में, फॉस डेवलपर Xe Iaso ने AmazonBot के साथ एक परेशान करने वाला अनुभव साझा किया, जिसने एक Git सर्वर वेबसाइट पर बमबारी की, जिससे DDOS आउटेज हो गया। Git सर्वर FOSS परियोजनाओं की मेजबानी के लिए महत्वपूर्ण हैं, जिससे किसी को भी कोड में डाउनलोड और योगदान करने की अनुमति मिलती है।
IASO ने बताया कि BOT ने Robot.txt फ़ाइल की अवहेलना की, अलग -अलग IP पते का उपयोग किया, और यहां तक कि अन्य उपयोगकर्ताओं के रूप में भी मस्करी किया। "यह एआई क्रॉलर बॉट्स को ब्लॉक करने के लिए निरर्थक है क्योंकि वे झूठ बोलते हैं, अपने उपयोगकर्ता एजेंट को बदलते हैं, आवासीय आईपी पते का उपयोग प्रॉक्सिज़ के रूप में करते हैं, और अधिक," Iaso ने कहा।
डेवलपर ने लिखा, "वे आपकी साइट को तब तक स्क्रैप करेंगे जब तक कि यह खत्म नहीं हो जाता है, और फिर वे इसे कुछ और परिमार्जन करेंगे। वे हर लिंक पर हर लिंक पर हर लिंक पर क्लिक करेंगे, एक ही पेज को बार -बार देखेंगे। उनमें से कुछ एक ही लिंक पर एक ही सेकंड में कई बार क्लिक करेंगे।"
कब्रों के देवता दर्ज करें
इसका मुकाबला करने के लिए, IASO ने ANUBIS नामक एक चतुर उपकरण विकसित किया। यह एक रिवर्स प्रॉक्सी के रूप में कार्य करता है जिसे GIT सर्वर तक पहुंचने के लिए अनुरोधों की अनुमति देने से पहले एक प्रूफ-ऑफ-वर्क चेक की आवश्यकता होती है। यह प्रभावी रूप से बॉट को अवरुद्ध करता है, जबकि मानव-संचालित ब्राउज़रों को गुजरने की अनुमति देता है।
उपकरण का नाम, एबिस, मिस्र की पौराणिक कथाओं से आकर्षित करता है, जहां अनुबिस वह ईश्वर है जो मृतकों को निर्णय की ओर ले जाता है। Iaso ने TechCrunch को समझाया, "Anubis ने आपकी आत्मा (दिल) का वजन किया और अगर यह एक पंख से भारी था, तो आपका दिल खाया गया और आप, जैसे, मेगा की मृत्यु हो गई," Iaso ने TechCrunch को समझाया। चुनौती को सफलतापूर्वक पास करने से एनाबिस की एक प्यारी एनीमे तस्वीर के साथ मनाया जाता है, जबकि बॉट अनुरोधों को अस्वीकार कर दिया जाता है।
19 मार्च को GitHub पर साझा की गई परियोजना ने कुछ ही दिनों में 2,000 सितारों, 20 योगदानकर्ताओं और 39 फोर्क्स के साथ, जल्दी से कर्षण प्राप्त किया।
रक्षा के रूप में प्रतिशोध
Anubis के व्यापक रूप से अपनाने से संकेत मिलता है कि Iaso के संघर्ष अलग -थलग से दूर हैं। वेनरांडी ने कई समान अनुभवों को याद किया:
- सोर्सहट के संस्थापक और सीईओ ड्रू डेवॉल्ट, अपने समय का एक महत्वपूर्ण हिस्सा आक्रामक एलएलएम क्रॉलर से निपटने के लिए खर्च करते हैं और लगातार आउटेज से पीड़ित होते हैं।
- जोनाथन कॉर्बेट, एक प्रमुख एफओएसएस डेवलपर और एलडब्ल्यूएन के ऑपरेटर, ने अपनी साइट को एआई स्क्रैपर बॉट्स द्वारा धीमा कर दिया है।
- केविन फेन्ज़ी, लिनक्स फेडोरा प्रोजेक्ट के लिए Sysadmin, को आक्रामक AI बॉट गतिविधि के कारण ब्राजील से सभी ट्रैफ़िक को ब्लॉक करना पड़ा।
वेनेरंडी ने टेकक्रंच का उल्लेख किया कि वह अन्य परियोजनाओं के बारे में जानता है, जिन्हें चरम उपायों का सहारा लेना पड़ा है, जैसे कि सभी चीनी आईपी पते पर प्रतिबंध लगाना।
कुछ डेवलपर्स का मानना है कि प्रतिशोध के साथ वापस लड़ना सबसे अच्छा बचाव है। हैकर न्यूज पर Xyzal नाम के एक उपयोगकर्ता ने रोबोट को भरने का सुझाव दिया। पीने के ब्लीच के लाभों या बेडरूम के प्रदर्शन पर खसरा के सकारात्मक प्रभावों के बारे में भ्रामक सामग्री के साथ निषिद्ध पृष्ठों को भरने का सुझाव दिया।
Xyzal ने समझाया, "लगता है कि हमें बॉट्स के लिए लक्ष्य करने की आवश्यकता है _negative_ उपयोगिता मूल्य हमारे जाल में जाने से, न कि केवल शून्य मान," Xyzal ने समझाया।
जनवरी में, "हारून" नामक एक अनाम डेवलपर नेपेंटीस ने जारी किया, जो नकली सामग्री के एक भूलभुलैया में क्रॉलर को फंसाने के लिए डिज़ाइन किया गया एक उपकरण था, जिसे निर्माता ने एआरएस टेक्निका में स्वीकार किया था, अगर यह एकमुश्त दुर्भावनापूर्ण नहीं था। एक मांसाहारी पौधे के नाम पर, नेपेंटीस का उद्देश्य दुर्व्यवहार करने वाले बॉट्स के संसाधनों को भ्रमित करना और बर्बाद करना है।
इसी तरह, CloudFlare ने हाल ही में AI भूलभुलैया लॉन्च किया, जिसका उद्देश्य AI क्रॉलर के संसाधनों को धीमा करना, भ्रमित करना और बर्बाद करना है जो "नो क्रॉल" निर्देशों को अनदेखा करते हैं। टूल वैध वेबसाइट डेटा की सुरक्षा के लिए इन बॉट्स अप्रासंगिक सामग्री को खिलाता है।
SourceHut के Devault ने TechCrunch को बताया कि जबकि नेपेंटीस क्रॉलर को बकवास करके न्याय की भावना प्रदान करता है, Anubis अपनी साइट के लिए अधिक प्रभावी समाधान साबित हुआ है। हालांकि, उन्होंने एक अधिक प्रत्यक्ष समाधान के लिए एक हार्दिक याचिका भी बनाई: "कृपया एलएलएम या एआई छवि जनरेटर या जीथब कोपिलॉट या इस कचरे में से किसी भी कचरे को वैध बनाना बंद करें। मैं आपको उनका उपयोग करने से रोकने के लिए भीख माँग रहा हूं, उनके बारे में बात करना बंद करें, नए बनाना बंद करें, बस रोकें।"
इस होने की अप्रत्याशितता को देखते हुए, डेवलपर्स, विशेष रूप से एफओएसएस समुदाय में, सरलता और हास्य के एक डैश के साथ वापस लड़ते रहते हैं।
संबंधित लेख
AI-चालित सारांश: YouTube वीडियो को संक्षेप करने की पूर्ण मार्गदर्शिका
आज की तेज-रफ्तार दुनिया में, जानकारी को जल्दी से समझने और संसाधित करने की क्षमता पहले से कहीं अधिक महत्वपूर्ण है। YouTube, अपने अनगिनत वीडियो के साथ, ज्ञान का खजाना है, लेकिन हर वीडियो को शुरू से अंत
AI Ultrasound ke Liye Krantikari Badlav
Artificial intelligence swasthya dekhbhal ke duniya mein hila dul raha hai, aur ultrasound technology is badlav ki lehar par sawar hai. Yeh lekh is baat mein gote lagata hai ki AI point-of-care ultras
मशीन लर्निंग चीट शीट्स: आवश्यक AI त्वरित संदर्भ गाइड
प्रौद्योगिकी की गतिशील दुनिया में, जहां AI और क्लाउड कंप्यूटिंग नवाचार को बढ़ावा दे रहे हैं, अपडेटेड और तैयार रहना महत्वपूर्ण है। चाहे आप किसी सहकर्मी के साथ रणनीतियों पर चर्चा कर रहे हों, शैक्षिक साम
सूचना (15)
0/200
![TerryGonzález]()
TerryGonzález
18 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
This tool is a lifesaver for open source devs! It's hilarious how it fights back against those annoying AI crawlers. I love the creativity and the sense of justice it brings to the community. Maybe add more ways to customize the retaliation? 🤓
0
![LucasWalker]()
LucasWalker
24 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
オープンソース開発者にとってこのツールは救世主です！AIクローラーに対する反撃が面白くて、クリエイティブさと正義感がコミュニティに広がるのが好きです。もっとカスタマイズできる機能が増えるといいですね🤓
0
![RogerPerez]()
RogerPerez
18 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
오픈 소스 개발자들에게 이 도구는 구세주예요! AI 크롤러에 대한 반격이 재미있고, 창의성과 정의감이 커뮤니티에 퍼지는 게 좋습니다. 커스터마이즈할 수 있는 기능이 더 늘어나면 좋겠어요🤓
0
![HenryTurner]()
HenryTurner
21 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
Este ferramenta é um salva-vidas para desenvolvedores de código aberto! É hilário como ela luta contra esses irritantes rastreadores de AI. Adoro a criatividade e o senso de justiça que traz para a comunidade. Talvez adicionar mais maneiras de personalizar a retaliação? 🤓
0
![MarkRoberts]()
MarkRoberts
23 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
¡Esta herramienta es un salvavidas para los desarrolladores de código abierto! Es hilarante cómo lucha contra esos molestos rastreadores de IA. Me encanta la creatividad y el sentido de justicia que trae a la comunidad. ¿Quizás añadir más formas de personalizar la retaliación? 🤓
0
![FredGreen]()
FredGreen
17 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
This tool is a lifesaver for open source devs! It's hilarious how they're fighting back against those pesky AI crawlers. The creativity and retribution are top-notch, though sometimes the solutions can be a bit too complex for newbies. Still, it's a must-have for anyone in the field! 😂
0
कई सॉफ्टवेयर डेवलपर्स के अनुसार, एआई वेब-क्रॉलिंग बॉट इंटरनेट का प्रतिबंध बन गए हैं। जवाब में, कुछ देवों ने रचनात्मक और अक्सर मनोरंजक रणनीतियों के साथ वापस लड़ने के लिए लिया है।
ओपन सोर्स डेवलपर्स को इन दुष्ट बॉट्स द्वारा विशेष रूप से कड़ी टक्कर दी जाती है, जैसा कि लिनक्स डेस्कटॉप प्लाज्मा और ब्लॉग लाइब्रेन्यूज के पीछे डेवलपर निकोलो वेनरंडी द्वारा नोट किया गया है। FOSS साइटें, जो मुफ्त और खुले स्रोत परियोजनाओं की मेजबानी करती हैं, उनके बुनियादी ढांचे को उजागर करती हैं और आम तौर पर वाणिज्यिक साइटों की तुलना में कम संसाधन होते हैं।
समस्या को बढ़ा दिया गया है क्योंकि कई एआई बॉट्स रोबोट एक्सक्लूसिव प्रोटोकॉल के रोबोट.टैक्स फ़ाइल को अनदेखा करते हैं, जिसका अर्थ है कि क्रॉल नहीं करने के लिए बॉट्स को निर्देश देना।
जनवरी में एक मार्मिक ब्लॉग पोस्ट में, फॉस डेवलपर Xe Iaso ने AmazonBot के साथ एक परेशान करने वाला अनुभव साझा किया, जिसने एक Git सर्वर वेबसाइट पर बमबारी की, जिससे DDOS आउटेज हो गया। Git सर्वर FOSS परियोजनाओं की मेजबानी के लिए महत्वपूर्ण हैं, जिससे किसी को भी कोड में डाउनलोड और योगदान करने की अनुमति मिलती है।
IASO ने बताया कि BOT ने Robot.txt फ़ाइल की अवहेलना की, अलग -अलग IP पते का उपयोग किया, और यहां तक कि अन्य उपयोगकर्ताओं के रूप में भी मस्करी किया। "यह एआई क्रॉलर बॉट्स को ब्लॉक करने के लिए निरर्थक है क्योंकि वे झूठ बोलते हैं, अपने उपयोगकर्ता एजेंट को बदलते हैं, आवासीय आईपी पते का उपयोग प्रॉक्सिज़ के रूप में करते हैं, और अधिक," Iaso ने कहा।
डेवलपर ने लिखा, "वे आपकी साइट को तब तक स्क्रैप करेंगे जब तक कि यह खत्म नहीं हो जाता है, और फिर वे इसे कुछ और परिमार्जन करेंगे। वे हर लिंक पर हर लिंक पर हर लिंक पर क्लिक करेंगे, एक ही पेज को बार -बार देखेंगे। उनमें से कुछ एक ही लिंक पर एक ही सेकंड में कई बार क्लिक करेंगे।"
कब्रों के देवता दर्ज करें
इसका मुकाबला करने के लिए, IASO ने ANUBIS नामक एक चतुर उपकरण विकसित किया। यह एक रिवर्स प्रॉक्सी के रूप में कार्य करता है जिसे GIT सर्वर तक पहुंचने के लिए अनुरोधों की अनुमति देने से पहले एक प्रूफ-ऑफ-वर्क चेक की आवश्यकता होती है। यह प्रभावी रूप से बॉट को अवरुद्ध करता है, जबकि मानव-संचालित ब्राउज़रों को गुजरने की अनुमति देता है।
उपकरण का नाम, एबिस, मिस्र की पौराणिक कथाओं से आकर्षित करता है, जहां अनुबिस वह ईश्वर है जो मृतकों को निर्णय की ओर ले जाता है। Iaso ने TechCrunch को समझाया, "Anubis ने आपकी आत्मा (दिल) का वजन किया और अगर यह एक पंख से भारी था, तो आपका दिल खाया गया और आप, जैसे, मेगा की मृत्यु हो गई," Iaso ने TechCrunch को समझाया। चुनौती को सफलतापूर्वक पास करने से एनाबिस की एक प्यारी एनीमे तस्वीर के साथ मनाया जाता है, जबकि बॉट अनुरोधों को अस्वीकार कर दिया जाता है।
19 मार्च को GitHub पर साझा की गई परियोजना ने कुछ ही दिनों में 2,000 सितारों, 20 योगदानकर्ताओं और 39 फोर्क्स के साथ, जल्दी से कर्षण प्राप्त किया।
रक्षा के रूप में प्रतिशोध
Anubis के व्यापक रूप से अपनाने से संकेत मिलता है कि Iaso के संघर्ष अलग -थलग से दूर हैं। वेनरांडी ने कई समान अनुभवों को याद किया:
- सोर्सहट के संस्थापक और सीईओ ड्रू डेवॉल्ट, अपने समय का एक महत्वपूर्ण हिस्सा आक्रामक एलएलएम क्रॉलर से निपटने के लिए खर्च करते हैं और लगातार आउटेज से पीड़ित होते हैं।
- जोनाथन कॉर्बेट, एक प्रमुख एफओएसएस डेवलपर और एलडब्ल्यूएन के ऑपरेटर, ने अपनी साइट को एआई स्क्रैपर बॉट्स द्वारा धीमा कर दिया है।
- केविन फेन्ज़ी, लिनक्स फेडोरा प्रोजेक्ट के लिए Sysadmin, को आक्रामक AI बॉट गतिविधि के कारण ब्राजील से सभी ट्रैफ़िक को ब्लॉक करना पड़ा।
वेनेरंडी ने टेकक्रंच का उल्लेख किया कि वह अन्य परियोजनाओं के बारे में जानता है, जिन्हें चरम उपायों का सहारा लेना पड़ा है, जैसे कि सभी चीनी आईपी पते पर प्रतिबंध लगाना।
कुछ डेवलपर्स का मानना है कि प्रतिशोध के साथ वापस लड़ना सबसे अच्छा बचाव है। हैकर न्यूज पर Xyzal नाम के एक उपयोगकर्ता ने रोबोट को भरने का सुझाव दिया। पीने के ब्लीच के लाभों या बेडरूम के प्रदर्शन पर खसरा के सकारात्मक प्रभावों के बारे में भ्रामक सामग्री के साथ निषिद्ध पृष्ठों को भरने का सुझाव दिया।
Xyzal ने समझाया, "लगता है कि हमें बॉट्स के लिए लक्ष्य करने की आवश्यकता है _negative_ उपयोगिता मूल्य हमारे जाल में जाने से, न कि केवल शून्य मान," Xyzal ने समझाया।
जनवरी में, "हारून" नामक एक अनाम डेवलपर नेपेंटीस ने जारी किया, जो नकली सामग्री के एक भूलभुलैया में क्रॉलर को फंसाने के लिए डिज़ाइन किया गया एक उपकरण था, जिसे निर्माता ने एआरएस टेक्निका में स्वीकार किया था, अगर यह एकमुश्त दुर्भावनापूर्ण नहीं था। एक मांसाहारी पौधे के नाम पर, नेपेंटीस का उद्देश्य दुर्व्यवहार करने वाले बॉट्स के संसाधनों को भ्रमित करना और बर्बाद करना है।
इसी तरह, CloudFlare ने हाल ही में AI भूलभुलैया लॉन्च किया, जिसका उद्देश्य AI क्रॉलर के संसाधनों को धीमा करना, भ्रमित करना और बर्बाद करना है जो "नो क्रॉल" निर्देशों को अनदेखा करते हैं। टूल वैध वेबसाइट डेटा की सुरक्षा के लिए इन बॉट्स अप्रासंगिक सामग्री को खिलाता है।
SourceHut के Devault ने TechCrunch को बताया कि जबकि नेपेंटीस क्रॉलर को बकवास करके न्याय की भावना प्रदान करता है, Anubis अपनी साइट के लिए अधिक प्रभावी समाधान साबित हुआ है। हालांकि, उन्होंने एक अधिक प्रत्यक्ष समाधान के लिए एक हार्दिक याचिका भी बनाई: "कृपया एलएलएम या एआई छवि जनरेटर या जीथब कोपिलॉट या इस कचरे में से किसी भी कचरे को वैध बनाना बंद करें। मैं आपको उनका उपयोग करने से रोकने के लिए भीख माँग रहा हूं, उनके बारे में बात करना बंद करें, नए बनाना बंद करें, बस रोकें।"
इस होने की अप्रत्याशितता को देखते हुए, डेवलपर्स, विशेष रूप से एफओएसएस समुदाय में, सरलता और हास्य के एक डैश के साथ वापस लड़ते रहते हैं।
AI-चालित सारांश: YouTube वीडियो को संक्षेप करने की पूर्ण मार्गदर्शिका
आज की तेज-रफ्तार दुनिया में, जानकारी को जल्दी से समझने और संसाधित करने की क्षमता पहले से कहीं अधिक महत्वपूर्ण है। YouTube, अपने अनगिनत वीडियो के साथ, ज्ञान का खजाना है, लेकिन हर वीडियो को शुरू से अंत
AI Ultrasound ke Liye Krantikari Badlav
Artificial intelligence swasthya dekhbhal ke duniya mein hila dul raha hai, aur ultrasound technology is badlav ki lehar par sawar hai. Yeh lekh is baat mein gote lagata hai ki AI point-of-care ultras
मशीन लर्निंग चीट शीट्स: आवश्यक AI त्वरित संदर्भ गाइड
प्रौद्योगिकी की गतिशील दुनिया में, जहां AI और क्लाउड कंप्यूटिंग नवाचार को बढ़ावा दे रहे हैं, अपडेटेड और तैयार रहना महत्वपूर्ण है। चाहे आप किसी सहकर्मी के साथ रणनीतियों पर चर्चा कर रहे हों, शैक्षिक साम
18 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
This tool is a lifesaver for open source devs! It's hilarious how it fights back against those annoying AI crawlers. I love the creativity and the sense of justice it brings to the community. Maybe add more ways to customize the retaliation? 🤓
0
24 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
オープンソース開発者にとってこのツールは救世主です！AIクローラーに対する反撃が面白くて、クリエイティブさと正義感がコミュニティに広がるのが好きです。もっとカスタマイズできる機能が増えるといいですね🤓
0
18 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
오픈 소스 개발자들에게 이 도구는 구세주예요! AI 크롤러에 대한 반격이 재미있고, 창의성과 정의감이 커뮤니티에 퍼지는 게 좋습니다. 커스터마이즈할 수 있는 기능이 더 늘어나면 좋겠어요🤓
0
21 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
Este ferramenta é um salva-vidas para desenvolvedores de código aberto! É hilário como ela luta contra esses irritantes rastreadores de AI. Adoro a criatividade e o senso de justiça que traz para a comunidade. Talvez adicionar mais maneiras de personalizar a retaliação? 🤓
0
23 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
¡Esta herramienta es un salvavidas para los desarrolladores de código abierto! Es hilarante cómo lucha contra esos molestos rastreadores de IA. Me encanta la creatividad y el sentido de justicia que trae a la comunidad. ¿Quizás añadir más formas de personalizar la retaliación? 🤓
0
17 अप्रैल 2025 12:00:00 पूर्वाह्न GMT
This tool is a lifesaver for open source devs! It's hilarious how they're fighting back against those pesky AI crawlers. The creativity and retribution are top-notch, though sometimes the solutions can be a bit too complex for newbies. Still, it's a must-have for anyone in the field! 😂
0
