जैसा की आप जानते ही है की अब Artificial intelligence (AI) का दौर शुरू होअगाया है और सभी बड़ी Tech कंपनी जैसे Google , Microsoft , Facebook , Canva , OpenAI etc. अपने Products & Services में AI को Introduce और Impliment कर रहे है .
और जब से OpenAI ने अपना GPT4 launch किया है जो की अब तक सबसे आधुनिक AI System है और इतना Capable है की वो अब Internet को भी Browse करने लगा है और उन Websites के Data से भी Reference लेने लगा है .
और जो मेहनत आपने किसी Exclusive Content / कैसा भी Content को बनाने में की है उस से ChatGPT कुछ नया Content बना सकता है , क्यूंकि अब ai इतना capable हो गया है .
तो इसी को देखते हुए अगर आप अपनी Website / Blog में कुछ ऐसा Exclusive Content डालते है और चाहते है की Chat GPT के Bots आपकी website को Crawl करके Deta ना ले पाए तो आप Chat GPT के Agents को मना भी कर सकते है .
कैसे रोकें Chat GPT को अपनी Website Crawl करने से :-
जैसा की आप जाने ही है की किसी भी Website / Blog के Root Folder में Crawler /Spider/Agent/ Bot या किसी को भी instruction देने केलिए एक file होती है जिसे robots.txt कहते है .
robots.txt file क्या काम करती है ?
robots.txt एक टेक्निकल स्टैंडर्ड है, जिसका उपयोग वेब साइटों पर स्पाइडर्स या वेब क्रॉलरों को वेब साइट के कुछ अंशों से प्रतिबंधित करने में किया जाता है।
जब एक स्पाइडर वेब साइट पर जाता है, तो वह रोबोट्स.टेक्स्ट फ़ाइल की जांच करता है ताकि वह साइट के अंशों को क्रॉल करने से पहले उन्हें निषेधित कर सके। इसलिए, robots.txt फ़ाइल उन वेब साइटों के लिए एक नियंत्रण फ़ाइल का काम करती है जो वेब स्पाइडर को बताती है कि कौन से वेब पेजों को क्रॉल करना है और कौन से नहीं।
यह फ़ाइल वेब साइट के रूट डायरेक्टरी में रखी जाती है और वेब स्पाइडर वेब साइट के रूट डायरेक्टरी से शुरू होता है। रोबोट्स.टेक्स्ट फ़ाइल में आमतौर पर उन वेब पृष्ठों के URL शामिल होते हैं जिन्हें वेब स्पाइडर नहीं क्रॉल करना चाहता है।
Steps: How to Block ChatGPT to my Website :-
Time needed: 1 minute
- Open File Manager of Your website’s Hosting
सबसे पहले आप अपने Hosting Account में Login कर लें और फिर आप अपनी Website के File manager को Access करें. फिर आप Robots.txt files को Editor में खोलें
- Now Add ChatGPT Agent and Instruction for Chat GPT Spider (Agent)
फिर आपको अपनी Robots.Txt file में सबसे नीचे ये 2 Lines Add करनी है :-
Line no. 1 :- User-agent: ChatGPT-User
Line no. 2 :- Disallow:/
Note :- इसमें हम ChatGPT के Crawler को पूरी Website को Crawl करने से रोक रहे है :-
Example :-
Note:- अगर आप चाहे तो आप अपने Website को पूरा या website के कुछ हिस्से (Private) को भी block कर सकते है .
Conclusion :- तो अब आपने जान लिया ही की आप अपनी Website को ChatGPT के Agent (Spider/Bots) केलिए कैसे Block कर सकते है . अगर आपको कुछ समझ नहीं आया और आप कुछ पूछना चाहते है तो नीचे दिए Comment Box में पूछ सकते है , मैं जवाब देने (Problem Solve) की कोशिश करूँगा . धन्यवाद्
