شركات الذكاء الاصطناعي بتعتمد على إنها تمسح الإنترنت بالكامل طول الوقت علشان تدرب الأنظمة بتاعتها على المحتوى اللي الناس بتنشره. بس دلوقتي، شركة "كلاودفلير" قررت تقولهم "ستوب"!
 |
| كلاودفلير بتمنع روبوتات الذكاء الاصطناعي من سرقة محتوى المواقع |
من دلوقتي، المواقع اللي بتستخدم خدمات كلاودفلير هيكون عندها بشكل تلقائي حماية تمنع روبوتات الذكاء الاصطناعي من الدخول، إلا لو أصحاب المواقع وافقوا أو طلبوا مقابل مادي.
كلاودفلير، وهي شركة كبيرة بتقدّم خدمات البنية التحتية للمواقع، قالت إنها ناوية تغيّر قواعد اللعبة على الإنترنت، خصوصًا إن أغلب المواقع الكبيرة أصلاً بتعتمد على خدماتهم.
الخطوة دي هتخلي من الصعب على روبوتات الذكاء الاصطناعي - اللي طول الوقت بتدخل المواقع وتخزن محتواها علشان تدرب بيه الأنظمة زي ChatGPT - إنها تشتغل بحرية زي زمان. لازم الأول ياخدوا إذن، أو يدفعوا مقابل مادي، علشان يقدروا يزحفوا على المحتوى من المواقع.
الناشرين كمان هيكون عندهم حرية يوافقوا أو يرفضوا دخول الروبوتات، وكلاودفلير وفّرت اختيار اسمه "الدفع مقابل الزحف"، يعني يا تدفع يا مفيش دخول.
السبب في كل ده؟ إن موضوع إن الذكاء الاصطناعي يستخدم محتوى الإنترنت بدون إذن، بقى مثار جدل كبير جدًا، وفي ناس بدأت ترفع قضايا علشان تحمي شغلها ومجهودها.
جدير بالذكر، في عام سنه 2023 بدأ الجدل يزيد، وكان في وعود من كلاودفلير إنها هتسمح للمواقع إنها تمنع الزحف، لكن التنفيذ اتأخر. إنما في 2024، فعلاً بقى في تقنية بتخلي الموقع يقدر يميّز ويمنع روبوتات الذكاء الاصطناعي من الدخول، ودلوقتي بقت الخاصية دي شغالة تلقائي على المواقع اللي بتستخدم خدماتهم.
على لسان المدير التنفيذي ماثيو برينس، كلاودفلير بتقول إنها بتغير قواعد الإنترنت علشان تحافظ على قيمة المحتوى، لأن لو الذكاء الاصطناعي أخد كل حاجة ببلاش، الناس هتقلل من مشاركتها أو توقف نشر المحتوى تمامًا.
هل أدوات الذكاء الأصطناعي زي ChatGPT بياخد محتوى من موقعك؟
- بكل تأكيد (نعم) أيوه، لو محتوى موقعك ظاهر للعامة ومتاح للفهرسة، فيه احتمال كبير إن أنظمة زي ChatGPT أو غيره من نماذج الذكاء الاصطناعي (سواء OpenAI أو غيرها) تكون فهرست المحتوى ده من قبل ضمن عمليات التدريب أو الزحف.
- لكن في الوقت الحالي، ChatGPT مش بيزحف على المواقع لحظة بلحظة، هو اتدرب على بيانات قديمة (غالبآ قبل 2023). أما دلوقتي لو المستخدم بيطلب معلومة، فبيجاوب من المعلومات اللي اتدرّب عليها أو أحيانًا من مصادر مباشرة لو أتاح لي أداة البحث في الإنترنت.
هل هتاخد فلوس من كلاودفلير أو من شات جي بي تي بسبب ده؟
- حاليًا لا، إلا لو، فيه شرطين لازم يتحققوا علشان تبدأ تستفيد: الشرط الأول: إنك تستخدم Cloudflare على موقعك. يعني موقعك يكون محمي وبيخدم من خلال كلاودفلير. لو مش بتستخدم كلاودفلير، فالإعدادات دي مش هتنطبق عليك.
- الشرط التاني: إنك تفعّل إعداد "الدفع مقابل الزحف". وده لسه جديد جدًا، وكلاودفلير بدأت تفعّله بشكل افتراضي لمنع الزحف، لكن لو شركة ذكاء اصطناعي حبت تدخل موقعك هتضطر تدفع أو تطلب إذن منك.
- يعني إيه ده بالنسبالك؟ بشكل مختصر ودقيق: لو موقعك على كلاودفلير فعادي تقدر تستفيد فعلًا وتطلب من شركات الذكاء الاصطناعي إنها تدفع مقابل دخول روبوتاتها. لو موقعك مش على كلاودفلير: يبقى محتواك مكشوف وأي شركة ممكن تفهرسه لو انت مش عامل حظر في ملف robots.txt.
- هل ده معناه إنك هتكسب فلوس مباشرة قريب؟ مش بشكل أوتوماتيكي، لكن مستقبلًا: شركات الذكاء الاصطناعي اللي عايزة تدخل مواقع المحمية بكلاودفلير هتضطر تدفع. انت ممكن تستفيد لو اشتركت في المنظومة دي، ووافقت فقط على الزحف المدفوع. يعني بشكل مختصر أيضآ: لازم موقعك يستخدم Cloudflare. وتفعل إعدادات "حظر الزحف إلا بمقابل". ساعتها أي شركة عايزة تدخل وتاخد المحتوى (زي OpenAI أو غيرها)، لازم تدفع.
 |
| CLOUDFLARE |
طيب تعمل إيه علشان تبدأ تستفيد من ده فعليًا؟
- 1. ادخل على حسابك في Cloudflare روح للدومين الخاص بك.
- 2. افتح قسم "Security" > "Bots" هتلاقي إعدادات تخص حماية الموقع من الروبوتات. عليك تفعيل الحظر التلقائي للروبوتات AI scrapers Cloudflare بدأت تمنع روبوتات معينة، بس في إعداد جديد اسمه مثلاً: Block AI crawlers وده احتمال كبير سيتم إدراجه بشكل تدريجي في المستقبل في كلاود. ولو لقيته شغال وظهر عندك ومتفعل تمام. ولو برده الكلمه لسه مظهرتش ليك فعادي لا تقلق لأن الوضع الحالي الحقيقي في Cloudflare: كلاودفلير أعلنت فعليًا إنها بدأت تمنع روبوتات الذكاء الاصطناعي (AI bots) من الوصول للمواقع اللي شغالة على خدماتها.
طيب تعمل إيه دلوقتي علشان تحمي موقعك وتحجز مكانك في اللعبة؟
- فتح قسم "Security" > "Bots" ثم Bot Fight Mode: ده بيدافع عن موقعك ضد الروبوتات الخبيثة، لكنه مش متخصص في روبوتات الذكاء الاصطناعي. تقدر تشغّله بأمان. بيحسّن الأمان ومش بيأثر على الزوار العاديين.
- Block AI Bots دي أهم حاجة دلوقتي! دي اللي بتمنع الروبوتات المعروفة بتاعت الذكاء الاصطناعي (زي GPTBot وClaudeBot وغيرها). شغلها فورًا علشان تمنع أي شركة AI من دخول موقعك بدون إذن.
- AI Labyrinth (Beta) دي خاصية جديدة جدًا لسه تجريبية (Beta)، بتحاول تتعامل بذكاء أكتر مع روبوتات الذكاء الاصطناعي. لو ظهرت ليك، كويس. ممكن تسيبها Off مؤقتًا لحد ما يبقى في تفاصيل أكتر عنها.
- Manage AI bot traffic with robots.txt دي بتديك دعم تلقائي لتحديث ملف robots.txt عشان يمنع روبوتات الذكاء الاصطناعي من الزحف. بس بما إنك ممكن تعدل الملف بنفسك، تقدر تسيبها Off مؤقتًا أو تشغلها لو عايز أوتوماتيك.
المطلوب منك دلوقتي: فعّل الاتي فورًا من لوحة Cloudflare: ✅ Bot Fight Mode → ON ✅ Block AI Bots → ON وتأكد إن ملف robots.txt فيه السطور دي: (لو مش مفعل "Manage AI bot traffic with robots.txt")
تأكد إن ملف robots.txt فيه السطور دي: (لو مش مفعل "Manage AI bot traffic with robots.txt")
- User-agent: GPTBot
- Disallow: /
- User-agent: ChatGPT-User
- Disallow: /
- User-agent: CCBot
- Disallow: /
- User-agent: ClaudeBot
- Disallow: /
- User-agent: anthropic-ai
- Disallow: /
- User-agent: *
- Allow: /
تابع التطوير الرسمي من Cloudflare: صفحة التحديثات الرسمية: https://blog.cloudflare.com.
