بوتات تُثقل البحث والنماذج: حد الطلبات في nginx
باختصار: عندما يضرب برنامج آلي صفحة البحث في متجرك أو صفحة الدخول أو نموذج التواصل بعشرات الطلبات في الثانية، يبطؤ الموقع على كل الزبائن. في nginx تحدد معدل الطلبات لكل عنوان IP على هذه المسارات تحديداً بوحدة limit_req: تعرّف منطقة بـ limit_req_zone، وتطبقها بـ limit_req مع هامش burst. ابدأ بوضع التجربة limit_req_dry_run لترى من سيتأثر قبل أن ترفض أحداً، واجعل الرد برمز 429 بدل 503 الافتراضي.
كيف تبدو المشكلة
متجر إلكترونيات في عمّان يلاحظ أن الموقع يبطؤ فجأة في أوقات عشوائية، والخادم يعمل بكامل طاقته. في سجلات الوصول يجد الآلاف من طلبات البحث من عنوان واحد أو عناوين قليلة، كل منها بكلمة مختلفة، كأن أحداً ينسخ الكتالوج كاملاً عبر البحث. أو مدرسة خاصة يصلها في ليلة واحدة مئات الرسائل المزعجة عبر نموذج التواصل. أو شركة خدمات ترى محاولات دخول متتالية على صفحة دخول لوحة التحكم.
القاسم المشترك: صفحات قليلة مكلفة على الخادم، لأن كل طلب يصل إلى قاعدة البيانات أو يرسل بريداً، تُطلب بمعدل لا يمكن أن يصدر عن إنسان. الزبون العادي يبحث مرة كل بضع ثوانٍ في أحسن الأحوال.
الفكرة: حد للمعدل لا للعدد
بحسب توثيق nginx، تُستخدم وحدة ngx_http_limit_req_module لتحديد معدل معالجة الطلبات لكل مفتاح محدد، وبخاصة معدل الطلبات القادمة من عنوان IP واحد. ويتم ذلك بطريقة «الدلو المسرّب»: الطلبات تُعالج بمعدل ثابت، وما يزيد عليه يُؤخر أو يُرفض.
هذا يختلف عن قفل الحساب بعد عدد محاولات خاطئة داخل التطبيق. حد المعدل يعمل على مستوى الخادم قبل أن يصل الطلب إلى التطبيق أصلاً، فيحمي الصفحات المكلفة من الضغط حتى لو كانت الطلبات كلها «صحيحة» شكلاً.
الخطوة الأولى: عرّف المنطقة
في قسم http من الإعدادات:
limit_req_zone $binary_remote_addr zone=search:10m rate=2r/s;
limit_req_zone $binary_remote_addr zone=forms:10m rate=10r/m;
يشرح التوثيق أن هذا ينشئ منطقة ذاكرة مشتركة تحفظ حالة كل مفتاح، والمفتاح هنا عنوان الزائر. ويوضح لماذا يُستخدم $binary_remote_addr بدل $remote_addr: حجمه ثابت، 4 بايت لعناوين IPv4 و16 لعناوين IPv6. وميغابايت واحد يحفظ قرابة 16 ألف حالة بحجم 64 بايت، أو 8 آلاف بحجم 128 بايت، فمنطقة 10 ميغابايت تكفي موقعاً صغيراً بسهولة. وإذا امتلأت المنطقة، يُحذف أقدم ما استُخدم.
والمعدل يُكتب بالطلبات في الثانية r/s، أو في الدقيقة r/m إذا أردت أقل من طلب في الثانية. مثال التوثيق: نصف طلب في الثانية يُكتب 30r/m. لذلك يناسب r/m نماذج التواصل والدخول، ويناسب r/s البحث.
الخطوة الثانية: طبّقه على المسارات المكلفة فقط
location /search/ {
limit_req zone=search burst=5;
}
location = /contact/send {
limit_req zone=forms burst=3 nodelay;
}
لا تطبقه على الموقع كله في البداية. الصفحة الواحدة تحمّل صوراً وملفات أنماط وسكربتات كثيرة، وحد صارم على كل شيء قد يكسر الموقع للزوار العاديين.
يشرح التوثيق معنى burst: إذا تجاوزت الطلبات المعدل، تُؤخر معالجتها لتسير بالمعدل المحدد، وما يتجاوز حجم burst يُنهى بخطأ. والقيمة الافتراضية لـ burst صفر. ومثاله: معدل طلب في الثانية مع burst=5 يعني ألا يزيد المتوسط عن طلب في الثانية، مع دفعات لا تتجاوز 5 طلبات. وإذا كنت لا تريد تأخير الطلبات الزائدة داخل الهامش، يضيف nodelay معالجتها فوراً، ثم يرفض ما بعدها.
ويمكن وضع أكثر من limit_req معاً، مثلاً حد لكل عنوان وحد آخر للموقع كله. وينبه التوثيق إلى أن هذه التوجيهات تُورث من المستوى الأعلى فقط إذا لم يكن في المستوى الحالي أي limit_req، فإذا عرّفت حداً داخل location، فلن يرث ما فوقه.
الخطوة الثالثة: جرّب قبل أن ترفض
من أهم ما في الوحدة وضع التجربة. يذكر التوثيق أن limit_req_dry_run on يجعل nginx لا يقيد المعدل فعلياً، لكنه يحسب الطلبات الزائدة في المنطقة كالمعتاد. والمتغير $limit_req_status يحفظ نتيجة كل طلب، مثل PASSED أو DELAYED أو REJECTED أو DELAYED_DRY_RUN. أضف هذا المتغير إلى صيغة السجل لأيام قليلة، ثم انظر: هل الطلبات التي كانت ستُرفض من البرامج المزعجة فقط، أم من زبائن حقيقيين أيضاً؟ عدّل المعدل والهامش، ثم أوقف وضع التجربة.
كيف تختار الأرقام
لا توجد أرقام صحيحة لكل المواقع، والأرقام في الأمثلة هنا للتوضيح فقط. الطريقة الأسلم أن تبدأ من سلوك زبائنك الفعلي: افتح سجلات الوصول لأسبوع عادي، وابحث عن أعلى عدد طلبات بحث أرسله زائر حقيقي في دقيقة واحدة، ثم ضع الحد فوقه بهامش واضح. وتذكّر أن زبائن شركة واحدة أو مدرسة قد يتصفحون من شبكة واحدة تظهر بعنوان واحد، فيبدون كزائر واحد كثير الطلبات. إذا كان جمهورك كذلك، فاجعل الحد أرحب، واعتمد على وضع التجربة لتتأكد.
الخطوة الرابعة: رمز الرد والسجل
القيمة الافتراضية لـ limit_req_status هي 503، أي «الخدمة غير متاحة». هذا الرمز قد يفهمه محرك بحث أو أداة مراقبة على أنه عطل في الموقع. اجعله 429، وهو الرمز المخصص لكثرة الطلبات:
limit_req_status 429;
ويحدد limit_req_log_level مستوى تسجيل الرفض في سجل الأخطاء، والافتراضي error. ويوضح التوثيق أن مستوى التأخير أقل بدرجة من مستوى الرفض. إذا كان سجل الأخطاء يمتلئ برسائل الرفض، اخفض المستوى إلى warn أو notice.
انتبه إذا كان موقعك خلف وسيط
إذا كان موقعك خلف شبكة توزيع محتوى أو وكيل عكسي، فقد يرى nginx كل الطلبات قادمة من عناوين الوسيط، لا من عناوين الزوار. عندها يصبح الحد «لكل عنوان» حداً على الوسيط كله، فيرفض زبائن حقيقيين. قبل التفعيل، تأكد أن nginx يقرأ العنوان الحقيقي للزائر من الترويسة التي يرسلها الوسيط، وأنه يثق بها فقط من عناوين الوسيط المعروفة.
مثال توضيحي: متجر يحمي صفحة البحث
هذا مثال توضيحي لطريقة المعالجة، وليس حالة حقيقية. متجر إلكترونيات يرى بطئاً متكرراً سببه آلاف طلبات البحث من عناوين قليلة. يعرّف منطقة بمعدل طلبين في الثانية مع burst=5 على مسار البحث فقط، ويشغّل وضع التجربة ثلاثة أيام مع تسجيل $limit_req_status. يجد أن الرفض كان سيصيب البرامج الآلية فقط، فيوقف التجربة ويضبط الرد على 429. ثم يضيف حداً أبطأ بالدقيقة على نموذج التواصل، فتقل الرسائل المزعجة دون أن يتأثر الزوار.
أسئلة شائعة
كيف بحمي صفحة البحث من البوتات اللي بتبطئ الموقع؟
حدد معدل الطلبات لكل عنوان على مسار البحث بـ limit_req_zone وlimit_req، مع هامش burst صغير.
شو الفرق بين burst وnodelay؟
burst هو عدد الطلبات الزائدة المسموح بها مؤقتاً. ومع nodelay تُعالج فوراً بدل تأخيرها، ثم يُرفض ما يتجاوزها.
كيف بعرف إذا الحد رح يأثر على زبائن حقيقيين؟
شغّل limit_req_dry_run وسجّل $limit_req_status لأيام، وراجع من كانت طلباته ستُرفض قبل التفعيل.
ليش الزبائن كلهم انرفضوا بعد التفعيل؟
غالباً لأن الموقع خلف وسيط وnginx يرى عنوان الوسيط فقط. اضبط قراءة العنوان الحقيقي للزائر أولاً.
إذا كانت برامج آلية تُثقل بحث موقعك أو نماذجه، تواصل معنا ونضبط حدود المعدل بعد تجربتها على حركة موقعك الفعلية.