سحب بيانات الويب
سحب بيانات الويب هو الاستخراج الآلي للبيانات المنظمة من المواقع الإلكترونية. يرسل المستخرج طلبات HTTP إلى عناوين URL المستهدفة، ويحلل HTML المُعاد (أو JSON من APIs)، ويحفظ البيانات المستخرجة بصيغة منظمة مثل CSV أو JSON أو Excel.
الأدوات ذات الصلة
مصطلحات ذات صلة
المتصفح غير المرئي
المتصفح غير المرئي هو متصفح يعمل بدون واجهة رسومية. ينفّذ JavaScript ويعرض CSS ويحاكي تفاعلات المستخدم مثل المتصفح الحقيقي — لكن دون عرض أي شيء على الشاشة.
تدوير البروكسي
تدوير البروكسي هو ممارسة التنقل بين عناوين IP متعددة عند إجراء طلبات الاستخراج، بحيث يرى الخادم المستهدف عناوين IP مختلفة بدلاً من طلبات متكررة من نفس المصدر.
محلل HTML
محلل HTML يقرأ نص HTML الخام ويحوله إلى شجرة منظمة من العقد (DOM) يمكن للبرامج اجتيازها والاستعلام عنها.
تحديد معدل الطلبات
تحديد معدل الطلبات هو دفاع من جانب الخادم يقيّد عدد الطلبات التي يمكن لعميل إجراؤها خلال نافذة زمنية معينة.