العربية
English
نظام استخراج بيانات وتخطي حماية متقدم لحظي (Anti-Bot Scraper: Amz-Hunt)
منذ 4 أيام
عرض العمل
الوصف
نظام متكامل لمراقبة العروض والأسعار لحظياً على كبرى المتاجر الإلكترونية (مثل أمازون)، وتخطي أصعب جدران الحماية وإرسال تنبيهات تيليجرام فورية بتكلفة تشغيلية $0.
🎯 المزايا الهندسية والمعمارية:
• تخطي حماية WAF ومحاكاة المتصفح: محاكاة البصمة الأمنية لـ Chrome عبر TLS Impersonation ومكتبة curl_cffi لتجاوز الحظر تماماً بدون أي بروكسيات مدفوعة.
• المعمارية السداسية (Hexagonal Architecture): بناء النظام بنمط Ports & Adapters لفصل منطق العمل تماماً عن الخدمات الخارجية لسهولة الصيانة.
• مسار معالجة من 7 مراحل: جدولة ذكية لمنع كشف النمط، تحليل محتوى عربي/إنجليزي، ومنع التكرار بخوارزمية SHA256 وتخزين غير معرقل بـ aiosqlite.
• المراقبة والتحليل (Observability): لوحة تحكم مدمجة بـ Grafana & Prometheus لتتبع سرعة الاستجابة ومعدل الأخطاء لحظياً.
• نشر خفيف بالحاويات: Multi-stage Docker Build بحجم ~180MB لضمان التشغيل المستمر على أي خادم بأقل استهلاك للموارد.
🛠️ التقنيات: Python, Docker, curl_cffi, aiosqlite, BeautifulSoup, Prometheus, Grafana.
التفاصيل
| المشاهدات | 0 |
| المفضلة | 0 |
| القسم | برمجة, تطوير المواقع و التطبيقات - اخري |
