معالجة البيانات

الوصف

خطوات معالجة البيانات
جمع البيانات (Data Collection): الحصول على البيانات من مصادر مختلفة مثل قواعد البيانات، ملفات CSV، أو واجهات برمجة التطبيقات (APIs).
تنظيف البيانات (Data Cleaning):
إزالة القيم المفقودة أو التعامل معها (مثلاً استبدالها بالمتوسط أو الوسيط).
تصحيح القيم غير المنطقية (مثل قيم سالبة للوزن أو العمر).
إزالة التكرارات.
تحويل البيانات (Data Transformation):
تحويل الأنواع (مثلاً تحويل النصوص إلى أرقام باستخدام الترميز).
توحيد القيم (Normalization أو Standardization).
استخراج الميزات (Feature Engineering):
إنشاء أعمدة جديدة من البيانات الأصلية (مثل حساب مؤشر كتلة الجسم من الوزن والطول).
اختيار الميزات الأكثر تأثيراً على النموذج.
تقسيم البيانات (Data Splitting):
تقسيمها إلى مجموعة تدريب (Training) واختبار (Testing) وربما مجموعة تحقق (Validation).
معالجة خاصة (Domain-specific Processing):
مثلاً في بيانات طبية: التعامل مع القيم الصفرية في ضغط الدم أو الجلوكوز بشكل مختلف لأنها قد تعني "غير مقاس" وليس "صفر"