طرائق جمع البيانات:
إنّ الأدوات الخاصة بجمع البيانات وتحليلها تلعب دورًا في عملية معرفة الأنماط والاتِِّجاهات الكامنة داخل البيانات وفهمها. والتي تعد واحدة من العمليات المُُهِِمََّة التي تهدف إلى استخراج معلومات قيِِّمة من كَمَ كبير من البيانات، لا سيََّما في ظلِِّ التدفُُّق الهائل للبيانات الذي يشهده العالََم اليوم.
ويمثل الشكل التالي أبرز طرق جمع البيانات المتعارف عليها:
مراحل استكشاف البيانات (Data Exploration)
1.المرحلة الاولية لتحضير البيانات: تتضمن هذه المرحلة ثلاث خطوات أساسية تشمل:
- تحديد المشكلة من خلال معرفة ما الذي نريد حله.
- وجود هدف واضح لغايات توجيه عملية استكشاف البيانات الى المسار الصحيح.
- جمع البيانات من المصادر المختلفة (قواعد البيانات،ملفات اكسل،الواجهات البرمجية والملفات النصية)
2.تنظيف البيانات: تتضمن هذه المرحلة إزالة الأخطاء والقيم المفقودة والقيم غير المنتمية.
3.تمثيل البيانات المرئي : والتي تتضمن عرض البيانات بشكل تمثيل بصري يمكن المشاهد من الكشف عن الانماط والعلاقات بينهما.
4.تلخيص البيانات: تقديم عملية اكتشاف البيانات بشكل مفهوم وذو معنى للآخرين والذي يتم من خلال استخدام الاحصائيات الوصفية.
أدوات تحليل البيانات (Data Analysis Tools)
1.لغة البرمجة بايثون (Python)
والتي تحتوي على مجتمع عالمي ضخم،حيث تحتوي على اكثر من (137000) مكتبة متخصصة في عدد من المجالات المختلفة. وهذه المكتبات تمتاز بأنها :
- تسمح للمستخدمين إجراء معالجة مُتقدمة للبيانات
- تسمح بإجراء تحليل عددي دقيق
ويمثل الشكل التالي أبرز المكتبات التي تتوفرها لغة بايثون:
2.برمجية اكسل (Excel)
من اهم مزايا برمجية إكسل في تحليل البيانات تتمثل في الشكل التالي:
المفاضلة بين ادوات تحليل البيانات
يمكن المفاضلة بين أدوات تحليل البيانات من خلال عدد من المعاييرالتي يجب مراعاتها عند اختيار اداة تحليل للبيانات والتي تم تلخيصها في الجدول التالي:
|
اسم المعيار |
وصف المعيار |
ملاحظات |
|
سعر الاداة |
تكلفة استخدام الاداة ، حيث بعض الاداوات تحتاج إشتراكًا لقاء مبلغ مالي وبعضها مجاني |
عند المقارنة يجب مراعاة وجود كل المزايا التي تحتاجها في الاداة |
|
سهولة التعلم |
سهولة التعليمات التي تساعد على تعلم العمل على الاداة |
كلما كانت الاداة أسهل تعلمًا كلما كان الإقبال عليها أكبر |
|
الفاعلية في إدارة البيانات |
القدرة على إدارة البيانات بكفاءة(مدة الاحتفاظ بها او التخلص منها، كيفية تخزينها،مشاركتها،ارشفتها واسترجاعها) |
كلما كانت الاداة فاعلة كلما كانت أفضل لدى المستخدم |
|
القدرات الرسومية |
تمثيل البيانات على شكل رسومات واضحة متقدمة ومنوعة وتدعم التحليل البصري |
الرسومات الواضحة تسهل فهم واكتشاف الأنماط والعلاقات |