التعريف الاساسي الأكثر استخدامًا للبيانات الضخمة من ثلاث V هي:
1-الحجم Volume
كميات كبيرة من البيانات، من مجموعات البيانات مع أحجام التيرابايت إلى زيتابايت
2-السرعة Velocity
كثيرًا ما تكون هناك كميات كبيرة من البيانات من المعاملات مع ارتفاع معدل التحديث مما أدى إلى تدفق البيانات القادمة بسرعة كبيرة، والوقت للعمل على أساس هذه قصير جدًا، فهناك تحوّل من معالجة دفعة إلى الوقت الحقيقي لتدفقها.
3-التنوع Varity
تأتي البيانات من مصادر بيانات مختلفة
مثل بيانات المعاملات، والسجلات، والتطبيقات المختلفة والبيانات المنظمة كجدول قاعدة بيانات وبيانات شبه منظمة مثل بيانات XML، والبيانات غير المهيأة مثل النصوص، والصور، وتدفقات الفيديو، والبيانات الصوتية، وغيرها.
—————–
فيمَ تتمثل البيانات الضخمة؟
▪️بيانات الويب (Web Data)
▪️البيانات النصية (Text Data)
▪️بيانات الوقت والموقع (Time and Location Data)
▪️الشبكة الذكية وبيانات الاستشعار (Smart Grid and Sensor Data)
▪️بيانات الشبكة الاجتماعية (Social Network Data)
——————
تتنوع مصادر البيانات الضخمة وتتعدد بين كل من:
• المصادر الناشئة عن إدارة أحد البرامج: برنامج حكومي أو غير حكومي كالسجلات الإلكترونية للمستفيدين وللناشرين وللموظفين، وللمكتبات المتعامل معها، ولزيارات المستفيدين..إلخ، وسجلات التأمين والسجلات المصرفية، والسجلات الطبية للمرضى مثلاً
• المصادر التجارية أو ذات الصلة بالمعاملات:
البيانات الناشئة عن معاملات بين كيانين، على سبيل المثال معاملات البطاقات الائتمانية والمعاملات التي تجرى عن طريق الإنترنت بوسائل منها الأجهزة المحمولة.
• مصادر شبكات أجهزة الاستشعار: على سبيل المثال، التصوير بالأقمار الصناعية، وأجهزة استشعار الطرق، وأجهزة استشعار المناخ وتلوث الهواء.
• مصادر أجهزة التتبع (GPS): مثلاً تتبع البيانات المستمدة من الهواتف المحمولة والنظام العالمي لتحديد المواقع.
—————-
تقنيات البيانات الضخمة :
أهم وأشهر هذه التقنيات: Hadoop وMap Reduce وHPCC،
إلا أن Hadoop يعد من أشهر هذه الأدوات، وهو برنامج أو منصة برمجية مفتوحة المصدر مكتوبة بلغة الجافا لتخزين ومعالجة البيانات الضخمة بشكل موزع مثل تخزين بيانات ضخمة على عدة أجهزة ومن ثم توزيع عملية المعالجة
0
0
0
Leave a Reply