KMK
اطلب ترخيصًا
Y11-002 / تحليل البيانات وإعداد التقارير

منصة جمع بيانات الويب

منصة جمع بيانات الويب هي برنامج شامل بعلامة White Label، يتيح للمؤسسات جمع البيانات المفتوحة أو التي تملك صلاحية الوصول إليها من مصادر ويب مسموح بها، وتنظيفها وتصنيفها وإعدادها للاستخدام بصورة منتظمة. تجمع المنصة في مكان واحد إدارة المصادر، والجمع المجدول، والتحقق من البيانات، وتتبع التغييرات، وإعداد التقارير، والتصدير. رخّص البرنامج بعلامتك التجارية الخاصة وقدّم لعملائك حلًا لجمع البيانات ومراقبتها.

نظرة عامة

تتغير ظروف المنافسة والأسعار وكتالوجات المنتجات وتدفقات الأخبار والمعلومات القطاعية المتاحة للعامة باستمرار. وتستغرق المتابعة اليدوية وقتًا وقد تؤدي إلى سجلات غير مكتملة. تهدف منصة جمع بيانات الويب إلى تجميع المعلومات من المصادر المناسبة عبر مهام قابلة للتكرار، وتقديم مخرجات متسقة لفرق البيانات. يمكن للمؤسسات تحديد عناوين المصادر وقواعد مطابقة الحقول، وتحديد وتيرة الجمع، ومتابعة نتائج المهام، واستبعاد السجلات المكررة، ونقل المخرجات إلى أنظمتها التحليلية أو التشغيلية. ويُعد الاستخدام المتوافق مع شروط المصادر والصلاحيات القانونية أمرًا أساسيًا؛ فالمنصة لا تعد بتجاوز قيود الوصول إلى المواقع أو بجمع البيانات الشخصية دون إذن. القيمة المقترحة: نظّم مهام جمع البيانات المتكررة، وابقَ على اطلاع بالتغييرات، وادعم عمليات اتخاذ القرار ببيانات حديثة قابلة للتتبع. أبرز المزايا • منصة واحدة: المصادر ومهام الجمع والسجلات والمخرجات في لوحة واحدة. • معلومات حديثة: تقليل عبء الفحص اليدوي من خلال الجمع المجدول ومراقبة التغييرات. • بيانات أنظف: تطبيع الحقول والتحقق منها وفحص السجلات المكررة. • استخدام مرن: سيناريوهات التجارة الإلكترونية والتجزئة والتمويل والإعلام والتقنية. • White Label: تقديم خدمة جمع البيانات بعلامتك التجارية ونطاقك الخاص. حالات استخدام حسب القطاع • التجارة الإلكترونية: مجموعات بيانات مناسبة لمقارنة كتالوجات المنتجات المسموح بها وتغيرات الأسعار ومواصفات المنتجات. • التجزئة: مراقبة إعلانات الفروع والحملات وبيانات الكتالوجات المتاحة للعامة واتجاهات السوق. • التمويل: تجميع أسعار الفائدة والإعلانات ومؤشرات السوق المنشورة في مصادر المعلومات المالية المرخصة أو المفتوحة. • الإعلام: متابعة RSS والمنشورات المفتوحة ووسوم الموضوعات وتحديثات المحتوى مركزيًا. • التقنية: متابعة إصدارات المنتجات المتاحة للعامة والوثائق التقنية وأخبار القطاع. تموضع المنتج يركز Y11-002، منصة جمع بيانات الويب، على الحصول القانوني على المعلومات من مصادر ويب خارجية وإدارة المصادر وإعداد البيانات. أما Y11-001، منصة ذكاء الأعمال ولوحات المعلومات، فتتولى تصور البيانات؛ ويدير Y11-003، برنامج تكامل البيانات وETL، تدفقات البيانات وتحويلها بين الأنظمة؛ ويتخصص Y11-004، برنامج تحليلات العملاء والمبيعات، في أداء العملاء والمبيعات. وظائف جمع البيانات وتنظيفها وتتبع التغييرات وتصديرها في Y11-002 ليست وحدات تُباع بشكل منفصل. الأسئلة الشائعة هل يمكن جمع البيانات من أي موقع ويب؟ لا. تُقيّم الإمكانية التقنية للوصول إلى المصدر وشروط استخدامه والصلاحيات القانونية. هل يمكن مراقبة أسعار المنافسين؟ يمكن إعداد المراقبة للبيانات المحددة في العقد، وذلك في المصادر التي يسمح القانون وشروط الوصول باستخدامها. ما وتيرة التحديث؟ تُحدد وفقًا لشروط المصدر وحدود السرعة وسعة التثبيت. هل يمكن الحصول على البيانات عبر Excel أو API؟ نعم، تتاح المخرجات المصرح بها وعمليات النقل عبر API ضمن النطاق المتفق عليه في العقد. هل تُنشئ فئات الذكاء الاصطناعي تلقائيًا؟ يعتمد التصنيف المدعوم بالذكاء الاصطناعي على النموذج والخدمة المحددين اختياريًا ضمن النطاق؛ كما يدعم البرنامج التصنيف اليدوي أو القائم على القواعد في الاستخدام القياسي. هل يمكنني بيع الخدمة لعملائي؟ نعم، يمكنك تقديم الخدمة بعلامتك التجارية؛ وتظل تكاليف الخدمات الخارجية وحدود السعة سارية بصورة منفصلة. هل يتم تسليم الشيفرة المصدرية؟ لا. تُمنح رخصة استخدام دائمة؛ وتظل الشيفرة المصدرية وحقوق الملكية الفكرية ملكًا لـ KMKSOFT.

هوية المنتج

رمز المنتج
Y11-002
الاسم العالمي
Web Data Collection Platform
الفئة الرئيسية
تحليل البيانات وإعداد التقارير
نوع المنتج
برنامج واحد متكامل بعلامة White Label
القطاعات
التجارة الإلكترونية، التجزئة، التمويل، الإعلام، التقنية
نطاق الترخيص
علامة تجارية واحدة / تثبيت إنتاجي رئيسي واحد؛ لا توجد رسوم ترخيص KMK لكل عميل نهائي
الاستضافة
KMKCloud أو بنية تحتية مناسبة؛ برسوم منفصلة.
الدعم الفني
12 أشهر

الميزات القياسية

إدارة مصادر الويب
تسجيل عناوين URL المستهدفة المسموح بها والنطاقات وأنواع البيانات والمسؤول وملاحظات الوصول.
مهام جمع البيانات
مهام جمع بيانات لمرة واحدة أو متكررة، مرتبطة بالمصدر ومخطط البيانات.
الجدولة والدورية
تشغيل المهام على فترات محددة ومتابعة حالة آخر تشغيل.
تحليل صفحات HTML
استخراج العناوين والروابط والأسعار والأوصاف والحقول المنظمة من الصفحات المناسبة.
ترقيم الصفحات وتتبع الروابط
جمع البيانات من صفحات القوائم والتفاصيل التي تسمح بها قواعد المصدر.
روابط API وتدفقات البيانات
إمكانية استخدام API المصرح به وRSS والمصادر الأخرى القابلة للقراءة آليًا.
قوالب مطابقة الحقول
مطابقة بيانات المصدر مع الحقول المستهدفة وأنواع البيانات.
تنظيف البيانات
توحيد تنسيقات الحقول الفارغة والكتابة والتواريخ والأرقام والعملات.
فحص السجلات المكررة
تمييز السجلات المتكررة أو دمجها بحسب الحقول ومفاتيح المطابقة.
تتبع التغييرات
مقارنة الأسعار والمخزون والنصوص أو فروق السجلات مع نتائج عمليات الجمع السابقة.
قواعد التحقق من البيانات
فحص الحقول الإلزامية والتنسيق المتوقع ونطاق القيم والاتساق.
التصنيف ووضع الوسوم
تصنيف مجموعات البيانات بحسب الفئة أو الموضوع أو العلامة التجارية أو الحقول المحددة.
البحث والفلاتر المتقدمة
تصفية السجلات بحسب المصدر والتاريخ والحالة والفئة وقيم الحقول.
معاينة البيانات وتحريرها
فحص السجلات المجمعة في جدول وإجراء تصحيحات مصرح بها.
مخرجات CSV وExcel
تصدير البيانات إلى ملفات للمستخدمين المصرح لهم.
توفير البيانات عبر API
نقل السجلات إلى تطبيقات خارجية ضمن النطاق وقواعد الأمان.
قائمة انتظار المهام وتتبع الحالة
إظهار المهام المنتظرة والجارية والمكتملة والمتعثرة.
سجلات الأخطاء وإعادة المحاولة
تسجيل انتهاء المهلة وتغير التنسيق ومشكلات الاتصال؛ وإعادة المحاولة بصورة مضبوطة.
حِمل المصدر وحدود السرعة
تنفيذ الطلبات باحترام حدود السرعة والتزامن والفواصل المناسبة المحددة.
الإشعارات والتنبيهات
إشعارات للمسؤول عند فشل المهام أو حدوث تغييرات مهمة.
فصل مساحات العمل
فصل المصادر ومجالات البيانات بحسب العميل أو الفريق أو المشروع.
صلاحيات المستخدمين والأدوار
صلاحيات إدارة المصادر وتشغيل المهام وعرض البيانات وتصديرها.
سجل العمليات والتدقيق
تسجيل التغييرات المهمة وإجراءات المستخدمين وعمليات تشغيل المهام.
تقارير المصادر وجودة البيانات
قياسات معدل النجاح وعدد السجلات وأنواع الأخطاء واكتمال البيانات.
تخصيص العلامة التجارية
إعدادات الشعار والألوان واسم المنصة والنطاق ومظهر الواجهة.
سياسات الاحتفاظ والحذف
تحديد فترات الاحتفاظ والحذف بحسب المصدر والعميل ومجموعة البيانات.

نموذج العلامة البيضاء

حق استخدام دائم لإصدار البرنامج لعلامة تجارية واحدة وتثبيت إنتاجي رئيسي واحد، وفقًا لما يحدده العقد. يجوز لصاحب الترخيص تقديم الخدمة لعدد غير محدود من العملاء النهائيين بعلامته التجارية الخاصة؛ مع مراعاة حدود البنية التحتية وخدمات الأطراف الثالثة. تظل الشيفرة المصدرية وحقوق الملكية الفكرية ملكًا لـ KMKSOFT، ولا يشمل الترخيص نقل الشيفرة. يشمل النطاق المحدد في العقد التثبيت الأولي، وتهيئة العلامة التجارية الأولية، والتدريب الأساسي، والدعم الفني القياسي خلال أول 12 شهرًا. وقد تُحتسب الاستضافة وموفرو البروكسي/البيانات الخارجية ورسوم استخدام API والتخزين والتكاملات المخصصة بصورة منفصلة. وبعد أول 12 شهرًا، يتم الاتفاق بشكل منفصل على الصيانة والدعم وتحديثات الإصدارات.

المواصفات الفنية

لوحة الإدارة والوصول
لوحة إدارة متوافقة مع الويب والأجهزة المحمولة؛ مع وصول قائم على الأدوار وجلسات آمنة وتسجيل للعمليات المهمة.
طبقات المهام والبيانات
مجدول للمهام وقائمة انتظار وروابط المصادر وقواعد التحليل وطبقات تخزين البيانات.
حدود السرعة وإعادة المحاولة
حدود لسرعة الطلبات والتزامن لكل مصدر؛ مع التراجع وإعادة المحاولة بصورة مضبوطة عند حدوث خطأ.
تقييم الاستخدام القانوني
تقييم الاستخدام في ضوء robots.txt وشروط الخدمة وأذونات الوصول والملكية الفكرية ومتطلبات حماية البيانات.
المصادر التي تتطلب تسجيل الدخول
يمكن ربط المصادر التي تتطلب تسجيل الدخول باستخدام حساب مستخدم مصرح به، وبما يتوافق مع شروط استخدام المصدر المعني.
الأساليب غير المشمولة
لا يشمل النطاق القياسي تجاوز CAPTCHA أو تدابير مكافحة الروبوتات أو ضوابط الوصول، ولا جمع البيانات الشخصية دون إذن.
تغييرات المصادر
قد تتطلب التغييرات في بنية صفحات المصدر صيانة قواعد التحليل؛ ولا يُضمن استمرار البيانات دون انقطاع لجميع المواقع.
التخزين وعزل البيانات
تُضبط قواعد التخزين والنسخ الاحتياطي والاحتفاظ بالسجلات والحذف وعزل البيانات وفقًا للعقد.
المعالجة المدعومة بالذكاء الاصطناعي
لا يتوفر استخراج الحقول أو التصنيف التلقائي المدعوم بالذكاء الاصطناعي إلا إذا أُدرج ضمن نطاق المشروع وباستخدام خدمة نموذج مناسبة.
السعة وحجم العمل
يُحدد معدل الجمع وعدد المصادر وحجم العمل وحد السجلات في العقد بناءً على جدوى البنية التحتية.

تحدد هذه الوثيقة النطاق القياسي المستهدف لبيع المنتج. ويُحسم توافق المصادر والصلاحيات القانونية وأنواع البيانات وحجم العمل والسعة والتكاملات ومعايير القبول في العرض والعقد النهائي؛ ولا يُتعهد بإمكانية الوصول غير المشروط إلى كل مصدر.

التسليم والقبول

لوحة التحكم ومجموعات الصلاحيات
التحقق من الوصول إلى لوحة الإدارة ذات العلامة التجارية ومجموعات الصلاحيات.
اختبارات المهام والجدولة
اختبار إنشاء المهام وتشغيلها وفق جدول باستخدام مصادر نموذجية مختارة ومسموح بالوصول إليها في العقد.
اختبارات إعداد البيانات
عرض مطابقة الحقول والتنظيف والتحقق وفحص السجلات المكررة لمصدر نموذجي واحد على الأقل.
اختبارات التغييرات والأخطاء والمخرجات
التحقق من اكتشاف التغييرات وتسجيل الأخطاء وإعادة المحاولة وملف المخرجات والوصول عبر API ضمن سيناريوهات محددة.
فصل البيانات والتدقيق
التحقق من فصل البيانات بين المستخدمين وصلاحيات التصدير وسجل التدقيق.
التدريب والقبول
استكمال التدريب الأساسي للمستخدمين وملاحظات الاستخدام التقنية ومحضر القبول.
جدول التسليم
يُتفق على العدد النهائي للمصادر وحِمل العمل والمدة وجدول التسليم في ملحق العرض/العقد.

شروط الترخيص

رسوم الترخيص
5,800 USD — ترخيص برنامج يُدفع مرة واحدة.
طبيعة الترخيص
حق استخدام دائم لإصدار البرنامج، يُدفع مرة واحدة، لعلامة تجارية واحدة وتثبيت رئيسي واحد.
نطاق المنتج
وظائف جمع البيانات وتنظيفها وتتبع التغييرات وتصديرها أجزاء من برنامج متكامل واحد؛ وليست وحدات تُباع بشكل منفصل.
العملاء النهائيون
يجوز لصاحب الترخيص تقديم الخدمة لعدد غير محدود من العملاء النهائيين بعلامته التجارية الخاصة؛ ولا تفرض KMKSOFT رسوم ترخيص برنامج لكل عميل نهائي. وتظل تكاليف البنية التحتية والخدمات الخارجية وحدود السعة سارية بصورة منفصلة.
الشيفرة المصدرية
تظل الشيفرة المصدرية وحقوق الملكية الفكرية ملكًا لـ KMKSOFT؛ ولا يشمل الترخيص نقل الشيفرة.
الدعم الفني
يشمل النطاق خلال أول 12 شهرًا التثبيت الأولي وتهيئة العلامة التجارية الأولية والتدريب الأساسي والدعم الفني القياسي. وبعد أول 12 شهرًا، يتم الاتفاق بشكل منفصل على الصيانة والدعم وتحديثات الإصدارات.
التكاليف الإضافية
قد تُحتسب الاستضافة وتخزين البيانات وموفرو البروكسي/البيانات الخارجية ورسوم استخدام API والتكاملات المخصصة والتطوير الإضافي بصورة منفصلة.
جدول التسليم
يُحدد العدد النهائي للمصادر وحِمل العمل ومدة التسليم في العرض/العقد بعد التحقق من الوصول إلى المصادر والنطاق التقني. العملية المقترحة: تحديد الاحتياجات والمصادر المستهدفة → تقييم حقوق الوصول والاستخدام → توضيح النطاق وسيناريوهات القبول → إعداد White Label → تهيئة المصادر وحقول البيانات → الاختبار والتدريب والتسليم.

التسليم والامتثال

تحدد هذه الوثيقة النطاق القياسي المستهدف لبيع المنتج. ويُحسم توافق المصادر والصلاحيات القانونية وأنواع البيانات وحجم العمل والسعة والتكاملات ومعايير القبول في العرض والعقد النهائي؛ ولا يُتعهد بإمكانية الوصول غير المشروط إلى كل مصدر.