Επισκόπηση
Οι συνθήκες ανταγωνισμού, οι τιμές, οι κατάλογοι προϊόντων, οι ειδησεογραφικές ροές και οι δημόσιες πληροφορίες κλάδων αλλάζουν διαρκώς. Η χειροκίνητη παρακολούθηση απαιτεί χρόνο και μπορεί να οδηγήσει σε ελλιπή δεδομένα. Η Πλατφόρμα Συλλογής Δεδομένων Ιστού στοχεύει στη συγκέντρωση πληροφοριών από κατάλληλες πηγές μέσω επαναλαμβανόμενων εργασιών και στην παροχή συνεπών αποτελεσμάτων στις ομάδες δεδομένων. Οι οργανισμοί μπορούν να ορίζουν διευθύνσεις πηγών και κανόνες αντιστοίχισης πεδίων, να καθορίζουν τη συχνότητα συλλογής, να παρακολουθούν τα αποτελέσματα εργασιών, να εντοπίζουν διπλότυπες εγγραφές και να μεταφέρουν τα αποτελέσματα σε αναλυτικά ή λειτουργικά συστήματα. Η χρήση πρέπει να συμμορφώνεται με τους όρους των πηγών και τη νόμιμη εξουσιοδότηση· η πλατφόρμα δεν υπόσχεται παράκαμψη περιορισμών πρόσβασης ιστοτόπων ή μη εξουσιοδοτημένη συλλογή προσωπικών δεδομένων. Πρόταση αξίας: Συστηματοποιήστε τις επαναλαμβανόμενες εργασίες συλλογής δεδομένων, ενημερωθείτε για τις αλλαγές και υποστηρίξτε τις διαδικασίες λήψης αποφάσεων με ενημερωμένα και ιχνηλάσιμα δεδομένα. Κύρια πλεονεκτήματα • Ενιαία πλατφόρμα: Πηγές, εργασίες συλλογής, εγγραφές και αποτελέσματα σε έναν πίνακα ελέγχου. • Ενημερωμένες πληροφορίες: Μειώστε τον φόρτο χειροκίνητων ελέγχων με προγραμματισμένη συλλογή και παρακολούθηση αλλαγών. • Καθαρότερα δεδομένα: Κανονικοποίηση πεδίων, επικύρωση και έλεγχοι διπλότυπων εγγραφών. • Ευέλικτη χρήση: Σενάρια ηλεκτρονικού εμπορίου, λιανικής, χρηματοοικονομικών, μέσων ενημέρωσης και τεχνολογίας. • White Label: Προσφέρετε υπηρεσίες συλλογής δεδομένων με τη δική σας επωνυμία και το δικό σας domain. Σενάρια χρήσης ανά κλάδο • Ηλεκτρονικό εμπόριο: Σύνολα δεδομένων κατάλληλα για σύγκριση επιτρεπόμενων καταλόγων προϊόντων, μεταβολών τιμών και χαρακτηριστικών προϊόντων. • Λιανική: Παρακολούθηση ανακοινώσεων καταστημάτων και προσφορών, δημόσιων δεδομένων καταλόγων και τάσεων της αγοράς. • Χρηματοοικονομικά: Συγκέντρωση δημοσιευμένων επιτοκίων, ανακοινώσεων και δεικτών αγοράς από αδειοδοτημένες ή δημόσιες πηγές χρηματοοικονομικών πληροφοριών. • Μέσα ενημέρωσης: Κεντρική παρακολούθηση RSS, δημόσιων δημοσιεύσεων, ετικετών θεμάτων και ενημερώσεων περιεχομένου. • Τεχνολογία: Παρακολούθηση δημόσιων πληροφοριών για εκδόσεις προϊόντων, τεχνικής τεκμηρίωσης και ειδήσεων του κλάδου. Τοποθέτηση προϊόντος Το Y11-002 Πλατφόρμα Συλλογής Δεδομένων Ιστού εστιάζει στη νόμιμη απόκτηση πληροφοριών από εξωτερικές διαδικτυακές πηγές, στη διαχείριση πηγών και στην προετοιμασία δεδομένων. Το Y11-001 Πλατφόρμα Επιχειρηματικής Ευφυΐας και Πίνακα Ελέγχου οπτικοποιεί δεδομένα· το Y11-003 Λογισμικό Ενοποίησης Δεδομένων και ETL διαχειρίζεται τη ροή και τον μετασχηματισμό δεδομένων μεταξύ συστημάτων· το Y11-004 Λογισμικό Αναλυτικής Πελατών και Πωλήσεων εξειδικεύεται στους πελάτες και στην απόδοση πωλήσεων. Οι λειτουργίες συλλογής, καθαρισμού, παρακολούθησης αλλαγών και εξαγωγής δεδομένων του Y11-002 δεν πωλούνται ως ξεχωριστές ενότητες. Συχνές ερωτήσεις Μπορούν να συλλεχθούν δεδομένα από κάθε ιστότοπο; Όχι. Αξιολογούνται η τεχνική προσβασιμότητα της πηγής, οι όροι χρήσης και η νόμιμη εξουσιοδότηση. Μπορούν να παρακολουθούνται οι τιμές ανταγωνιστών; Μπορεί να ρυθμιστεί παρακολούθηση για δεδομένα που ορίζονται στη σύμβαση και προέρχονται από νόμιμες πηγές στις οποίες υπάρχει εξουσιοδοτημένη πρόσβαση. Ποια είναι η συχνότητα ενημέρωσης; Καθορίζεται σύμφωνα με τους όρους της πηγής, τα όρια ταχύτητας και τη δυναμικότητα της εγκατάστασης. Μπορούν να ληφθούν δεδομένα μέσω Excel ή API; Ναι, οι εξουσιοδοτημένες εξαγωγές και η μεταφορά μέσω API παρέχονται εντός του συμφωνημένου συμβατικού πεδίου εφαρμογής. Δημιουργεί αυτόματα κατηγορίες η τεχνητή νοημοσύνη; Η ταξινόμηση με AI εξαρτάται από το μοντέλο και την υπηρεσία που ορίζονται προαιρετικά στο πεδίο εφαρμογής· υποστηρίζεται η τυπική χειροκίνητη ταξινόμηση ή η ταξινόμηση βάσει κανόνων. Μπορώ να προσφέρω την υπηρεσία στους πελάτες μου; Ναι· μπορείτε να προσφέρετε την υπηρεσία με τη δική σας επωνυμία, με την επιφύλαξη εξωτερικών χρεώσεων υπηρεσιών και περιορισμών δυναμικότητας. Παραδίδεται ο πηγαίος κώδικας; Όχι. Παρέχεται άδεια διαρκούς χρήσης· ο πηγαίος κώδικας και τα δικαιώματα πνευματικής ιδιοκτησίας παραμένουν στην KMKSOFT.
Ταυτότητα προϊόντος
- Κωδικός προϊόντος
- Y11-002
- Διεθνής ονομασία προϊόντος
- Web Data Collection Platform
- Κύρια κατηγορία
- Ανάλυση δεδομένων και αναφορές
- Τύπος προϊόντος
- Ενιαίο, ολοκληρωμένο λογισμικό White Label
- Κλάδοι
- Ηλεκτρονικό εμπόριο, λιανική, χρηματοοικονομικά, μέσα ενημέρωσης, τεχνολογία
- Πεδίο εφαρμογής άδειας
- Μία επωνυμία / μία κύρια εγκατάσταση παραγωγής· χωρίς χρέωση άδειας KMK ανά τελικό πελάτη
- Φιλοξενία
- KMKCloud ή κατάλληλη υποδομή· χρεώνεται χωριστά.
- Τυπική τεχνική υποστήριξη
- 12 μήνες
Τυπικές λειτουργίες
- Διαχείριση διαδικτυακών πηγών
- Αποθήκευση επιτρεπόμενων URL-στόχων, domain, τύπου δεδομένων, υπευθύνου και σημειώσεων πρόσβασης.
- Εργασίες συλλογής
- Εφάπαξ ή επαναλαμβανόμενες εργασίες λήψης δεδομένων, συνδεδεμένες με πηγή και σχήμα δεδομένων.
- Προγραμματισμός και περιοδικότητα
- Εκτέλεση εργασιών σε καθορισμένα χρονικά διαστήματα και παρακολούθηση της κατάστασης της τελευταίας εκτέλεσης.
- Ανάλυση σελίδων HTML
- Εξαγωγή τίτλων, συνδέσμων, τιμών, περιγραφών και δομημένων πεδίων από κατάλληλες σελίδες.
- Σελιδοποίηση και παρακολούθηση συνδέσμων
- Συλλογή δεδομένων από σελίδες λίστας και λεπτομερειών, όταν το επιτρέπουν οι κανόνες της πηγής.
- Συνδέσεις API και ροών δεδομένων
- Χρήση εξουσιοδοτημένων API, RSS και παρόμοιων αναγνώσιμων από μηχανή πηγών.
- Πρότυπα αντιστοίχισης πεδίων
- Αντιστοίχιση των δεδομένων πηγής σε πεδία-στόχους και τύπους δεδομένων.
- Καθαρισμός δεδομένων
- Κανονικοποίηση κενών πεδίων, μορφών γραφής, ημερομηνιών, αριθμών και νομισματικών μορφών.
- Έλεγχος διπλότυπων εγγραφών
- Επισήμανση ή συγχώνευση επαναλήψεων βάσει πεδίων και κλειδιών αντιστοίχισης.
- Παρακολούθηση αλλαγών
- Σύγκριση διαφορών τιμών, αποθέματος, κειμένου ή εγγραφών με προηγούμενα αποτελέσματα συλλογής.
- Κανόνες επικύρωσης δεδομένων
- Έλεγχοι υποχρεωτικών πεδίων, αναμενόμενης μορφής, εύρους τιμών και συνέπειας.
- Κατηγοριοποίηση και επισήμανση
- Ταξινόμηση συνόλων δεδομένων βάσει κατηγορίας, θέματος, επωνυμίας ή καθορισμένων πεδίων.
- Αναζήτηση και σύνθετα φίλτρα
- Φιλτράρισμα εγγραφών βάσει πηγής, ημερομηνίας, κατάστασης, κατηγορίας και τιμών πεδίων.
- Προεπισκόπηση και επεξεργασία δεδομένων
- Εξέταση των συλλεγμένων εγγραφών σε πίνακα και πραγματοποίηση εξουσιοδοτημένων διορθώσεων.
- Εξαγωγές CSV και Excel
- Εξαγωγή δεδομένων σε αρχεία για εξουσιοδοτημένους χρήστες.
- Παροχή δεδομένων μέσω API
- Μεταφορά εγγραφών σε εξωτερικές εφαρμογές, σύμφωνα με το πεδίο εφαρμογής και τους κανόνες ασφαλείας.
- Ουρά εργασιών και παρακολούθηση κατάστασης
- Εμφάνιση εργασιών σε αναμονή, σε εξέλιξη, ολοκληρωμένων και αποτυχημένων.
- Καταγραφές σφαλμάτων και επανάληψη
- Καταγραφή χρονικών υπερβάσεων, αλλαγών μορφής και προβλημάτων σύνδεσης· ελεγχόμενη επανάληψη.
- Φόρτος πηγών και όρια ταχύτητας
- Εκτέλεση αιτημάτων με σεβασμό στα καθορισμένα όρια ταχύτητας, ταυτόχρονης εκτέλεσης και κατάλληλων χρονικών διαστημάτων.
- Ειδοποιήσεις και προειδοποιήσεις
- Ειδοποιήσεις διαχειριστών για αποτυχίες εργασιών και σημαντικές αλλαγές.
- Διαχωρισμός χώρων εργασίας
- Διαχωρισμός πηγών και δεδομένων ανά πελάτη, ομάδα και έργο.
- Δικαιώματα χρηστών και ρόλων
- Δικαιώματα διαχείρισης πηγών, εκτέλεσης εργασιών, προβολής δεδομένων και εξαγωγής.
- Ιστορικό ενεργειών και έλεγχος
- Καταγραφή κρίσιμων αλλαγών, ενεργειών χρηστών και εκτελέσεων εργασιών.
- Αναφορές πηγών και ποιότητας δεδομένων
- Μετρήσεις ποσοστού επιτυχίας, αριθμού εγγραφών, τύπων σφαλμάτων και πληρότητας δεδομένων.
- Προσαρμογή επωνυμίας
- Ρυθμίσεις λογότυπου, χρωμάτων, ονόματος πλατφόρμας, domain και εμφάνισης διεπαφής.
- Πολιτικές διατήρησης και διαγραφής
- Καθορισμός περιόδων διατήρησης/διαγραφής ανά πηγή, πελάτη και σύνολο δεδομένων.
Μοντέλο λειτουργίας White Label
Δικαίωμα διαρκούς χρήσης της έκδοσης λογισμικού για μία επωνυμία και μία κύρια εγκατάσταση παραγωγής, όπως ορίζεται στη σύμβαση. Ο κάτοχος της άδειας μπορεί να εξυπηρετεί απεριόριστο αριθμό τελικών πελατών με τη δική του επωνυμία, με την επιφύλαξη των περιορισμών υποδομής και υπηρεσιών τρίτων. Ο πηγαίος κώδικας και τα δικαιώματα πνευματικής ιδιοκτησίας παραμένουν στην KMKSOFT· η μεταβίβαση κώδικα δεν περιλαμβάνεται στην άδεια. Η αρχική εγκατάσταση, η αρχική προσαρμογή επωνυμίας, η βασική εκπαίδευση και οι πρώτοι 12 μήνες τυπικής τεχνικής υποστήριξης περιλαμβάνονται στο πεδίο εφαρμογής που ορίζεται στη σύμβαση. Η φιλοξενία, οι υπηρεσίες proxy/εξωτερικών παρόχων δεδομένων, οι χρεώσεις χρήσης API, η αποθήκευση και οι προσαρμοσμένες ενοποιήσεις ενδέχεται να χρεώνονται χωριστά. Μετά τους πρώτους 12 μήνες, η συντήρηση, η υποστήριξη και οι ενημερώσεις εκδόσεων συμφωνούνται χωριστά.
Τεχνικές προδιαγραφές
- Πίνακας διαχείρισης και πρόσβαση
- Διαδικτυακός, προσαρμοζόμενος σε κινητές συσκευές πίνακας διαχείρισης· πρόσβαση βάσει ρόλων, ασφαλείς συνεδρίες και καταγραφή κρίσιμων ενεργειών.
- Επίπεδα εργασιών και δεδομένων
- Προγραμματιστής εργασιών, ουρά, συνδέσεις πηγών, κανόνες ανάλυσης και επίπεδα αποθήκευσης δεδομένων.
- Όρια ταχύτητας και επαναλήψεις
- Όρια ταχύτητας αιτημάτων/ταυτόχρονης εκτέλεσης ανά πηγή· αναμονή σε περίπτωση σφάλματος και ελεγχόμενη επανάληψη.
- Αξιολόγηση νόμιμης χρήσης
- Αξιολόγηση χρήσης με βάση το robots.txt, τους όρους παροχής υπηρεσιών, τις άδειες πρόσβασης, την πνευματική ιδιοκτησία και τους όρους προστασίας δεδομένων.
- Πηγές που απαιτούν σύνδεση
- Η σύνδεση σε πηγές που απαιτούν σύνδεση μπορεί να γίνει μόνο με εξουσιοδοτημένο λογαριασμό χρήστη και σύμφωνα με τους όρους χρήσης της εκάστοτε πηγής.
- Μέθοδοι εκτός πεδίου εφαρμογής
- Η παράκαμψη CAPTCHA, μέτρων anti-bot ή ελέγχων πρόσβασης και η μη εξουσιοδοτημένη συλλογή προσωπικών δεδομένων δεν περιλαμβάνονται στο τυπικό πεδίο εφαρμογής.
- Αλλαγές πηγών
- Οι αλλαγές στη δομή σελίδων πηγών ενδέχεται να απαιτήσουν συντήρηση των κανόνων ανάλυσης· δεν παρέχεται εγγύηση αδιάλειπτης συλλογής δεδομένων για όλους τους ιστοτόπους.
- Αποθήκευση και απομόνωση δεδομένων
- Οι κανόνες αποθήκευσης, αντιγράφων ασφαλείας, διατήρησης αρχείων καταγραφής, διαγραφής και απομόνωσης δεδομένων ρυθμίζονται σύμφωνα με τη σύμβαση.
- Λειτουργίες με υποστήριξη τεχνητής νοημοσύνης
- Η εξαγωγή πεδίων ή η αυτόματη κατηγοριοποίηση με AI παρέχεται μόνο εφόσον περιλαμβάνεται στο πεδίο εφαρμογής του έργου και μέσω κατάλληλης υπηρεσίας μοντέλου.
- Δυναμικότητα και φόρτος εργασίας
- Η συχνότητα συλλογής, ο αριθμός πηγών, ο φόρτος εργασίας και το όριο εγγραφών καθορίζονται στη σύμβαση βάσει αξιολόγησης της υποδομής.
Το παρόν έγγραφο περιγράφει το προβλεπόμενο τυπικό πεδίο διάθεσης του προϊόντος. Η συμβατότητα των πηγών, η νόμιμη εξουσιοδότηση, οι τύποι δεδομένων, ο όγκος εργασιών, η δυναμικότητα, οι ενοποιήσεις και τα κριτήρια αποδοχής οριστικοποιούνται στην προσφορά και στην τελική σύμβαση· δεν παρέχεται δέσμευση για ανεπιφύλακτη πρόσβαση σε κάθε πηγή.
Παράδοση και αποδοχή
- Πίνακας και ομάδες δικαιωμάτων
- Επαληθεύεται η πρόσβαση στον επώνυμο πίνακα διαχείρισης και στις ομάδες δικαιωμάτων.
- Δοκιμές εργασιών και προγραμματισμού
- Δοκιμάζονται η δημιουργία εργασιών και η προγραμματισμένη εκτέλεση με ενδεικτικές πηγές που επιλέγονται στη σύμβαση και διαθέτουν άδεια πρόσβασης.
- Δοκιμές προετοιμασίας δεδομένων
- Επιδεικνύονται αντιστοίχιση πεδίων, καθαρισμός, επικύρωση και έλεγχος διπλότυπων εγγραφών από τουλάχιστον μία ενδεικτική πηγή.
- Δοκιμές αλλαγών, σφαλμάτων και εξαγωγής
- Επαληθεύονται ο εντοπισμός αλλαγών, η καταγραφή σφαλμάτων, η επανάληψη, το αρχείο εξαγωγής και η πρόσβαση API σε καθορισμένα σενάρια.
- Διαχωρισμός δεδομένων και έλεγχος
- Ελέγχονται ο διαχωρισμός δεδομένων μεταξύ χρηστών, τα δικαιώματα εξαγωγής και η καταγραφή ελέγχου.
- Εκπαίδευση και αποδοχή
- Ολοκληρώνονται η βασική εκπαίδευση χρηστών, οι τεχνικές σημειώσεις χρήσης και το πρακτικό αποδοχής.
- Χρονοδιάγραμμα παράδοσης
- Ο ακριβής αριθμός πηγών, ο φόρτος εργασίας, η διάρκεια και το χρονοδιάγραμμα παράδοσης συμφωνούνται στο παράρτημα της προσφοράς/σύμβασης.
Όροι άδειας και εμπορικοί όροι
- Τίμημα άδειας
- 5.800 USD — εφάπαξ άδεια λογισμικού.
- Χαρακτήρας άδειας
- Εφάπαξ δικαίωμα διαρκούς χρήσης της έκδοσης για μία επωνυμία και μία κύρια εγκατάσταση.
- Πεδίο προϊόντος
- Οι λειτουργίες συλλογής, καθαρισμού, παρακολούθησης αλλαγών και εξαγωγής δεδομένων αποτελούν μέρος ενός ενιαίου ολοκληρωμένου λογισμικού· δεν πωλούνται ως ξεχωριστές ενότητες.
- Τελικοί πελάτες
- Ο κάτοχος της άδειας μπορεί να εξυπηρετεί απεριόριστο αριθμό τελικών πελατών με τη δική του επωνυμία· η KMKSOFT δεν χρεώνει τέλος άδειας λογισμικού ανά τελικό πελάτη. Εξακολουθούν να ισχύουν οι περιορισμοί υποδομής, οι χρεώσεις εξωτερικών υπηρεσιών και τα όρια δυναμικότητας.
- Πηγαίος κώδικας
- Ο πηγαίος κώδικας και τα δικαιώματα πνευματικής ιδιοκτησίας παραμένουν στην KMKSOFT· η μεταβίβαση κώδικα δεν περιλαμβάνεται στην άδεια.
- Τεχνική υποστήριξη
- Οι πρώτοι 12 μήνες περιλαμβάνουν την αρχική εγκατάσταση, την αρχική προσαρμογή επωνυμίας, τη βασική εκπαίδευση και την τυπική τεχνική υποστήριξη. Μετά τους πρώτους 12 μήνες, η συντήρηση, η υποστήριξη και οι ενημερώσεις εκδόσεων συμφωνούνται χωριστά.
- Πρόσθετες δαπάνες
- Η φιλοξενία, η αποθήκευση δεδομένων, οι υπηρεσίες proxy/εξωτερικών παρόχων δεδομένων, οι χρεώσεις χρήσης API, οι προσαρμοσμένες ενοποιήσεις και οι πρόσθετες εργασίες ανάπτυξης ενδέχεται να χρεώνονται χωριστά.
- Χρονοδιάγραμμα παράδοσης
- Ο ακριβής αριθμός πηγών, ο φόρτος εργασίας και ο χρόνος παράδοσης καθορίζονται στην προσφορά/σύμβαση αφού επιβεβαιωθούν η πρόσβαση στις πηγές και το τεχνικό πεδίο εφαρμογής. Προτεινόμενη διαδικασία: Καθορισμός αναγκών και πηγών-στόχων → αξιολόγηση δικαιωμάτων πρόσβασης και χρήσης → οριστικοποίηση πεδίου εφαρμογής και σεναρίων αποδοχής → εγκατάσταση White Label → ρύθμιση πηγών και πεδίων δεδομένων → δοκιμές, εκπαίδευση και παράδοση.
Παράδοση και συμμόρφωση
Το παρόν έγγραφο περιγράφει το προβλεπόμενο τυπικό πεδίο διάθεσης του προϊόντος. Η συμβατότητα των πηγών, η νόμιμη εξουσιοδότηση, οι τύποι δεδομένων, ο όγκος εργασιών, η δυναμικότητα, οι ενοποιήσεις και τα κριτήρια αποδοχής οριστικοποιούνται στην προσφορά και στην τελική σύμβαση· δεν παρέχεται δέσμευση για ανεπιφύλακτη πρόσβαση σε κάθε πηγή.