Übersicht
Wettbewerbsbedingungen, Preise, Produktkataloge, Nachrichten-Feeds und öffentlich zugängliche Brancheninformationen ändern sich ständig. Die manuelle Überwachung ist zeitaufwendig und kann zu unvollständigen Datensätzen führen. Die Web-Datenerfassungsplattform unterstützt die wiederholbare Zusammenstellung von Informationen aus geeigneten Quellen und stellt Datenteams konsistente Ergebnisse bereit. Unternehmen können Quelladressen und Feldzuordnungsregeln festlegen, die Erfassungshäufigkeit bestimmen, Aufgabenergebnisse überwachen, doppelte Datensätze entfernen und Ausgaben an Analyse- oder Betriebssysteme übertragen. Die Nutzung muss den Quellenbedingungen und der rechtlichen Berechtigung entsprechen; die Plattform verspricht weder die Umgehung von Zugriffsbeschränkungen einer Website noch die unbefugte Erfassung personenbezogener Daten. Mehrwert: Systematisieren Sie wiederkehrende Datenerfassungsaufgaben, bleiben Sie über Änderungen informiert und unterstützen Sie Entscheidungsprozesse mit aktuellen, nachvollziehbaren Daten. Wichtigste Vorteile • Eine Plattform: Quellen, Erfassungsaufgaben, Datensätze und Ausgaben in einer zentralen Oberfläche. • Aktuelle Informationen: Geplante Erfassung und Änderungsverfolgung reduzieren den Aufwand für manuelle Kontrollen. • Bessere Datenqualität: Feldnormalisierung, Validierung und Prüfung auf doppelte Datensätze. • Flexible Einsatzmöglichkeiten: Anwendungsszenarien in E-Commerce, Einzelhandel, Finanzwesen, Medien und Technologie. • White Label: Angebot von Datenerfassungsdiensten unter Ihrer eigenen Marke und Domain. Branchenspezifische Anwendungsszenarien • E-Commerce: Datensätze aus zulässigen Produktkatalogen, Preisänderungen und Produkteigenschaften, die sich für Vergleiche eignen. • Einzelhandel: Überwachung von Filial- und Kampagnenankündigungen, offenen Katalogdaten und Markttrends. • Finanzwesen: Zusammenstellung veröffentlichter Zinssätze, Mitteilungen und Marktindikatoren aus lizenzierten oder offenen Finanzinformationsquellen. • Medien: Zentrale Überwachung von RSS-Feeds, offenen Publikationen, Themen-Tags und Inhaltsaktualisierungen. • Technologie: Überwachung öffentlich zugänglicher Produktversionen, technischer Dokumentation und Branchenmeldungen. Produktpositionierung Y11-002 Web-Datenerfassungsplattform konzentriert sich auf die rechtmäßige Erfassung von Informationen aus externen Webquellen, die Quellenverwaltung und die Datenaufbereitung. Y11-001 Business-Intelligence- und Dashboard-Plattform visualisiert Daten; Y11-003 Datenintegrations- und ETL-Software verwaltet Datenflüsse und -transformationen zwischen Systemen; Y11-004 Kunden- und Vertriebsanalysesoftware ist auf Kunden- und Vertriebsleistung spezialisiert. Die Funktionen von Y11-002 zur Datenerfassung, Bereinigung, Änderungsverfolgung und zum Export sind keine separat verkauften Module. Häufig gestellte Fragen Können Daten von jeder Website abgerufen werden? Nein. Die technische Erreichbarkeit der Quelle, ihre Nutzungsbedingungen und die rechtliche Berechtigung werden geprüft. Können Preise von Wettbewerbern überwacht werden? Für rechtmäßige und zugängliche Quellen kann die Überwachung der im Vertrag festgelegten Daten eingerichtet werden. Wie häufig werden die Daten aktualisiert? Das richtet sich nach den Bedingungen der Quelle, den Ratenbegrenzungen und der Installationskapazität. Können Daten über Excel oder eine API abgerufen werden? Ja. Autorisierte Ausgaben und API-Übertragungen werden im vertraglich vereinbarten Umfang bereitgestellt. Erstellt künstliche Intelligenz automatisch Kategorien? Die AI-Klassifizierung hängt von den optional festgelegten Modellen und Diensten ab; eine standardmäßige manuelle beziehungsweise regelbasierte Klassifizierung wird unterstützt. Kann ich die Lösung meinen Kunden als Dienstleistung anbieten? Ja. Sie können den Dienst unter Ihrer eigenen Marke anbieten; externe Servicekosten und Kapazitätsgrenzen gelten zusätzlich. Wird der Quellcode übergeben? Nein. Es wird eine unbefristete Nutzungslizenz erteilt; Quellcode und geistige Eigentumsrechte verbleiben bei KMKSOFT.
Produktidentität
- Produktcode
- Y11-002
- Globaler Produktname
- Web Data Collection Platform
- Hauptkategorie
- Datenanalyse und Berichtswesen
- Produkttyp
- Einheitliche, integrierte White-Label-Software
- Branchen
- E-Commerce, Einzelhandel, Finanzwesen, Medien, Technologie
- Lizenzumfang
- Eine Marke / eine Hauptproduktionsinstallation; keine KMK-Lizenzgebühr pro Endkunde
- Hosting
- KMKCloud oder geeignete Infrastruktur; wird separat berechnet.
- Technischer Support
- 12 Monate
Standardfunktionen
- Verwaltung von Webquellen
- Zulässige Ziel-URLs, Domains, Datentypen, Verantwortliche und Zugriffshinweise speichern.
- Erfassungsaufgaben
- Einmalige oder wiederkehrende Datenerfassungsaufgaben auf Grundlage von Quellen und Datenschemata.
- Zeitplanung und Intervalle
- Aufgaben in festgelegten Intervallen ausführen und den Status des letzten Durchlaufs überwachen.
- HTML-Seitenanalyse
- Titel, Links, Preise, Beschreibungen und strukturierte Felder aus geeigneten Seiten extrahieren.
- Seitennavigation und Linkverfolgung
- Daten auf Listen- und Detailseiten erfassen, soweit die Quellenregeln dies zulassen.
- API- und Datenfeed-Anbindungen
- Autorisierte APIs, RSS und ähnliche maschinenlesbare Quellen verwenden.
- Vorlagen für Feldzuordnungen
- Quelldaten Zielfeldern und Datentypen zuordnen.
- Datenbereinigung
- Leere Felder sowie Schreibweisen, Datums-, Zahlen- und Währungsformate normalisieren.
- Prüfung auf doppelte Datensätze
- Duplikate anhand von Feldern und Zuordnungsschlüsseln markieren oder zusammenführen.
- Änderungsverfolgung
- Unterschiede bei Preisen, Lagerbestand, Texten oder Datensätzen mit früheren Erfassungsergebnissen vergleichen.
- Datenvalidierungsregeln
- Pflichtfelder, erwartete Formate, Wertebereiche und Konsistenz prüfen.
- Kategorisierung und Kennzeichnung
- Datensätze nach Kategorien, Themen, Marken oder festgelegten Feldern klassifizieren.
- Suche und erweiterte Filter
- Datensätze nach Quelle, Datum, Status, Kategorie und Feldwerten filtern.
- Datenvorschau und Bearbeitung
- Erfasste Datensätze in Tabellen prüfen und erforderliche Korrekturen mit entsprechender Berechtigung vornehmen.
- CSV- und Excel-Ausgaben
- Dateibasierter Datenexport für autorisierte Benutzer.
- Datenbereitstellung über API
- Datensätze unter Einhaltung von Umfang und Sicherheitsregeln an externe Anwendungen übertragen.
- Aufgabenwarteschlange und Statusverfolgung
- Ausstehende, laufende, abgeschlossene und fehlgeschlagene Aufgaben sichtbar machen.
- Fehlerprotokolle und Wiederholungsversuche
- Zeitüberschreitungen, Formatänderungen und Verbindungsprobleme protokollieren und kontrollierte Wiederholungsversuche ausführen.
- Quellenlast und Ratenbegrenzungen
- Anfragen unter Beachtung festgelegter Raten- und Parallelitätsgrenzen sowie angemessener Intervalle ausführen.
- Benachrichtigungen und Warnungen
- Administratoren über fehlgeschlagene Aufgaben und wichtige Änderungen informieren.
- Getrennte Arbeitsbereiche
- Quellen und Datenbereiche nach Kunden, Teams und Projekten trennen.
- Benutzer- und Rollenberechtigungen
- Berechtigungen für Quellenverwaltung, Aufgabenausführung, Datenansicht und Export festlegen.
- Aktivitätsverlauf und Audit
- Kritische Änderungen, Benutzeraktionen und Aufgabenausführungen protokollieren.
- Berichte zu Quellen und Datenqualität
- Erfolgsquote, Datensatzanzahl, Fehlertypen und Datenvollständigkeit auswerten.
- Markenanpassung
- Logo, Farben, Plattformname, Domain und Oberflächendarstellung konfigurieren.
- Aufbewahrungs- und Löschrichtlinien
- Aufbewahrungs- und Löschfristen nach Quelle, Kunde und Datensatz festlegen.
White-Label-Modell
Unbefristetes Nutzungsrecht an der Softwareversion für eine im Vertrag festgelegte Marke und eine Hauptproduktionsinstallation. Der Lizenznehmer kann unter seiner eigenen Marke eine unbegrenzte Zahl von Endkunden bedienen; Einschränkungen durch Infrastruktur und Drittanbieterdienste bleiben vorbehalten. Quellcode und geistige Eigentumsrechte verbleiben bei KMKSOFT; die Übertragung des Codes ist nicht in der Lizenz enthalten. Die Erstinstallation, anfängliche Markenanpassung, Grundlagenschulung und der standardmäßige technische Support für die ersten 12 Monate sind im vertraglich festgelegten Umfang enthalten. Hosting, Proxy- und externe Datenanbieter, API-Nutzungsgebühren, Speicherplatz und individuelle Integrationen können zusätzlich berechnet werden. Wartung, Support und Versionsupdates nach den ersten 12 Monaten werden gesondert vereinbart.
Technische Spezifikation
- Verwaltungsoberfläche und Zugriff
- Webbasierte, mobil optimierte Verwaltungsoberfläche mit rollenbasiertem Zugriff, sicheren Sitzungen und Protokollierung kritischer Aktionen.
- Aufgaben- und Datenschichten
- Aufgabenplanung, Warteschlange, Quellenverbindungen, Parsing-Regeln und Datenspeicherschichten.
- Ratenbegrenzungen und Wiederholungen
- Anfragegeschwindigkeits- und Parallelitätsgrenzen pro Quelle; Rücknahme bei Fehlern und kontrollierte Wiederholungsversuche.
- Prüfung der rechtmäßigen Nutzung
- Nutzung im Hinblick auf robots.txt, Nutzungsbedingungen, Zugriffsgenehmigungen, geistiges Eigentum und Datenschutz bewerten.
- Quellen mit Anmeldepflicht
- Anmeldepflichtige Quellen können nur mit einem autorisierten Benutzerkonto und gemäß den Nutzungsbedingungen der jeweiligen Quelle angebunden werden.
- Nicht abgedeckte Methoden
- Das Umgehen von CAPTCHA, Anti-Bot-Maßnahmen oder Zugriffskontrollen sowie die unbefugte Erfassung personenbezogener Daten sind nicht im Standardumfang enthalten.
- Quellenänderungen
- Änderungen an der Seitenstruktur einer Quelle können eine Wartung der Parsing-Regeln erfordern; eine unterbrechungsfreie Datenerfassung für alle Websites wird nicht garantiert.
- Speicherung und Datentrennung
- Speicherung, Backups, Protokollaufbewahrung, Löschung und Datentrennung werden gemäß Vertrag konfiguriert.
- KI-gestützte Verarbeitung
- KI-gestützte Felderkennung oder automatische Kategorisierung wird nur bereitgestellt, wenn sie im Projektumfang enthalten ist und ein geeignetes Modelldienstangebot zur Verfügung steht.
- Kapazität und Arbeitsvolumen
- Erfassungshäufigkeit, Quellenanzahl, Arbeitsvolumen und Datensatzlimit werden auf Grundlage der Infrastrukturprüfung im Vertrag festgelegt.
Dieses Dokument beschreibt den angestrebten Standardumfang des Produkts. Quellenkompatibilität, rechtliche Berechtigung, Datentypen, Arbeitsvolumen, Kapazität, Integrationen und Abnahmekriterien werden im Angebot und im endgültigen Vertrag festgelegt; ein bedingungsloser Zugriff auf jede Quelle wird nicht zugesichert.
Lieferung und Abnahme
- Oberfläche und Berechtigungsgruppen
- Zugriff auf die markierte Verwaltungsoberfläche und Berechtigungsgruppen werden geprüft.
- Aufgaben- und Zeitplantests
- Aufgabenerstellung und geplante Ausführung werden mit den im Vertrag ausgewählten Beispielen zulässiger und zugänglicher Quellen getestet.
- Datenaufbereitungstests
- Feldzuordnung, Bereinigung, Validierung und Prüfung auf doppelte Datensätze werden anhand mindestens einer Beispielquelle demonstriert.
- Tests zu Änderungen, Fehlern und Ausgaben
- Änderungserkennung, Fehlerprotokollierung, Wiederholungsversuche, Ausgabedatei und API-Zugriff werden anhand festgelegter Szenarien geprüft.
- Datentrennung und Audit
- Datentrennung zwischen Benutzern, Exportberechtigungen und Auditprotokolle werden überprüft.
- Schulung und Abnahme
- Grundlagenschulung für Benutzer, technische Nutzungshinweise und Abnahmeprotokoll werden abgeschlossen.
- Lieferzeitplan
- Endgültige Quellenanzahl, Arbeitslast, Dauer und Lieferzeitplan werden im Angebot beziehungsweise Vertragsanhang vereinbart.
Lizenzbedingungen
- Lizenzgebühr
- 5.800 USD — einmalige Softwarelizenz.
- Lizenzart
- Einmaliges, unbefristetes Nutzungsrecht an der Softwareversion für eine Marke und eine Hauptinstallation.
- Produktumfang
- Funktionen für Datenerfassung, Bereinigung, Änderungsverfolgung und Export sind Bestandteil einer integrierten Software und keine separat verkauften Module.
- Endkunden
- Der Lizenznehmer kann unter seiner eigenen Marke eine unbegrenzte Zahl von Endkunden bedienen; KMKSOFT erhebt keine Softwarelizenzgebühr pro Endkunde. Infrastruktur, externe Servicekosten und Kapazitätsgrenzen gelten zusätzlich.
- Quellcode
- Quellcode und geistige Eigentumsrechte verbleiben bei KMKSOFT; die Übertragung des Codes ist nicht in der Lizenz enthalten.
- Technischer Support
- Die Erstinstallation, anfängliche Markenanpassung, Grundlagenschulung und der standardmäßige technische Support sind für die ersten 12 Monate enthalten. Wartung, Support und Versionsupdates nach den ersten 12 Monaten werden gesondert vereinbart.
- Zusätzliche Kosten
- Hosting, Datenspeicherung, Proxy- und externe Datenanbieter, API-Nutzungsgebühren, individuelle Integrationen und zusätzliche Entwicklungsleistungen können separat berechnet werden.
- Lieferzeitplan
- Die endgültige Quellenanzahl, Arbeitslast und Lieferdauer werden im Angebot beziehungsweise Vertrag festgelegt, nachdem der Quellenzugriff und der technische Umfang geprüft wurden. Empfohlener Ablauf: Bedarf und Zielquellen festlegen → Zugriffs- und Nutzungsrechte prüfen → Umfang und Abnahmeszenarien präzisieren → White-Label-Installation → Quellen und Datenfelder konfigurieren → testen, schulen und bereitstellen.
Lieferung und Compliance
Dieses Dokument beschreibt den angestrebten Standardumfang des Produkts. Quellenkompatibilität, rechtliche Berechtigung, Datentypen, Arbeitsvolumen, Kapazität, Integrationen und Abnahmekriterien werden im Angebot und im endgültigen Vertrag festgelegt; ein bedingungsloser Zugriff auf jede Quelle wird nicht zugesichert.