Áttekintés
A versenyfeltételek, az árak, a termékkatalógusok, a hírfolyamok és a nyilvános ágazati információk folyamatosan változnak. A manuális nyomon követés időigényes, és hiányos adatokhoz vezethet. A Webes adatgyűjtő platform célja, hogy a megfelelő forrásokból származó információkat megismételhető feladatokkal gyűjtse össze, és következetes eredményeket biztosítson az adatokkal dolgozó csapatok számára. A szervezetek meghatározhatják a forráscímeket és a mező-hozzárendelési szabályokat, beállíthatják az adatgyűjtés gyakoriságát, nyomon követhetik a feladatok eredményeit, kiszűrhetik a duplikált rekordokat, és továbbíthatják az adatokat analitikai vagy operatív rendszereikbe. A forrásokra vonatkozó feltételek és a jogszerű felhatalmazás betartása alapvető követelmény; a platform nem ígéri a webhelyek hozzáférési korlátozásainak megkerülését vagy jogosulatlan személyesadat-gyűjtést. Értékajánlat: Tegye rendszerszerűvé az ismétlődő adatgyűjtési feladatokat, értesüljön a változásokról, és támogassa a döntéshozatalt naprakész, nyomon követhető adatokkal. Kiemelt előnyök • Egyetlen platform: Források, adatgyűjtési feladatok, rekordok és kimenetek egyetlen kezelőfelületen. • Naprakész információ: Az ütemezett adatgyűjtés és a változások követése csökkenti a manuális ellenőrzés terhét. • Tisztább adatok: Mezőnormalizálás, érvényesítés és duplikáltrekord-ellenőrzés. • Rugalmas felhasználás: E-kereskedelmi, kiskereskedelmi, pénzügyi, média- és technológiai felhasználási esetek. • White Label: Adatgyűjtési szolgáltatás kínálata saját márkanév és domain alatt. Ágazati felhasználási esetek • E-kereskedelem: Engedélyezett termékkatalógusokból származó adatok, árváltozások és terméktulajdonságok összehasonlítására alkalmas adatkészletek. • Kiskereskedelem: Üzlet- és kampánybejelentések, nyilvános katalógusadatok és piaci trendek követése. • Pénzügy: Engedélyezett vagy nyilvános pénzügyi információforrásokban közzétett árfolyamok, közlemények és piaci mutatók összegyűjtése. • Média: RSS, nyilvános publikációk, témacímkék és tartalomfrissítések központi követése. • Technológia: Nyilvános termékverziók, műszaki dokumentációk és ágazati hírek követése. Termékpozicionálás A Y11-002 Webes adatgyűjtő platform a külső webes forrásokból történő, jogszerű információszerzésre, a forráskezelésre és az adat-előkészítési folyamatokra összpontosít. A Y11-001 Üzleti intelligencia- és dashboardplatform vizualizálja az adatokat; a Y11-003 Adatintegrációs és ETL-szoftver kezeli a rendszerek közötti adatáramlást és -átalakítást; a Y11-004 Ügyfél- és értékesítéselemző szoftver pedig az ügyfél- és értékesítési teljesítmény elemzésére szakosodott. A Y11-002 adatgyűjtési, -tisztítási, változáskövetési és exportálási funkciói nem külön értékesített modulok. Gyakran ismételt kérdések Minden webhelyről gyűjthetők adatok? Nem. Értékelni kell a forrás műszaki elérhetőségét, felhasználási feltételeit és a jogszerű felhatalmazást. Követhetők a versenytársak árai? Jogszerűen és hozzáférési engedéllyel igénybe vehető források esetén a szerződésben meghatározott adatok követése konfigurálható. Milyen gyakori a frissítés? A gyakoriságot a forrás feltételei, a sebességkorlátok és a telepítés kapacitása határozza meg. Lekérhetők az adatok Excelben vagy API-n keresztül? Igen, a jogosult kimenetek és az API-n keresztüli adattovábbítás a szerződésben meghatározott keretek között biztosítható. Automatikusan hoz létre kategóriákat a mesterséges intelligencia? Az AI-alapú osztályozás a külön meghatározott modell- és szolgáltatási körtől függ; a szabványos, manuális vagy szabályalapú osztályozás támogatott. Értékesíthetek szolgáltatást az ügyfeleimnek? Igen, saját márkája alatt kínálhat szolgáltatást; a külső szolgáltatások költségei és a kapacitáskorlátok ettől függetlenül érvényesek. Átadják a forráskódot? Nem. A szoftver határozatlan idejű használati licence kerül átadásra; a forráskód és a szellemi tulajdonjogok a KMKSOFT tulajdonában maradnak.
Termékazonosítás
- Termékkód
- Y11-002
- Globális terméknév
- Web Data Collection Platform
- Főkategória
- Adatelemzés és jelentéskészítés
- Terméktípus
- Egyetlen, integrált White Label szoftver
- Iparágak
- E-kereskedelem, kiskereskedelem, pénzügy, média, technológia
- A licenc hatálya
- Egy márka / egy fő éles telepítés; végügyfelenként nincs KMK-licencdíj
- Tárhelyszolgáltatás
- KMKCloud vagy megfelelő infrastruktúra; külön díj ellenében.
- Standard műszaki támogatás
- 12 hónap
Standard funkciók
- Webes források kezelése
- Engedélyezett cél-URL-ek, domainek, adattípusok, felelősök és hozzáférési megjegyzések rögzítése.
- Adatgyűjtési feladatok
- Egyszeri vagy ismétlődő adatgyűjtési feladatok létrehozása a forráshoz és az adatsémához kapcsolva.
- Ütemezés és időközök
- Feladatok futtatása meghatározott időközönként, valamint az utolsó futás állapotának nyomon követése.
- HTML-oldalak feldolgozása
- Címek, hivatkozások, árak, leírások és strukturált mezők kinyerése a megfelelő oldalakról.
- Lapozás és hivatkozások követése
- Adatgyűjtés olyan lista- és részletező oldalakról, amelyekhez ezt a forrás szabályai engedélyezik.
- API- és adatfolyam-kapcsolatok
- Engedélyezett API-k, RSS és hasonló, géppel olvasható források használata.
- Mező-hozzárendelési sablonok
- A forrásadatok célmezőkhöz és adattípusokhoz rendelése.
- Adattisztítás
- Üres mezők, írásmódok, dátum-, szám- és pénznemformátumok normalizálása.
- Duplikált rekordok ellenőrzése
- Ismétlődések jelölése vagy összevonása mezők és egyeztetési kulcsok alapján.
- Változások követése
- Az árak, készletek, szövegek vagy rekordok eltéréseinek összevetése a korábbi adatgyűjtési eredményekkel.
- Adatérvényesítési szabályok
- Kötelező mezők, elvárt formátumok, értéktartományok és konzisztencia ellenőrzése.
- Kategorizálás és címkézés
- Adatkészletek osztályozása kategória, téma, márka vagy meghatározott mezők alapján.
- Keresés és speciális szűrők
- Rekordok szűrése forrás, dátum, állapot, kategória és mezőértékek alapján.
- Adatelőnézet és szerkesztés
- Az összegyűjtött rekordok táblázatos áttekintése és jogosult felhasználók általi javítása.
- CSV- és Excel-export
- Adatok fájlalapú exportálása jogosult felhasználók számára.
- Adatszolgáltatás API-n keresztül
- Rekordok továbbítása külső alkalmazásoknak a meghatározott hatókör és biztonsági szabályok szerint.
- Feladatsor és állapotkövetés
- A sorban álló, futó, befejezett és hibás feladatok áttekintése.
- Hibanaplók és újrapróbálkozás
- Időtúllépések, formátumváltozások és kapcsolódási problémák rögzítése, valamint szabályozott újrapróbálkozás.
- Forrásterhelés és sebességkorlátok
- Kérések végrehajtása a meghatározott sebesség- és párhuzamossági korlátok, valamint a megfelelő időközök betartásával.
- Értesítések és riasztások
- Rendszergazdai értesítések a feladatok sikertelenségéről és a fontos változásokról.
- Munkaterületek elkülönítése
- Források és adatterületek elkülönítése ügyfél, csapat és projekt szerint.
- Felhasználói és szerepkör-engedélyek
- Engedélyek kezelése a források kezeléséhez, a feladatok futtatásához, az adatok megtekintéséhez és exportálásához.
- Műveleti előzmények és audit
- A fontos módosítások, felhasználói műveletek és feladatfuttatások naplózása.
- Forrás- és adatminőségi jelentések
- A sikerességi arány, a rekordszám, a hibatípusok és az adatok teljességének mérése.
- Márka testreszabása
- Logó, színek, platformnév, domain és a felület megjelenésének beállítása.
- Megőrzési és törlési szabályzatok
- Megőrzési és törlési időszakok meghatározása forrásonként, ügyfelenként és adatkészletenként.
White Label működési modell
A szoftververzió határozatlan idejű használati joga a szerződésben meghatározott egyetlen márkához és egyetlen fő éles telepítéshez. A licenc tulajdonosa saját márkája alatt korlátlan számú végügyfelet szolgálhat ki; az infrastruktúra- és külső szolgáltatási korlátok továbbra is érvényesek. A forráskód és a szellemi tulajdonjogok a KMKSOFT tulajdonában maradnak; a kód átadása nem része a licencnek. Az első telepítés, a kezdeti márkaigazítás, az alapképzés és az első 12 hónap standard műszaki támogatása a szerződésben meghatározott keretek között része a szolgáltatásnak. A tárhely, a proxy-/külsőadat-szolgáltatók, az API-használati díjak, a tárolás és az egyedi integrációk külön díjazás alá eshetnek. Az első 12 hónapot követően a karbantartásról, támogatásról és verziófrissítésekről külön kell megállapodni.
Műszaki specifikáció
- Kezelőfelület és hozzáférés
- Webalapú, mobileszközökre optimalizált kezelőfelület; szerepköralapú hozzáférés, biztonságos munkamenet és a fontos műveletek naplózása.
- Feladat- és adatrétegek
- Feladatütemező, feladatsor, forráskapcsolatok, feldolgozási szabályok és adattárolási rétegek.
- Sebességkorlátok és újrapróbálkozás
- Forrásonkénti kérésisebesség- és párhuzamossági korlátok; hibák esetén várakozás és szabályozott újrapróbálkozás.
- Jogszerű felhasználás értékelése
- A használat értékelése a robots.txt, a szolgáltatási feltételek, a hozzáférési engedélyek, a szellemi tulajdon és az adatvédelem követelményei alapján.
- Bejelentkezést igénylő források
- A bejelentkezést igénylő források kizárólag jogosult felhasználói fiókkal, az adott forrás felhasználási feltételeinek megfelelően kapcsolhatók össze.
- A hatókörbe nem tartozó módszerek
- A CAPTCHA, az anti-bot intézkedések vagy a hozzáférés-ellenőrzések megkerülése, valamint a jogosulatlan személyesadat-gyűjtés nem része a standard hatókörnek.
- Forrásváltozások
- A forrásoldalak szerkezetének változásai a feldolgozási szabályok karbantartását tehetik szükségessé; nem garantálható a folyamatos adatellátás minden webhely esetében.
- Tárolás és adatelkülönítés
- A tárolás, biztonsági mentés, naplómegőrzés, törlés és adatelkülönítés szabályait a szerződés szerint kell konfigurálni.
- Mesterséges intelligenciával támogatott műveletek
- A mesterséges intelligenciával támogatott mezőkinyerés vagy automatikus kategorizálás kizárólag akkor biztosítható, ha szerepel a projekt hatókörében, és megfelelő modell szolgáltatás áll rendelkezésre.
- Kapacitás és munkaterhelés
- Az adatgyűjtés gyakoriságát, a források számát, a munkaterhelést és a rekordszámkorlátot az infrastruktúra megvalósíthatósága alapján kell meghatározni a szerződésben.
Ez a dokumentum a termék tervezett standard értékesítési körét írja le. A források megfelelőségét, a jogszerű felhatalmazást, az adattípusokat, a munkaterhelést, a kapacitást, az integrációkat és az elfogadási kritériumokat az ajánlatban és a végleges szerződésben kell rögzíteni; nem vállalunk feltétel nélküli hozzáférést minden forráshoz.
Átadás és átvétel
- Kezelőfelület és jogosultsági csoportok
- Ellenőrizni kell a márkázott kezelőfelülethez való hozzáférést és a jogosultsági csoportokat.
- Feladat- és ütemezési tesztek
- A szerződésben kiválasztott, hozzáférés szempontjából engedélyezett mintaforrásokkal tesztelni kell a feladat létrehozását és az ütemezett futtatást.
- Adatelőkészítési tesztek
- Legalább egy mintaforráson be kell mutatni a mező-hozzárendelést, a tisztítást, az érvényesítést és a duplikált rekordok ellenőrzését.
- Változás-, hiba- és kimenettesztek
- Meghatározott tesztesetekben ellenőrizni kell a változásészlelést, a hibák naplózását, az újrapróbálkozást, a kimeneti fájlt és az API-hozzáférést.
- Adatelkülönítés és audit
- Ellenőrizni kell a felhasználók közötti adatelkülönítést, az exportálási jogosultságokat és az auditnaplót.
- Képzés és elfogadás
- El kell végezni az alapfelhasználói képzést, át kell adni a műszaki használati jegyzeteket, és ki kell tölteni az átvételi jegyzőkönyvet.
- Szállítási ütemterv
- A források pontos számáról, a munkaterhelésről, az időtartamról és a szállítási ütemtervről az ajánlat vagy a szerződés mellékletében kell megállapodni.
Licenc- és kereskedelmi feltételek
- Licencdíj
- 5 800 USD — egyszeri szoftverlicenc.
- A licenc jellege
- Egyszeri, határozatlan idejű verzióhasználati jog egy márkához és egy fő telepítéshez.
- A termék hatóköre
- Az adatgyűjtési, -tisztítási, változáskövetési és exportálási funkciók az integrált szoftver részét képezik; nem külön értékesített modulok.
- Végügyfelek
- A licenc tulajdonosa saját márkája alatt korlátlan számú végügyfelet szolgálhat ki; a KMKSOFT nem számít fel végügyfelenként szoftverlicencdíjat. Az infrastruktúra, a külső szolgáltatások költségei és a kapacitáskorlátok ettől függetlenül érvényesek.
- Forráskód
- A forráskód és a szellemi tulajdonjogok a KMKSOFT tulajdonában maradnak; a kód átadása nem része a licencnek.
- Műszaki támogatás
- Az első 12 hónapban az első telepítés, a kezdeti márkaigazítás, az alapképzés és a standard műszaki támogatás része a szolgáltatásnak. Az első 12 hónapot követően a karbantartásról, támogatásról és verziófrissítésekről külön kell megállapodni.
- További költségek
- A tárhely, az adattárolás, a proxy-/külsőadat-szolgáltatók, az API-használati díjak, az egyedi integrációk és a további fejlesztések külön díjazás alá eshetnek.
- Szállítási ütemterv
- A források pontos számát, a munkaterhelést és a szállítás időtartamát az ajánlatban vagy a szerződésben kell meghatározni, miután ellenőrizték a forrásokhoz való hozzáférést és a műszaki hatókört. Javasolt folyamat: Az igények és a célforrások meghatározása → a hozzáférési és felhasználási jogok értékelése → a hatókör és az elfogadási tesztesetek pontosítása → White Label telepítés → a források és adatmezők konfigurálása → tesztelés, képzés és átadás.
Átadás és megfelelőség
Ez a dokumentum a termék tervezett standard értékesítési körét írja le. A források megfelelőségét, a jogszerű felhatalmazást, az adattípusokat, a munkaterhelést, a kapacitást, az integrációkat és az elfogadási kritériumokat az ajánlatban és a végleges szerződésben kell rögzíteni; nem vállalunk feltétel nélküli hozzáférést minden forráshoz.