Az információ hatalom. adatok. információ

Méret: px

Mutatás kezdődik a ... oldaltól:

Download "Az információ hatalom. adatok. információ"

Rebeka Mészárosné
8 évvel ezelőtt
Látták:

1 DW 3. előadás

2 Az információ hatalom adatok információ

3 Információs rendszerek Hagyományos adatforrások (legacy system) Virt. vállalati Virtual coop. Információs Informational Döntési (Decisional) Műveleti (Operational) SOAP XML e-comm WEB Java XML DW DSS OLAP DM OLTP Report Workflow

Információs Informational Döntési (Decisional) Műveleti

4 Integrált megoldások az OLTP részen (Oracle)

5 Izolált megoldások a OLAP részen A Meta Group elemzése az üzleti intelligencia szállítóiról május 5... még nincs olyan szoftvercég, amely valóban teljes körű üzleti intelligencia eszközkészletet kínálna. Az előrejelzés szerint ötéves távlatban várható, hogy a jelenleg élenjáró szoftvercégek termékskálájának fejlettsége lehetővé teszi az egy szállítós modell alkalmazását. A tanulmány értékelése szerint a vizsgált 20 BI szállító közül a vezetők táborába a Cognos, a Business Objects, a SAS és az SAP tartozik (+ Oracle, Microsoft,..)

Az előrejelzés szerint ötéves távlatban várható, hogy a jelenleg élenjáró szoftvercégek termékskálájának fejlettsége lehetővé teszi az

6 OLAP rendszerek célja DM Review's 2003 felmérése: A BI rendszerek alkalmazásának főbb céljai : Vevői megelégedettség növelése 62% Költség csökkentés 53% Forgalom növekedés 48% Nyereség növelés 41% Piaci részesedés növelése 37% Termék fejlesztési startégia kijelölése 30% Döntési szintek: operatív: taktikai: stratégiai: mely raktárból hozzuk a kenőzsírt? mennyi kenőzsír kell a hónapban? maradjunk meg a kenőzsír gyártásánál?

részesedés növelése 37% Termék fejlesztési startégia kijelölése 30% Döntési szintek: operatív: taktikai:

7 OLAP Alkalmazási területek Bankok: tranzakció figyelés ügyfél minősítés ügyfél menedzsment beruházások tőzsde Cégek: fogyasztás alakulás piac elemzés döntés előkészítés termelés optimalizálás??.

beruházások tőzsde Cégek: fogyasztás alakulás

8 OLTP OLAP jellemzői OLAP - adatmódosítás - aktuális állapot - nagy konkurencia - konzisztencia - rövid tranzakciók - homogenitás - normalizált - relációs és OO - SQL felület - ACID elvek - adatvesztés elleni védelem - adatlekérdezés - korábbi állapotok - kis konkurencia - betöltés konzisztenciája - hosszú tranzakciók - heterogenitás - adatkocka - modulokból áll - nincs szabvány - nem normalizált - adatvesztés elleni védelem

védelem - adatlekérdezés - korábbi állapotok - kis konkurencia - betöltés konzisztenciája - hosszú

9 OLAP rendszerek legfontosabb Codd-szabályai/kritériumai (1993) Adatrendszer multidimenzionális adatmodellen nyugszik Felhasználóbarát kezelő felület Heterogén forrásadatok Rugalmas adatbetöltés (load) Konkurrens hozzáférés Aggregált adatok és alapadatok együttese NULL érték kezelése Tetszőleges dimenziószám Nincs egységes és teljes adatmodell Nincs egységes parancsnyelv (SQL1999?..) Különböző megvalósítások

(load) Konkurrens hozzáférés Aggregált adatok és alapadatok együttese NULL érték kezelése Tetszőleges

10 Adattárházak OLAP igényeket kielégítő adattárolás Inmon: Témaorientált, integrált, az adatokat történetiségében tároló adatrendszer (1992) információkinyerés biztosítása döntéshozatal támogatására Kell hatékony QUERY modul Kell nem normalizált nézet Nem kell bonyolult tranzakció kezelő Nem kell bonyolult aktív DBMS modul Kell adatintegrátor, betöltő

döntéshozatal támogatására Kell hatékony QUERY modul Kell nem normalizált nézet Nem

11 Alaptípusok: - virtuális, - centralizált, - kétszintű, - elosztott, - hibrid. Adattárház struktúra modellek OLAP réteg OLTP (nem igazi DW rendszer) Virtuális DW struktúra Olcsó implementálás Függetlenség Nem hatékony Nehezebb menedzselés Korlátozott adatműveletek

12 Adattárház struktúra modellek OLTP DW OLAP modul centralizált Hatékony működés Menedzselés egyszerűbb Nem rugalmas Költséges Nehéz bevezetni Nem hibatűrő

13 Adattárház struktúra modellek OLTP DW DataMart OLAP modul DataMart: Részleg szintű Korlátozott kétszintű Specializálódott komponensek Munkamegosztás Jobb teljesítmény Rugalmas Adatvédelem Jelentős hálózati forgalom Nem hibatűrő

Specializálódott komponensek Munkamegosztás Jobb

14 Adattárház struktúra modellek OLTP DW OLAP modul OLTP DW elosztott struktúra Hálózati forgalom javítása érdekében replikáció (hibatűrés és hatékonyság fokozása)

15 Operational DataStore: operativ szintű részletező aktuális adatok összevont Adattárház struktúra modellek OLTP DW DataMart OLAP modul OLTP DW DS Terheléselosztás Rugalmas bővíthetőség hibrid Rendszergazdai teendők (heterogén komponensek illesztése,működtetése és vezérlése)

OLTP DW DS Terheléselosztás Rugalmas bővíthetőség hibrid

16 DW rendszer logikai modellje Funkció rétegekre osztható Alap- és aggregált adatok Adattárolási réteg Meta- és vezérlő adatok Adatforrás réteg Adat továbbító réteg Adatszótár réteg Adathozzáférési modul Megjelenítés rétege ETL Forrásadatok Ütemező réteg Kezelő nyelv Átemelés Transzformáció Betöltés Karbantartás Betöltés aut. (Lekérdezés előkészítő réteg) Elemző modul Adatbányászat

Adathozzáférési modul Megjelenítés rétege ETL Forrásadatok Ütemező réteg Kezelő nyelv Átemelés

17 Információ megjelenítési rétegének leggyakoribb elemei Ad-hoc Query Tools: rugalmas lekérdezési lehetőségeket nyújtó program Report Writers: nyomtatott, listás jelentések készítése Forecasting Tools: előrejelzési elemzések DSS: döntéstámogatási eszközök Scoring Tools: helyzet értékelési eszközök Data Mining: adatbányászási eszközök

jelentések készítése Forecasting Tools: előrejelzési elemzések DSS:

18 DW rendszer adatfolyam modellje 1 Adattárolási réteg 21 Adat továbbító réteg Adathozzá-férési modul 1: Bementi adatfolyam (inflow) 2: Belső adatfolyam (upflow) 3: Kimenő adatfolyam (outflow) 4: Selejtezési adatfolyam (downflow) 5: Vezérlő adatfolyam (metaflow) Adatszótár réteg Ütemező réteg (Lekérdezés előkészítő réteg) 4

3: Kimenő adatfolyam (outflow) 4: Selejtezési adatfolyam (downflow) 5: Vezérlő

19 DW rendszer meta-adatok Adattárolási réteg Adatforrás réteg Adat továbbító réteg Adatszótár réteg Adathozzáférési modul Megjelenítés rétege A forrás adatokhoz kapcsolódó : Forrás séma Nyomtatási lehetőségek források Források tárolási formátum leírása URL cím Tulajdonosi viszonyok Adattartalom leírás. Ütemező réteg

adatokhoz kapcsolódó : Forrás séma Nyomtatási lehetőségek források Források

20 DW rendszer meta-adatok Adattárolási réteg Adatforrás réteg Adat továbbító réteg Adatszótár réteg Adathozzáférési modul Megjelenítés rétege A köztes tárterületen metaadatok listája: DW dimenziók és változók specifikációja Konverziós rutinok specifikációja Kulcs generálás paraméterei Adat tisztítási paraméterek Adatelem leképzési szabályok Adat transzformációs szabályok Aggregációk definíciója Ütemező réteg Védelmi adatok

változók specifikációja Konverziós rutinok specifikációja Kulcs generálás paraméterei Adat tisztítási

21 DW rendszer meta-adatok Adattárolási réteg Adatforrás réteg Adat továbbító réteg Adatszótár réteg Adathozzáférési modul Megjelenítés rétege A DW rendszeren belüli, : DBMS rendszer táblák DBMS partíciók Indexek Fizikai tárolási paraméterek DBMS védelmi View definíciók Tárolt eljárások Ütemező réteg

22 DW rendszer meta-adatok Adattárolási réteg Adatforrás réteg Adat továbbító réteg Adatszótár réteg Adathozzáférési modul Megjelenítés rétege A megjelenítési réteghez kapcsolódó : Jelentések, lekérdezések definíciója Ütemező réteg Lekérdezési segédeszközök elérése Lekérdezési segédeszközök paraméterezése Nyomtató paraméterezés Védelmi adatok Felhasználói beállítások Adatelérési útvonalak Felhasználási statisztikák, naplók

23 DW struktúra

24 DW adatfolyamok Managing meta-data Making data available to end users Adds value to data through summarizing, packaging and distribution Archiving and backingup data Data Warehouse Data Flows

25 DW rendszer logikai modellje fogalmi szint logikai szint fizikai szint származtatott adat DW fizikai adat OLTP forrás adat származtatott adat DW fizikai adat OLTP forrás adat származtatott adat DW fizikai adat OLTP forrás adat egyed kapcsolat kulcs kocka dimenzió tény attribútum tag rekord pointerlánc index előaggregáció

26 The Market Adattárházak piaci helyzete CAGR (%) RDBMS sales for DW Data Marts ETL tools Data Quality Metadata Management OLAP (including implementation services)* Estimated sales in millions of dollars [ShTy98] (*estimates are from [Pend00]). EDBT Summer School - Cargese

27 Teljes OLAP forgalom forgalom év b$ forgalmazók név % Microsoft 24 Hyperion 23 Cognos 13 BO 7 MicroStrategy 5 SAP 5 Oracle 5 PwC 3 Applix 3 IBM 2 Comshare 2 SAS 1

28 Információs rendszerek típusai SCM: ellátási lánc SEM: vállalati stratégia ERP : erőforrás tervezés BPR : átszervezés CRM: vevő kapcsolat CIM: gyártás tervezés EIS: vezetői e-commerce: kereskedelem SRM: szállítói kapcsolat DSS: döntéstámogatás MIS: menedzsment információs rendszer

29 IR modulok kapcsolata

30 OLAP mintapéldák

31 OLAP mintapéldák

Hasonló dokumentumok

VIR alapfogalmai. Előadásvázlat. dr. Kovács László

VIR alapfogalmai. Előadásvázlat. dr. Kovács László VIR alapfogalmai Előadásvázlat dr. Kovács László Információ szerepe Információ-éhes világban élünk Mi is az információ? - újszerű ismeret - jelentés Hogyan mérhető az információ? - statisztikai - szintaktikai