jaké jsou výzvy?

od flexibility až po škálovatelnost a efektivitu má použití datového trezoru jako přístupu k modelování dat mnoho výhod. Současně však existují výzvy, které si musíte být vědomi. V tomto blogu vás provedu omezeními a tím, jak je můžete překonat.

přístup Data Vault se při modelování dat (něco, co budu jít do detailu na další dolů) má za následek podstatně větší množství datových objektů ve srovnání s jinými přístupy. Tyto objekty zahrnují věci, jako jsou tabulky a sloupce, a důvod, proč jich je tolik, je ten, že Data Vault odděluje typy informací.

v důsledku toho může být úsilí o modelování vpředu větší, aby se výsledné výhody – zmíněné výše-přizpůsobily konečnému výsledku. To také znamená, že během procesu modelování může být větší množství ruční nebo mechanické úkoly vytvořit flexibilní a detailní datový model se všemi jeho komponenty.

jak lze tato omezení řešit?

aby se zabránilo časově náročným manuálním úkolům během procesu modelování, mohou architekti automatizovat části modelu, čímž je efektivnější vytvářet, aktualizovat a udržovat dlouhodobě.

Jak to mohou udělat?

v rámci přístupu Data Vault existují určité vrstvy dat. Ty se pohybují od Zdrojových Systémů, kde data pochází, do Pracovní Oblasti, kde data dorazí od zdroje systému, modelované podle původní struktury, Jádro Datový Sklad, který obsahuje syrové trezor, vrstva, která umožňuje trasování zpět na původní zdroj dat systému, a obchodní trezoru, sémantické vrstvy, kde obchodní pravidla jsou implementovány. Konečně existují datové tržiště, které jsou strukturovány na základě požadavků podniku. Například by mohl existovat finanční datový trh nebo marketingový datový obchod, který uchovává příslušná data pro účely analýzy.

z těchto vrstev je pracovní plocha a surový trezor nejvhodnější pro automatizaci.

jaké jsou vlastnosti zatížení…modelování datových úložišť?

zatížení…technika modelování datových trezorů přináší maximální flexibilitu oddělením obchodních klíčů, které jednoznačně identifikují každou obchodní entitu a často se nemění, od jejich atributů. To vede, jak již bylo zmíněno, v mnoha více datových objektů je v modelu, ale také poskytuje model dat, který může být vysoce citlivý na změny, jako je například integrace nových datových zdrojů a obchodních pravidel.

základní struktura modelu vychází z obchodních klíčů a vztahů mezi nimi. Jejich stabilní příroda poskytuje klíčovou složkou pro robustní datový model, ale také znamená, že klíče musí být vybrán pečlivě, protože tvoří samotný základ, ze kterého všechno ostatní je odvozené.

rozbočovače

tabulky, které obsahují obchodní klíče, se v přístupu data vault nazývají rozbočovače. Kromě ukládání klíčů obsahují rozbočovače také náhradní klíče a metadata pro každý obchodní klíč. A konečně, zdroj každého obchodního klíče lze nalézt také v rozbočovači, takže informace lze vysledovat zpět k jeho původu.

odkazy

Link tabulky jsou mnoho-to-mnoho spojit tabulky, které spojují různé obchodní klíče. V tabulkách odkazů najdete informace o náhradních klíčích pro rozbočovače připojené přes odkaz, jakož i náhradní klíč pro odkaz a metadata o tom, odkud asociace pochází.

satelity

s rozbočovači a odkazy na místě je nastavena struktura modelu datového trezoru. Zatím však neobsahuje žádné atributy. Sem přicházejí satelity. Satelitní tabulky obsahují metadata, která je spojují s nadřazenými rozbočovači a propojovacími tabulkami. Obsahují také metadata o původu atributů, stejně jako časové atributy. To znamená, že díky satelity, datové architekti mohou zajistit, že historie je zaznamenána v každém intervalu, a zároveň poskytuje auditní stopa a návaznost na zdroje systému.

jak funguje Data Vault s Exasol?

V Exasol máte databázi, která umožňuje pracovat flexibilně s množstvím nástrojů a metodik, takže si můžete vybrat ten správný přístup pro vaše podnikání a zastřešující analytics strategie.

Exasol vás plně podporuje při výběru techniky modelování dat, která nejlépe vyhovuje vaší strategii. To znamená, že můžete snadno těžit z výhod dat Vault přináší.

máme partnery, jako jsou Datavault Builder a Wherescape, kteří vytvořili nástroje pro modelování dat a automatizaci skladu, které se bez námahy integrují do databáze Exasol.

můžete také vytvořit svůj datový model přímo v naší databázi pomocí našeho rámce UDF.

přivedení výkonu Exasol do datového trezoru modelovaných dat

modelování dat v datovém trezoru může mít za následek složité SQL dotazy jsou prováděny ve vašem datovém skladu. Exasol architektury a čistý design zajišťuje, že vynikající výkon slibujeme, že pro vás je udržet v průběhu celého životního cyklu údajů, a to zahrnuje modelování dat a procesů skladování.

můžete auditu a reprodukovat historické výsledky dotazu rychle a efektivně, a zároveň načítání všechny vaše velké objemy dat do skladu a pozvat své analytiky a datové vědců se řídit jejich pracovní postupy, analýzy a analytické modely přímo v datovém skladu bez ztráty rychlosti a spolehlivosti.

Naše partnerství s Datavault Stavitel a Wherescape zaměřit na zlepšení uživatelské zkušenosti s každou novou verzí, což je důvod, proč jsme přijmout vaši zpětnou vazbu a společně pracovat na kontinuálním vývoji a integraci svých produktů.

interně používáme Datavault Builder pro vlastní vývoj datového skladu a můžete si prohlédnout toto video, abyste získali dojem z našeho partnerství s týmem v Datavault Builder.

kam odtud?

Pokud chcete začít hned, jste na správném místě. Nejjednodušší způsob, jak vyzkoušet věci, je použít naši zkušební verzi databáze Exasol a načíst do ní některá vlastní data. Pokud již máte zavedený datový model a chcete vyzkoušet, jak by to fungovalo v Exasolu, můžete to udělat také.

těšíme se na spolupráci s vámi a na pomoc při načítání…Modelování datových úložišť v Exasolu.

Eva Murray, technologická Evangelistka, Exasol