quais são os desafios?

da flexibilidade à escalabilidade e eficiência, usando Data Vault como sua abordagem de modelagem de dados tem muitos benefícios. Mas, simultaneamente, há desafios que você precisa estar ciente. Neste blog eu vou lhe mostrar as limitações e como você pode superá-las.

a caixa-forte de dados de aproximação leva quando os dados de modelagem (algo que eu vou entrar em detalhes mais abaixo) resulta em uma quantidade significativamente maior de objetos de dados em comparação com outras abordagens. Estes objetos incluem coisas como tabelas e colunas e a razão pela qual há tantos mais é porque o Cofre de dados separa tipos de informação. como consequência, o esforço de modelagem frontal pode ser maior para acomodar os benefícios resultantes-mencionados acima-como resultado final. Também significa que durante o processo de modelagem pode haver um maior número de tarefas manuais ou mecânicas envolvidas para estabelecer o modelo de dados flexível e detalhado com todos os seus componentes.

como podem estas limitações ser abordadas?

para evitar tarefas manuais demoradas durante o processo de Modelagem, os arquitetos podem automatizar partes do modelo, tornando mais eficiente a criação, atualização e manutenção a longo prazo.como podem fazer isso?dentro da abordagem do Cofre de dados, existem certas camadas de dados. Estes vão desde os sistemas de origem dos dados, até uma área de paragem onde os dados chegam do sistema de origem, modelado de acordo com a estrutura original, até ao armazém de dados de base, que contém o cofre bruto, uma camada que permite rastrear os dados originais do sistema de origem, e o cofre de negócios, uma camada semântica onde as regras de negócio são implementadas. Por último, existem dados marts, que são estruturados com base nas exigências da empresa. Por exemplo, pode haver um “Finance data mart” ou um “Marketing data mart”, com os dados relevantes para efeitos de análise.

fora destas camadas, a área de preparação e o cofre bruto são mais adequados para a automatização.

quais são as características do Carregamento…modelo de cofre de dados?

a carga…a técnica de Modelagem do data vault traz flexibilidade máxima, separando as chaves de negócio, que identificam de forma única cada entidade de negócio e não mudam muitas vezes, de seus atributos. Isso resulta, como mencionado anteriormente, em muito mais objetos de dados que estão no modelo, mas também fornece um modelo de dados que pode ser altamente sensível a mudanças, como a integração de novas fontes de dados e regras de Negócio.

A estrutura básica do modelo vem das chaves de negócio e das relações entre elas. Sua natureza estável fornece o ingrediente chave para um modelo de dados robusto, mas também significa que as chaves precisam ser escolhidas cuidadosamente, pois elas formam a própria base da qual tudo o resto é derivado.

Hubs

as tabelas que contêm as chaves de negócio são chamadas de hubs na abordagem da caixa de dados. Além de armazenar as chaves, os hubs também contêm chaves substitutas e metadados para cada chave de Negócio. Finalmente, a fonte de cada chave de negócio também pode ser encontrada no hub, para que a informação possa ser rastreada até suas origens.

ligações

as tabelas de ligações são muitas vezes tabelas de ligação que ligam diferentes chaves de Negócio. Dentro das tabelas de links, as informações que você vai encontrar são as chaves substitutas para os hubs conectados através do link, bem como a chave substituta para o link e os metadados sobre de onde a associação se originou.

satélites

com os hubs e ligações no lugar, a estrutura do Modelo data vault é configurada. No entanto, ainda não contém quaisquer atributos. É aqui que entram os satélites. As tabelas de satélite contêm metadados que as ligam aos seus centros-mãe e tabelas de ligações. Eles também contêm metadados sobre as origens dos atributos, bem como atributos temporais. Isto significa que, graças aos satélites, os data architects podem garantir que a história seja registrada em qualquer intervalo, ao mesmo tempo que fornecem uma pista de auditoria e rastreabilidade para o sistema fonte.como funciona o Cofre de dados com o Exasol?

No Exasol você tem um banco de dados que lhe permite trabalhar com flexibilidade com uma infinidade de ferramentas e metodologias para que você possa escolher a abordagem certa para o seu negócio e estratégia global de análise.o Exasol apoia-o totalmente na escolha da técnica de modelagem de dados que melhor se adapta à sua estratégia. Isso significa que você pode facilmente se beneficiar das vantagens que o Data Vault traz.

temos parceiros como DataVault Builder e Wherescape que criaram ferramentas de modelagem de dados e automação de armazém que integram sem esforço a base de dados Exasol.

Você também pode construir o seu modelo de dados diretamente em nossa base de dados, usando o nosso Framework UDF.trazer o desempenho do Exasol para os dados modelados do seu Cofre de dados pode resultar em consultas SQL complexas a serem executadas no seu armazém de dados. A arquitetura e o design puros da Exasol garantem que o desempenho excepcional que prometemos a você é sustentado ao longo de todo o ciclo de vida dos dados, e isso inclui seus processos de modelagem e armazenamento de dados.

Você pode auditoria e reproduzir o histórico de resultados de consulta de forma rápida e eficiente, além de carregar todos os seus grandes volumes de dados para o depósito e convide seus analistas e cientistas de dados para executar seus fluxos de trabalho, análises e modelos analíticos diretamente no armazém de dados sem sacrificar a velocidade e a confiabilidade.

nossas parcerias com DataVault Builder e onde a paisagem se concentra em melhorar a experiência do usuário com cada novo lançamento, e é por isso que tomamos o seu feedback e trabalhamos em conjunto no desenvolvimento contínuo e integração de nossos respectivos produtos.internamente, temos usado o DataVault Builder para o nosso próprio desenvolvimento de data warehouse e você pode ver este vídeo para ter uma impressão da nossa parceria com a equipa do DataVault Builder.para onde?

Se você quiser começar imediatamente, você veio ao lugar certo. A maneira mais fácil de testar as coisas é usar a nossa versão de teste do banco de dados Exasol e carregar alguns de seus próprios dados nele. Se você já tem um modelo de dados no lugar e quer testar como ele iria executar no Exasol, você pode fazer isso também.

estamos ansiosos para trabalhar com você e para ajudá-lo a ter sucesso com o carregamento…Modelo de cofre de dados em Exasol.Eva Murray, Evangelista tecnológico, Exasol