Solix Technologies, Inc. Oferece Governança de Dados, Privacidade e Segurança Incomparáveis com Plataforma de Dados em Nuvem de Terceira Geração
O SOLIXCloud Enterprise Data Lake agora oferece engenharia de dados abrangente, integração de dados e transações em tempo real com Apache Hudi
SANTA CLARA, Califórnia, 24 de outubro de 2024 - Solix Technologies, Inc., um fornecedor líder de soluções de gerenciamento de dados empresariais, revela hoje a atualização mais significativa até agora para Lago de dados corporativos SOLIXCloud.
Por muito tempo, os clientes têm lutado para gerenciar, entender e aproveitar os ativos de dados espalhados por sua empresa. As plataformas de dados de primeira geração foram sobrecarregadas por relatórios limitados em tempo real, carregamento ETL complexo e caro e falta de atualização em tempo real. Até mesmo as plataformas de dados de segunda geração sofreram com a ausência de recursos de gerenciamento e governança de chaves, consultas lentas e incômodas e gerenciamento de metadados e catálogos ruim.
Como resultado, desde armazenamentos de dados operacionais e data warehouses até data lakes de gerações anteriores, os clientes investiram tempo, dinheiro e talento na construção de plataformas de dados que não conseguiram transformar ativos de dados corporativos em receita.
Além disso, a demanda está crescendo não apenas por dados empresariais em tempo real para impulsionar fluxos de receita de aplicativos de inteligência empresarial, aprendizado de máquina e IA generativa, mas também por uma estrutura de governança de dados que ofereça suporte a soluções de engenharia de dados e integração de dados durante todo o ciclo de vida dos dados.
A plataforma de dados de terceira geração está aqui
O SOLIXCloud Enterprise Data Lake, uma plataforma inovadora de dados em nuvem de terceira geração para ajudar os clientes a gerenciar, minerar e monetizar seus ativos de dados empresariais, é altamente escalável e agora oferece soluções de integração de dados e engenharia de dados de ponta a ponta para clientes novos e existentes, além do melhor gerenciamento de dados em nuvem com governança segura na qual os clientes do SOLIXCloud confiam há anos.
O novo data lake, programado para estar disponível em agosto deste ano, adiciona o Apache Hudi com transações ACID e um catálogo de dados unificado para transformar a maneira como as empresas gerenciam e analisam seus volumes crescentes de dados empresariais estruturados e não estruturados para tomar melhores decisões oportunas e fazer previsões comerciais críticas futuras.
Juntamente com uma governança robusta para segurança, proteção, conformidade e ciclo de vida dos dados, o SOLIXCloud Enterprise Data Lake é uma solução multinuvem com suporte para AWS, Azure, IBM Cloud, Oracle Cloud, Google Cloud e implantação híbrida no local.
“Os data warehouses e os data lakes de primeira geração não atendem aos requisitos comerciais de armazenar, organizar e analisar dados empresariais para maximizar a lucratividade”, ditou Dr. James Short, Cientista Chefe do Centro de Supercomputadores de San Diego. “O Enterprise Data Lake da Solix disponibiliza dados históricos e em tempo real, organizados para atender às necessidades de cientistas de dados, engenheiros de dados e analistas de negócios, para que eles possam descobrir novos insights e criar novas soluções de IA e aprendizado de máquina voltadas ao lucro.”
Executando na nuvem nativa Plataforma de dados comuns Solix (CDP), SOLIXCloud Enterprise Data Lake é uma terceira geração, transacional, lago de dados de streaming que traz o data warehouse principal e a funcionalidade do banco de dados diretamente para um data lake. Projetado para cargas de trabalho de banco de dados em nuvem de alto desempenho e em tempo real, o SOLIXCloud Enterprise Data Lake oferece suporte à ingestão de dados de streaming, pipeline de dados e fornece garantias transacionais para o data lake com gravações atômicas consistentes e controles de simultaneidade personalizados para transações de data lake de execução mais longa. Para garantir que as infraestruturas de dados não estejam vinculadas a nenhum fornecedor, o SOLIXCloud Enterprise Data Lake oferece suporte Apache Hudi no acesso antecipado do cliente, e os formatos Open Table para Apache Iceberg e Delta estão planejados para seguir.
O SOLIXCloud Enterprise Data Lake é uma resposta à crescente demanda de nossos clientes por soluções de data fabric de ponta a ponta que suportam transações sem servidor e de baixa latência para aplicativos empresariais inteligentes, como IA generativa, análise de streaming e operações de aprendizado de máquina (MLOps). O SOLIXCloud Enterprise Data Lake coleta quaisquer dados, incluindo metadados, de qualquer fonte, e fornece soluções de pipeline de dados em tempo real com controles de governança de dados federados, incluindo segurança de dados, privacidade de dados do consumidor, conformidade e Information Lifecycle Management (ILM). O SOLIXCloud Enterprise Data Lake também pode ser adicionado aos cenários de soluções SOLIXCloud existentes para expandir rapidamente os recursos da plataforma de dados.
“As plataformas de dados em nuvem são a base de qualquer estratégia de transformação digital”, ditou John Ottman, presidente executivo da Solix Technologies, Inc. “SOLIXCloud Enterprise Data Lake oferece streaming de dados, governança de dados, integração de dados e recursos de engenharia de dados para que os clientes possam capitalizar e monetizar totalmente seus ativos de dados.”
Os principais recursos do banco de dados SOLIXCloud Enterprise Data Lake com Open Table Formats para Apache Hudi (Hadoop-Upserts-Deletes-Incrementals) incluem:
Transações de ACID – A estrutura do data lake Apache Hudi fornece dados em tempo real, ACID transacional garantias para seu data lake com consistentes, Atomic Writes e Isolated Reads para controles de simultaneidade personalizados para transações de data lake de execução mais longa. Esses recursos incluem Tabelas, Transações, Upserts/Deletes, métodos de Indexação avançada para gerenciar e consultar grandes conjuntos de dados, Clustering/Compactação, Otimizações de desempenho para dimensionar gravações e leituras de forma independente e otimizar a infraestrutura, Inserções em massa e gravações transacionais, Snapshots para que os leitores não bloqueiem os escritores e os escritores não bloqueiem os leitores e Viagem no tempo para permitir a consulta de versões anteriores do conjunto de dados úteis para trilhas de auditoria ou reversões.
Processamento rápido de dados – Reimagine trabalhos lentos de processamento de dados em lote com uma nova e poderosa abordagem incremental de leitura e gravação de dados usando o Streaming Ingestion. O Fast Data Processing é executado junto com o processamento de dados em lote e fornece aos clientes uma maneira de repensar e reprojetar processos ETL para trabalhos Hive e Spark que estão sendo executados muito lentamente e ocupando muitos recursos. O processamento de dados incremental facilita o processamento apenas de dados novos ou atualizados desde o último lote, aumentando a eficiência em pipelines de dados.
Carregamento de alto desempenho – Mesmo instalações de banco de dados NoSQL moderadamente grandes armazenam bilhões de linhas, tornando cargas em massa completas inviáveis e uma abordagem mais eficiente necessária para ingerir tal volume de dados. Substitua cargas em massa caras e ineficientes por ingestão gerenciada via Upserts e streaming incremental para manter seus dados atualizados.
Os recursos adicionais do SOLIXCloud Enterprise Data Lake incluem:
Catálogo de Dados – Cientistas de dados e profissionais de dados exigem um inventário detalhado de todos os ativos de dados para ajudar a encontrar rapidamente os dados mais apropriados para qualquer propósito analítico ou de inteligência empresarial. Os recursos incluem controle de acesso baseado em função, glossário de negócios, classificação de dados, repositório de metadados e linhagem de dados.
Pipelines de dados incrementais de baixo código – Para criar pipelines de dados incrementais em tempo real da origem ao destino que sejam adequados para uso por inteligência artificial (IA), aprendizado de máquina (ML) e análises avançadas, os engenheiros de dados precisam de ferramentas de arrastar e soltar para coletar dados de qualquer fonte e aplicar limpeza de dados, enriquecimento de dados ou qualquer outra preparação. Ao transformar arquivos, remover registros errôneos, mascarar dados confidenciais, marcar e rotular ou combinar objetos de dados em registros comerciais corporativos, o Solix Data Pipeline melhora a qualidade dos dados e a precisão dos aplicativos de data warehouse, aprendizado de máquina e análises avançadas.
Uma estrutura de processamento de Entrega Contínua de Dados é ideal para cargas de trabalho de captura de dados de alteração e análise de baixa latência em nível de minuto. Crie modelos declarativos para ingestão e transformação incrementais e provisione pipelines de entrega contínua de dados para operações de aprendizado de máquina. Automatize os encargos operacionais de agendamento, monitoramento e movimentação de dados corporativos.
CDC (Change Data Capture) – A captura de dados alterados permite a ingestão de banco de dados eficiente e contínua em seu data lake. O SOLIXCloud Enterprise Data Lake foi projetado para oferecer suporte a Upserts e Deletes rápidos de dados adequados para CDC e casos de uso de streaming.
Apache Spark – O processamento de dados paralelos na memória do Apache Spark é o mecanismo mais amplamente usado no mundo para computações escaláveis em dados estruturados e não estruturados. Milhares de empresas, incluindo 80% das Fortune 500, usam o Apache Spark™ hoje.
Governança de Dados Federados – O Federated Data Governance fornece uma estrutura de controle centralizada para quando vários grupos têm autoridade sobre os dados. Por meio de autoridades delegadas, aplicação de políticas virtuais e gerenciamento de auditoria, o Federated Data Governance permite o controle de conformidade sobre tabelas e dados remotos, reduzindo riscos e melhorando a segurança para operações de dados descentralizadas e multi-nuvem.
Para agendar uma demonstração clique aqui,
Para se inscrever em nosso programa de acesso antecipado clique aqui:
Para descobrir mais e explorar esses recursos, visite Solix.com.
Além disso, clique aqui para baixar nosso whitepaper