fbpx
logo imexperts

 

 

 

 

 

 

V A S T

Engenharia de dados projetada para IA

Uma nova arquitetura de armazenamento de dados para o futuro.

A VAST Data foi fundada na ideia de que o futuro da inteligência artificial deve ser construído sobre uma infraestrutura rápida que permita que os mecanismos de IA processem dados em qualquer escala.​

Para cumprir essa visão, a VAST projetou a primeira nova arquitetura de sistema distribuído com a missão de eliminar comprometimentos e unificar ambientes de armazenamento em uma única camada de flash escalável, acessível e resiliente.

Concebida 20 anos depois que o Google introduziu a ideia de sistemas “Share-Nothing”, a nova arquitetura da VAST “Disaggregated and Shared-Everything” DASE foi projetada para quebrar os limites convencionais de escalabilidade dos sistemas distribuídos.

O DASE combina capacidade com desempenho, dados com metadados ricos, borda com nuvem e simplicidade com escala. Conceitos de dados e sistemas que antes eram mutuamente exclusivos agora coexistem harmoniosamente em uma plataforma que a IDC considera “A arquitetura do futuro”.

A Plataforma VAST

A Platform VAST é uma oferta de infraestrutura de dados transformadora, unificando serviços de armazenamento, banco de dados e mecanismo de computação em um sistema escalável que foi construído desde o início para o futuro da IA.

As áreas funcionais do sistema se dividem em alguns componentes que se combinam numa única plataforma:

  • VAST DataStore é o armazenamento base all-flash NVMe da plataforma. O DataStore é responsável por persistir os dados e disponibilizá-los por meio de todos os diferentes protocolos (NFS, SMB, S3, etc.) nos quais os aplicativos podem gravar ou ler.
  • VAST DataBase é o serviço de gerenciamento de banco de dados do sistema que grava tabelas no sistema e permite fazer queries em tempo real em grandes volumes de dados tabulares e metadados catalogados.
  • VAST DataEngine é o ambiente de execução de funções declarativas do sistema que permite que funções serverless e notificações de eventos sejam implantadas e executadas na plataforma.

  • VAST DataSpace fornece o namespace global para acesso a dados da borda à nuvem. Ao quebrar o compromisso entre consistência estrita e desempenho local, o DataSpace torna possível computar dados de qualquer plataforma de nuvem pública, privada ou de borda.

Casos de Uso

All-Flash NAS Storage em Exaescala

O armazenamento certo para as cargas de trabalho modernas

Simplicidade em escala.

Acesso ao cliente de alto desempenho. O VAST DataStore adota protocolos abertos e padrão (NFS, SMB, S3, K8S SCI) e os combina com otimizações de alto desempenho para eliminar a necessidade de drivers complexos de armazenamento do lado do cliente, como sistemas de arquivos paralelos ou clientes SAN.​

A experiência VAST NFS, em particular, pega a experiência NAS clássica e “aumenta para 11”, apresentando suporte para RDMA, multi-pathing e até mesmo APIs de armazenamento GPUDirect da Nvidia.​

Uma arquitetura empresarial multiprotocolo.

Todos os protocolos VAST são escritos internamente para fornecer a melhor experiência de desempenho e permissões. Ao possuir e controlar toda a pilha, cada protocolo foi projetado para funcionar perfeitamente com o namespace abstrato chamado de Element Store. Com o VAST, todos os protocolos compartilham acesso igual aos dados e desfrutam de acesso igual ao desempenho.​

O VAST NFS já está alimentando alguns dos maiores laboratórios governamentais, estúdios de animação, centros de processamento sísmico, pipelines de bioinformática, redes de pesquisa de fundos de hedge, esforços de IA e muito mais. Os clientes estão relatando mais desempenho do VAST do que viram em seus sistemas de arquivos paralelos legados e em quaisquer outras opções de NAS. O VAST é simples, acessível e os aplicativos prosperam depois de migrarem para o flash.

Principais Benefícios

  • Clientes de alto desempenho. NFs, SMB, S3, GPUDirect, K8S CSI
  • Contêiners  de armazenamento desagregados. Escala linearmente até 10.000 máquinas x86
  • Armazenamento Fabric de alto desempenho. Ethernet em escala de data center ou InfiniBand
  • Escala para exabytes com Flash de baixo custo. NVMe compartilhado acessível por todos os contêineres

All Flash Data Lake & Analytics

O Data Lake acelerado para todas as suas aplicações.

Simplifique seus pipelines de análise com uma visão totalmente coerente de dados estruturados e não estruturados em uma plataforma de dados unificada que acelera insights em tempo real. A plataforma de dados VAST potencializa análises avançadas com serviços de arquivos, objetos e banco de dados com desempenho, escala e acessibilidade incomparáveis.

À medida que mecanismos de consulta modernos como Spark e Trino substituíram o Hadoop, as organizações abandonaram as arquiteturas baseadas em HDFS e DAS em favor do armazenamento de objetos baseado no AWS S3. No entanto, o desempenho inferior do S3 exigiu que os mecanismos de consulta introduzissem soluções alternativas, como cache de middleware, o que complicava bastante as arquiteturas.

O VAST resolve os desafios de desempenho e escalabilidade para análise de plataforma aberta com NFS escalonável que fornece níveis de desempenho de sistemas de arquivos paralelos. Os aplicativos nativos da nuvem se beneficiam da implementação S3 de alto desempenho do VAST combinada com a interoperabilidade multiprotocolo total. O gerenciamento de dados em escala é simples com o Catálogo VAST, um índice automático de metadados sempre sincronizado criado no VAST DataBase que permite pesquisar e encontrar dados por meio de interface intuitiva e interface SQL para consultas avançadas e automatização de fluxos de trabalho. 

Principais Benefícios

  • Transações linearmente Escaláveis.
  • Acabe com a engenharia de dados complexos.
  • Consultas complexas são executadas 100 vezes mais rápido.
  • Espaço para nome global.
  • Snapshots consistentes em várias tabelas.
  • Redução de dados superior.

Integração com as principais tecnologias de Big Data & Analytics

All-Flash Enterprise Backup & Recovery

O pior inimigo do ransomware

A plataforma de dados VAST é um sistema totalmente flash, escalonável, de arquivos e objetos que oferece uma enorme vantagem na corrida por soluções para ransomware. Alimentado por uma arquitetura de sistema totalmente nova, o VAST elimina as limitações de escala e desempenho de dispositivos de backup específicos (PBBAs) para permitir backups rápidos e recuperação imediata de ataques de ransomware em grande escala.

A prevalência de ataques de ransomware significa que as organizações de TI precisam estar preparadas para a recuperação de sistemas em toda a empresa. Muitas das soluções de backup proeminentes no mercado hoje nasceram na era da fita, estabelecendo um padrão baixo de desempenho e ao mesmo tempo valorizando a economia de custos. Os PBBAs legados concentram-se em atender às janelas de backup enquanto implementam tecnologias de redução de dados que impõem uma severa penalidade de restauração de até 4 a 10 vezes em comparação com a velocidade de backup. Freqüentemente, os clientes descobrem essa limitação de recuperação nos piores momentos possíveis.

A plataforma VAST permite que as organizações restaurem 50 vezes mais rápido do que os PBBAs legados. Com suporte para recursos avançados de proteção de dados, como bloqueio de objetos, snapshots à prova de ransomware e recursos de recuperação instantânea, o VAST é a base para uma estratégia de proteção de dados preparada para o futuro.

Principais Benefícios

  • Economia Flash Revolucionária.
  • Restaurações 50× mais rápidas.
  • Proteja os dados contra ransomware.
  • Acelere backups em qualquer escala.
  • Obtenha informações do backup.
  • Ultra-resiliente, ultra confiável.

Integração com as principais tecnologias de Backup & Recovery

All-Flash Mídia & Video Storage

A plataforma para conteúdo em tempo real

Capture, crie, catalogue, transmita e analise vídeo e conteúdos de mídia na velocidade do flash. Supere a concorrência, melhore o tempo de lançamento no mercado e monetize seus arquivos. A plataforma de dados VAST é a primeira arquitetura totalmente flash que oferece desempenho de ponta para os fluxos de trabalho de produção mais exigentes ao custo de um arquivo.

Os estúdios de mídia e transmissão atuais normalmente implantam uma combinação complexa de sistemas de armazenamento, cada um dedicado a uma pequena parte do fluxo de trabalho. Os estúdios precisam de armazenamento de streaming para alimentar aplicativos editoriais e de reprodução de alta largura de banda, armazenamento transacional para fluxos de trabalho de renderização/VFX e armazenamento grande e de baixo custo para arquivamento de mídia e armazenamento de origem VOD. Esses sistemas tornam-se silos que complicam os fluxos de trabalho, impedem a colaboração de equipes distribuídas e tornam a implementação de pipelines baseados em nuvem um desafio.

A plataforma de dados VAST combina o desempenho consistente e de baixa latência do all-flash com a economia dos sistemas de armazenamento de arquivos. Com o VAST, os estúdios podem consolidar seus requisitos de produção e arquivamento em uma plataforma única e fácil de gerenciar, que pode ser dimensionada para exabytes e, ao mesmo tempo, oferecer suporte a centenas de streams de vídeo de alta resolução ou requisitos de renderização em alta escala. Os estúdios são capazes de suportar facilmente projetos simultâneos com políticas granulares de QoS que garantem que os fluxos de trabalho de alta prioridade nunca fiquem sem desempenho.

 

Principais Benefícios

  • Tudo Flash, com economia ao nível de Archiving.
  • Gerencie bilhões de ativos com facilidade.
  • Potencialize pipelines baseados em nuvem.
  • Uma plataforma unificada e multiprotocolo.
  • Desempenho de expansão massiva.
  • Elimine camadas de armazenamento.

Integração com Diversas Tecnologías de Mídia

 

Plataforma All-Flash para IA

A plataforma de dados para a era da IA

Confiado por organizações de IA líderes mundiais para fornecer a escala, a velocidade e a confiabilidade necessárias para atender todo o pipeline de dados de IA, o VAST acelera o tempo de obtenção de insights, fornecendo a única plataforma de dados capaz de atender às necessidades de captura de dados, preparação de dados, modelo treinamento e serviço de modelos.

Cada setor está no início de uma nova era movida pela IA, graças aos avanços exponenciais na inteligência artificial. Ainda assim, a barreira de entrada é elevada para muitas organizações de TI. Novas cargas de trabalho de aprendizado de máquina, como o treinamento de modelos generativos de IA, excedem o desempenho e os recursos de escala das infraestruturas empresariais tradicionais. Os sistemas HPC baseados em sistemas de arquivos paralelos fornecem desempenho adequado, mas a complexidade e a falta de recursos empresariais tornam difícil o suporte para muitas equipes de TI.

Conheça o VAST, uma plataforma de dados de IA abrangente com desempenho e escalabilidade para os aplicativos de IA mais exigentes, combinados com tecnologias revolucionárias de eficiência de dados que reduzem o custo do flash para a economia da camada de arquivo. Quando todos os dados em todo o pipeline estão disponíveis com alto desempenho, os fluxos de trabalho de treinamento e atendimento são simplificados e o tempo de obtenção de insights é reduzido.

Principais Benefícios

  • Uma plataforma unificada e multiprotocolo.
  • Acesso de cliente otimizado para IA.
  • Suporte unificado para preparação de dados e treinamento de modelos.
  • Pipelines de dados simplificados.
  • Acesso a dados da borda à nuvem.
  • Segurança Multi-Tenant

Integração com as principais tecnologias de IA

Quero saber mais !
Queremos ouvir você !

 

Brasil
+55 (11) 2389-1106 | contato@imexperts.com.br

Av. das Nações Unidas 14261, Torre B, 25 Andar,vConj. 2501B                        São Paulo – SP | 04794-000

SCS QD 9 Torre C, Ed. Parque Cidade Corporate, 10°
Brasília – DF | 70308-200 

México
+52 (55) 9183-2049 | comercial@imexperts.com.mx

Prolongación Paseo de la Reforma 1015 - Piso 7
Lomas de Santa Fe, Cuajimalpa,
Ciudad de México | 05348