PEAK:AIO e LANL lançam servidor de metadados Lattice de código aberto
2026-06-04 09:33
Favoritos

De acordo com pt.wedoany.com-Em 3 de junho de 2026, em Manchester, Reino Unido, a PEAK:AIO lançou o primeiro servidor de metadados pNFS de código aberto do setor, o Lattice. O produto foi desenvolvido em colaboração de longo prazo entre a PEAK:AIO e o Laboratório Nacional de Los Alamos (Los Alamos National Laboratory, LANL), utilizando uma nova arquitetura distribuída de metadados, projetada para eliminar os gargalos de desempenho persistentes em infraestruturas de IA e computação de alto desempenho em larga escala.

As demandas atuais de infraestrutura de IA estão remodelando o mercado de armazenamento. Cargas de trabalho de IA — incluindo treinamento de grandes modelos, inferência em larga escala e aplicações de IA agêntica — exigem acesso ultrarrápido, paralelo e continuamente confiável a conjuntos massivos de dados. A capacidade de computação GPU expandiu-se significativamente, mas a camada de armazenamento, especialmente a arquitetura que coordena os metadados, não acompanhou esse ritmo. Em 23.000 clusters de produção, a utilização média de GPU é de apenas 5%, principalmente não por falta de hardware, mas porque os sistemas de software que fornecem dados não conseguem acompanhar. O gargalo de metadados em sistemas de armazenamento paralelo tornou-se um fator crítico limitante para o desempenho de cargas de trabalho de IA.

O Lattice, construído como um servidor de metadados pNFS no espaço do usuário baseado em Linux, é projetado para escalabilidade, modularidade e coordenação distribuída. Lançado sob a Fundação Linux, este projeto de código aberto divide o plano de controle de metadados em quatro camadas distintas: Plano de Estado do Protocolo, Núcleo do Lattice, Autoridade do Catálogo MD e Plano de Controle do Servidor de Dados. Esta arquitetura torna, pela primeira vez, o serviço de metadados elástico, permitindo que seja iniciado dinamicamente a qualquer momento em hardware comum, escalando de um único servidor para mais de 1.000 servidores de metadados. O anúncio será feito oficialmente na Conferência Internacional de Sistemas e Tecnologias de Armazenamento em Massa MSST 2026, em Santa Clara, Califórnia. O Lattice é lançado em parceria com a Fundação Linux, visando acelerar a inovação da comunidade em torno de infraestruturas de armazenamento escaláveis para IA e HPC.

Gary Grider, chefe da Divisão de Computação de Alto Desempenho do LANL, afirmou que a singularidade do pNFS-Lattice reside no fato de ser um servidor de metadados pNFS de código aberto, no espaço do usuário e escalável, construído do zero, aproveitando o conceito de separar o serviço de metadados pNFS do armazenamento de metadados (diretório). Como o serviço é separado dos metadados persistentes e executado no espaço do usuário, é ideal como um serviço temporário que pode ser redimensionado dinamicamente. As características de código aberto e espaço do usuário reduzem a barreira de participação da comunidade. Testes de desempenho realizados durante a colaboração mostraram um aumento de 70 GB/s para 400 GB/s. No hardware de produção existente do LANL, a taxa de transferência de uma configuração Linux NFS padrão estava entre 3 GB/s e 7 GB/s, enquanto a arquitetura pNFS Lattice alcançou 40 GB/s nos mesmos servidores. Testes adicionais com uma universidade técnica de ponta mostraram uma melhoria de desempenho superior a 300% em cargas de trabalho intensivas em metadados.

Em benchmarks de metadados padrão, como o MDtest, testes iniciais mostraram uma melhoria de até 10 vezes em comparação com o Linux KNFSD padrão. Os recursos avançados do Lattice alcançaram melhorias superiores a 300% em cargas de trabalho tradicionalmente difíceis e intensivas em metadados. Combinado com seu modelo elástico de expansão temporária de metadados (que permite adicionar dinamicamente serviços de metadados conforme a demanda), o Lattice supera as limitações do design tradicional de dados de alto desempenho. Roger Cummings, presidente e CEO da PEAK:AIO, afirmou que o mercado de infraestrutura de IA está se aproximando de um ponto de inflexão, onde apenas expandir a computação não traz mais ganhos significativos de eficiência. A parceria com o LANL baseia-se na ideia de que, para que a infraestrutura de IA escale eficientemente, os metadados devem ser elásticos, distribuídos e abertos. O Lattice representa essa mudança. Além disso, a PEAK:AIO também oferecerá uma versão comercial com suporte, o PEAK:AIO pNFS, que é um superconjunto do Lattice, voltado para organizações que precisam de SLAs de nível empresarial e um conjunto completo de funcionalidades sem gerenciar diretamente a pilha de código aberto. O modelo de negócios é semelhante à relação entre o Lustre e suas distribuições comerciais, mantendo ao mesmo tempo uma base de padrões totalmente abertos.

Mark Klarzynski, Diretor de Estratégia e Cofundador da PEAK:AIO, destacou que a principal inovação do Lattice é decompor o que tradicionalmente estava bloqueado em um único servidor de metadados em quatro camadas distintas. Essa separação libera a capacidade de expansão inteligente de uma forma que as arquiteturas de armazenamento tradicionais nunca foram projetadas para suportar. Os serviços de metadados e dados podem agora tornar-se participantes distribuídos e elásticos, capazes de escalar com a carga de trabalho, fazer failover e se adaptar. A PEAK:AIO é uma empresa de armazenamento de IA definido por software sediada em Manchester, Reino Unido, cuja plataforma oferece armazenamento de IA de alto desempenho, desde um único servidor até escala de exabytes, em qualquer hardware padrão do setor. Já está implantada no Laboratório Nacional de Los Alamos, NHS AIDE, Oxford Robotics Institute, Carnegie Mellon University, University of Liverpool, University of Strathclyde MediForge Hub e na Sociedade Zoológica de Londres. O Laboratório Nacional de Los Alamos é um centro de pesquisa e desenvolvimento financiado pelo governo federal, multiprograma, subordinado à Administração Nacional de Segurança Nuclear do Departamento de Energia dos EUA, com responsabilidades primárias que incluem o projeto de armas nucleares, resposta a ameaças nucleares e a realização de trabalhos de ciência, tecnologia e engenharia para a segurança nacional.

Este texto foi elaborado por Wedoany. Qualquer citação por IA deve indicar a fonte “Wedoany”. Em caso de infração ou outros problemas, informe-nos prontamente, por favor. O conteúdo será corrigido ou removido. E-mail: news@wedoany.com