De acordo com pt.wedoany.com-O Centro de Computação Climática da Alemanha (Deutsches Klimarechenzentrum, DKRZ) implementou o sistema operacional VAST AI para modernizar seu ambiente de computação de alto desempenho na área de pesquisa climática.
O DKRZ é o centro de computação de alto desempenho dedicado à ciência climática na Alemanha, fornecendo serviços de computação e dados para projetos de pesquisa climática nacionais e internacionais. O centro gerencia mais de 250 petabytes de dados climáticos, opera o Centro Mundial de Dados Climáticos e desempenha um papel fundamental no ecossistema global de pesquisa climática por meio de iniciativas como a Earth System Grid Federation.
Com modelos climáticos cada vez mais complexos e a inteligência artificial começando a remodelar os fluxos de trabalho científicos, os centros de computação de pesquisa enfrentam a pressão de apoiar mais usuários, mais dados e ambientes de desenvolvimento mais exigentes. Para o DKRZ, esse desafio não se limita apenas às saídas das simulações de maior escala. Os pesquisadores também precisam de acesso confiável aos seus ambientes de trabalho diários, incluindo diretórios pessoais, pilhas de software, ambientes Python, espaços de projeto compartilhados, repositórios de código e scripts de visualização, que são a base para a realização da pesquisa científica.
O DKRZ escolheu a VAST para substituir e modernizar seus diretórios pessoais e ambientes de software de computação de alto desempenho, com o objetivo de fornecer aos pesquisadores uma base de trabalho diário mais confiável, ao mesmo tempo que oferece à equipe de infraestrutura uma plataforma de gerenciamento mais simples e eficiente.
Michael Boettinger, Diretor de Visualização e Divulgação do DKRZ, afirmou que a ciência climática não depende apenas da capacidade bruta de computação; os pesquisadores precisam de acesso confiável aos ambientes para desenvolver modelos, construir software, preparar fluxos de trabalho e analisar resultados. Com a VAST, o DKRZ pode oferecer ambientes modernos de diretórios pessoais e software, proporcionando aos usuários maior capacidade, melhor confiabilidade e menos limitações técnicas. Manter o ambiente principal continuamente disponível é uma melhoria significativa.
Para o DKRZ, a decisão de implementar a VAST decorreu de sua capacidade de plataforma completa, incluindo snapshots, redução de dados, monitoramento, facilidade de gerenciamento, atualizações sem interrupção e suporte eficaz para fluxos de trabalho intensivos em arquivos pequenos. Esses recursos são particularmente críticos em ambientes de pesquisa, onde os usuários frequentemente criam muitos ambientes de software e Python semelhantes, mas não idênticos, gerando um grande número de arquivos pequenos, cujo gerenciamento é ineficiente em sistemas tradicionais.
Anna Fuchs, Engenheira de I/O e Armazenamento HPC do DKRZ, destacou que eles não buscam apenas desempenho, mas também um sistema adequado para o futuro, com a combinação certa de recursos, confiabilidade e simplicidade de gerenciamento. Snapshots, monitoramento, compressão e redução de dados são importantes, mas o valor da VAST em integrar essas funcionalidades em uma única plataforma reside em permitir que os usuários se concentrem no trabalho, em vez de limitações técnicas e possíveis paradas.
O DKRZ já observou efeitos significativos da capacidade de redução de dados da VAST. No ambiente de usuários em produção, o centro observou um fator de redução médio de aproximadamente 5,5x, e ambientes específicos de desenvolvimento e construção de software alcançaram fatores de redução de cerca de 20x ou mais. Isso permite que o DKRZ ofereça mais capacidade disponível para os fluxos de trabalho dos pesquisadores, sem simplesmente adicionar hardware.
A plataforma também permite que o DKRZ introduza ambientes compartilhados entre diretórios pessoais individuais e pilhas de software globais, permitindo que equipes de projeto mantenham ambientes de software e Python comuns, sem a necessidade de replicar arquivos semelhantes entre os usuários.
O VAST AI OS permite que o DKRZ forneça aos pesquisadores acesso ininterrupto a ambientes de pesquisa críticos. Por meio de atualizações sem interrupção e design de sistema resiliente, a VAST, juntamente com o VAST DataSpace, garante que diretórios pessoais, scripts e ambientes de software estejam continuamente disponíveis. Sua arquitetura de alta IOPS lida eficientemente com cargas de trabalho intensivas em arquivos pequenos, como ambientes Python e sistemas de construção. A compressão integrada, deduplicação e redução baseada em similaridade aumentam a capacidade efetiva. As atualizações contínuas de software permitem manutenção e upgrades sem a necessidade de colocar regularmente o ambiente do usuário offline. O monitoramento, snapshots e funcionalidades de catálogo integrados proporcionam aos administradores maior visibilidade e controle.
O DKRZ também está explorando outros casos de uso da VAST, incluindo serviços internos e fluxos de trabalho relacionados a código que exigem acesso confiável por pesquisadores e colaboradores. O centro está avaliando mais funcionalidades da plataforma para considerar como a VAST pode apoiar as necessidades futuras de infraestrutura de pesquisa.
Christopher Huggins, Diretor Geral de IA e HPC para a região EMEA da VAST Data, afirmou que os centros de computação de pesquisa são solicitados a apoiar mais usuários, mais dados, ambientes de software mais complexos e fluxos de trabalho cada vez mais impulsionados por IA, muitas vezes com equipes e orçamentos limitados. O DKRZ entende que a infraestrutura de pesquisa moderna não depende apenas da computação; a camada de dados não é apenas uma questão de armazenamento de back-end, mas a base sobre a qual os pesquisadores desenvolvem, colaboram e transformam a computação em insights científicos.
À medida que a ciência climática entra em uma nova era de modelagem de maior resolução, conjuntos de dados maiores e fluxos de trabalho de pesquisa auxiliados por IA, o DKRZ está construindo, com a ajuda da VAST, uma base mais confiável, eficiente e flexível para a computação científica, e planeja expandir sua escala.
A VAST Data é uma empresa de sistemas operacionais de IA que alimenta a próxima geração de sistemas inteligentes por meio de uma pilha de infraestrutura de software unificada, projetada especificamente para liberar todo o potencial da IA. O VAST AI OS integra serviços fundamentais de dados e computação, bem como a execução de agentes, em uma plataforma escalável, permitindo que as organizações implantem agentes de IA globalmente, facilitando sua comunicação, raciocinando sobre dados em tempo real e automatizando fluxos de trabalho complexos. A VAST é baseada em sua arquitetura DASE inovadora, a primeira arquitetura de sistema verdadeiramente paralela e distribuída do mundo, projetada para eliminar as compensações entre desempenho, escala, simplicidade e resiliência.
Este texto foi elaborado por Wedoany. Qualquer citação por IA deve indicar a fonte “Wedoany”. Em caso de infração ou outros problemas, informe-nos prontamente, por favor. O conteúdo será corrigido ou removido. E-mail: news@wedoany.com
