Todas as notícias

Detecção e recuperação de corrupção silenciosa de dados no Amazon SageMaker HyperPod

Detecção e recuperação de corrupção silenciosa de dados no Amazon (nova aba) SageMaker HyperPod

Imagem da publicação original · AWS — Machine Learning

Anúncio da empresa · Fonte primária

A corrupção silenciosa de dados é uma falha de GPU que retorna números incorretos, porém plausíveis, sem nenhum erro, envenenando silenciosamente o treinamento distribuído. Este post adiciona três verificações a um loop DDP do PyTorch para detectá-la, localizar o nó com falha no Amazon (nova aba) SageMaker HyperPod e entregar o nó à recuperação automática para substituição.

Ler mais (nova aba)Tradução do trecho disponibilizado pela fonte · validação automática

A notícia é o começo

Continue por aqui