Datasets documentation
Conjuntos de dados
Conjuntos de dados
🤗 Datasets é uma biblioteca para acessar e compartilhar facilmente conjuntos de dados de IA para tarefas de Áudio, Visão Computacional e Processamento de Linguagem Natural (NLP).
Carregue um dataset em uma única linha de código e utilize nossos poderosos métodos de processamento e streaming de dados para preparar rapidamente seu dataset para treinamento em um modelo de deep learning. Com base no formato Apache Arrow, processe datasets grandes com leituras de zero-copy, sem restrições de memória, para obter velocidade e eficiência ideais. Também oferecemos uma integração profunda com o Hugging Face Hub, permitindo que você carregue e compartilhe facilmente um dataset com a comunidade de machine learning.
Encontre seu dataset hoje no Hugging Face Hub e faça uma análise detalhada dele com o visualizador ao vivo.
Aprenda os fundamentos e familiarize-se com o carregamento, o acesso e o processamento de um conjunto de dados. Comece aqui se você está usando o 🤗 Datasets pela primeira vez!
Guias práticos para ajudar você a alcançar um objetivo específico. Dê uma olhada nestes guias para aprender a usar o 🤗 Datasets para resolver problemas do mundo real.
Explicações de alto nível para construir uma melhor compreensão sobre tópicos importantes, como o formato de dados subjacente, o cache e como os conjuntos de dados são gerados.
Descrições técnicas de como as classes e os métodos do 🤗 Datasets funcionam.