Tutoriais de processamento de texto do TensorFlow

Os tutoriais de processamento de texto do TensorFlow fornecem instruções passo a passo para resolver problemas comuns de processamento de texto e linguagem natural (NLP).

O TensorFlow fornece duas soluções para processamento de texto e linguagem natural: KerasNLP e TensorFlow Text. KerasNLP é uma biblioteca NLP de alto nível que inclui todos os modelos baseados em Transformer mais recentes, bem como utilitários de tokenização de nível inferior. É a solução recomendada para a maioria dos casos de uso de PNL.

Se precisar de acesso a ferramentas de processamento de texto de nível inferior, você pode usar o TensorFlow Text. O TensorFlow Text fornece uma coleção de operações e bibliotecas para ajudá-lo a trabalhar com entradas em formato de texto, como strings de texto bruto ou documentos.

KerasNLP

  • Introdução ao KerasNLP : aprenda o KerasNLP realizando análises de sentimento em níveis progressivos de complexidade, desde o uso de um modelo pré-treinado até a construção do seu próprio Transformer do zero.

geração de texto

classificação de texto

  • Classifique o texto com o BERT : faça o ajuste fino do BERT para realizar a análise de sentimento em um conjunto de dados de resenhas de filmes IMDb em texto simples.
  • Classificação de texto com um RNN : treine um RNN para realizar análises de sentimento em resenhas de filmes IMDb.
  • Métricas do TF.Text : saiba mais sobre as métricas disponíveis por meio do TensorFlow Text. A biblioteca contém implementações de métricas de similaridade de texto, como ROUGE-L, que podem ser usadas para avaliação automática de modelos de geração de texto.

PNL com BERT

Incorporações