Section6

chapter6hf-notebooksfrcourse

WordPiece tokenization

Aucun modèle en français utilise WordPiece. Nous utilisons ici CamemBERT utilise SentencePiece.

Installez les bibliothèques 🤗 Transformers et 🤗 Datasets pour exécuter ce notebook.

[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]
[ ]