Subword Tokenization: Byte Pair Encoding

Publié le: 11 novembre 2020
sur la chaîne: Abhishek Thakur
24,619
676

In this video, we learn how byte pair encoding works. We look at the motivation and then see how character level byte pair encoding works and we also touch byte-level BPE and wordpiece tokenization.

#BPE #BytePairEncoding #NLP

Please subscribe and like the video to help me keep motivated to make awesome videos like this one. :)

To buy my book, Approaching (Almost) Any Machine Learning problem, please visit: https://bit.ly/buyaaml

Follow me on:
Twitter:   / abhi1thakur  
LinkedIn:   / abhi1thakur  
Kaggle: https://kaggle.com/abhishek


Sur cette page du site, vous pouvez voir la vidéo en ligne Subword Tokenization: Byte Pair Encoding durée heure minute seconde en bonne qualité , qui a été Téléchargé par l'utilisateur Abhishek Thakur 11 novembre 2020, Partagez le lien avec vos amis et connaissances, sur youtube cette vidéo a déjà été regardée 24,619 fois et il a aimé 676 téléspectateurs. Bon visionnage!