Speaker
Pawel Przewlocki
(NCBJ)
Description
Notatnik: using-tokenizer.ipynb
Modele: Roberta (polska i angielska), BERT, itp.
• podstawy działania Google Collab, ładowanie bibliotek, ściąganie modeli
• ładowanie modeli tokenizacji
• rozumienie outputu tokenizatorów
• porównanie działania różnych modeli