Обзор библиотеки Transformers, примеры запуска различных моделей

Подробный разбор компонентов библиотеки Transformers на примере анализа сентимента Материалы к видео: Больше материалов по NLP: Ml16EbQoepcwMGNi 00:00 - AutoTokenizer (токенизация) 00:24 - загрузка модели по названию из HuggingFace Hub 00:45 - функция batch_encode_plus 01:05 - что такое token_type_ids 02:03 - padding 02:31 - convert_ids_to_tokens 03:09 - AutoModel (AutoModelForSequenceClassification) 03:50 - пример анализа тональности 04:03 - pipeline в библиотеке Transformers