T5-Large — это крупная трансформерная модель, разработанная компанией Google Research, которая предназначена для выполнения разнообразных задач по обработке естественного языка (NLP), таких как машинный перевод, обобщение текстов, классификация предложений и другие. Модель является частью семейства моделей Text-to-Text Transfer Transformer (T5) и демонстрирует высокую производительность благодаря своей архитектуре и большому количеству параметров.
pip install transformers tensorflow
from transformers import T5Tokenizer, T5ForConditionalGenerationtokenizer = T5Tokenizer.from_pretrained("t5-large")model = T5ForConditionalGeneration.from_pretrained("t5-large")
input_text = "Переведите предложение 'The cat is playing' на русский язык."inputs = tokenizer(input_text, return_tensors="pt")outputs = model.generate(inputs["input_ids"], max_length=40)decoded_output = tokenizer.decode(outputs[0], skip_special_tokens=True)
Следуя этим шагам, вы сможете эффективно использовать модель T5-Large для ваших задач в области обработки естественного языка.