CoolFace
Modelpublic

nam7197/vi-nli-xlm-roberta-base

sourceHugging Faceupdated 4y agoView on Hugging Face
0likes24downloads
Model Card

Dataset: https://huggingface.co/datasets/xnli/viewer/vi/train

Github: https://github.com/namlv97/vi-nli-xlm-roberta-base

python
>>> import torch
>>> from transformers import AutoTokenizer,AutoModelForSequenceClassification
>>> tokenizer = AutoTokenizer.from_pretrained('xlm-roberta-base')
>>> model=AutoModelForSequenceClassification.from_pretrained('nam7197/vi-nli-xml-roberta-base')
>>> premise="Vâng, tôi thậm chí không nghĩ về điều đó, nhưng tôi đã rất thất vọng, và, tôi lại nói chuyện với anh ta lần nữa."
>>> hypothesis="Tôi đã không nói chuyện với anh ta nữa."
>>> label=2 #contradiction
>>> inputs=tokenizer(premise,hypothesis,return_tensors='pt')
>>> model.eval()
>>> with torch.no_grad():
>>>   outputs=model(**inputs)
>>>   probs= torch.nn.functional.softmax(outputs.logits,dim=-1)
>>>   pred_label=torch.argmax(probs,dim=-1)

Performance

precisionrecallf1-scoresupport
entailment0.792560.777840.785131670
neutral0.771920.701200.734861670
contradiction0.764290.848500.804201670
accuracy0.775855010
macro avg0.776260.775850.774735010
weighted avg0.776260.775850.774735010