Gorengoz/bert-based-Turkish-NER

Bu model "https://github.com/stefan-it/turkish-bert" base alınarak geliştirilmiş bir NER(Varlık ismi tanıma) modelidir.

Eğitim ve validasyon verisi

Fine-tune işlemi için TDD-NER-202112-CC-001 veri seti kullanılmıştır.

@article{tur-etal-2003-milliyet, title={A statistical information extraction system for Turkish}, volume={9}, DOI={10.1017/S135132490200284X}, number={2}, journal={Natural Language Engineering}, publisher={Cambridge University Press}, author={Tür, Gökhan and Hakkani-Tür, Dilek and Oflazer, Kemal}, year={2003}, pages={181–210} }

Hiperparametreler

custom_labels = ["O","B-LOC","I-LOC","B-ORG","I-ORG","B-PER","I-PER"]

modelargs = { "trainbatchsize": 32, "evalbatchsize": 32, "numtrainepochs": 3, "seed":1, "savesteps": 625, "overwriteoutputdir": True, "output_dir": "/content/Model" }

Nasıl Kullanılacağı

from transformers import pipeline

pipe = pipeline("token-classification", model="Gorengoz/bert-based-Turkish-NER")
pipe("Entity X'in müşteri hizmetleri hızlı ve etkili, Entity Y'nin ürün kalitesi çok kötü.",aggregation_strategy = "simple"")