devngho/korean-webtext-edu

🇰🇷🌐📚 korean-webtext-edu HAERAE-HUB/KOREAN-WEBTEXT를 devngho/ko_edu_classifier_v2_nlpai-lab_KoE5 모델로 평가한 데이터셋 불러오기 from datasets import load_dataset ds = load_dataset("devngho/korean-webtext-edu", name="scored_over_3", split="train") 성능 예정 컴퓨팅 Google Cloud TPU, transformers, JAX, tpuswarm 하드웨어 TPU v4-8 x 4 instances, 약 35분 소요 이 연구는 Google의 TPU Research Cloud (TRC)의 Cloud TPU 제공으로 수행되었습니다. ⚡ 라이선스 원본… See the full description on the dataset page: https://huggingface.co/datasets/devngho/korean-webtext-edu.