turkish-nlp-suite/tr_core_news_lg
Official HF repo for spaCy Turkish model trcorenewslg. Turkish large sized pipeline for TrSpaCy. Components: tok2vec, tagger, morphologizer, lemmatizer, parser, ner | Feature | Description | | --- | --- | | Name | trcorenewslg | | Version | 3.4.2 | |...
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tuần
#1 Repository Của Tuần
#1 Repository Của Tuần
🚀 Mô hình spaCy tiếng Thổ Nhĩ Kỳ cỡ lớn với pipeline NLP đầy đủ
Mô hình
tr_core_news_lglà giải pháp NLP thứ nhất hỗ trợ toàn diện tiếng Thổ Nhĩ Kỳ với độ chính xác cao.
Đây là mô hình ngôn ngữ lớn chính thức trên Hugging Face dành cho thư viện spaCy, phát triển bởi Duygu Altinok từ dự án turkish-nlp-suite. Mô hình hỗ trợ đầy đủ các nhiệm vụ xử lý ngôn ngữ tự nhiên (NLP) cho tiếng Thổ Nhĩ Kỳ bao gồm: tách từ, gán nhãn từ loại (POS), phân tích hình thái, chuẩn hóa từ (lemmatize), phân tích cú pháp (parse) và nhận diện thực thể có tên (NER).
✨ Điểm nổi bật
- Pipeline đầy đủ:
tok2vec,tagger,morphologizer,trainable_lemmatizer,parser,ner - Độ chính xác cao: F1 NER đạt 0.889, độ chính xác POS (UPOS) 0.907
- Vector từ lớn: 200.000 từ duy nhất, mỗi từ được biểu diễn bằng vector 300 chiều
- Nguồn dữ liệu đa dạng: Kết hợp từ UD Turkish BOUN, Turkish Wiki NER dataset, PANX/WikiANN và Floret word vectors
- Hỗ trợ tiếng Thổ Nhĩ Kỳ phức tạp: Xử lý tốt cú pháp và hình thái tiếng Thổ Nhĩ Kỳ
- Giấy phép mở: CC BY-SA 4.0, sử dụng tự do cho nghiên cứu và thương mại
💡 Vì sao đáng chú ý
Khác với các mô hình NLP khác chỉ hỗ trợ một vài nhiệm vụ, tr_core_news_lg cung cấp một pipeline hoàn chỉnh giúp giảm thiểu công sức tích hợp nhiều công cụ riêng lẻ. Điều này đặc biệt quý giá với tiếng Thổ Nhĩ Kỳ — ngôn ngữ có cú pháp phong phức và hệ thống hình thái phong phú.
Mô hình phù hợp cho các ứng dụng như xây dựng chatbot, hệ thống hỗ trợ khách hàng bằng tiếng Thổ Nhĩ Kỳ, hoặc nghiên cứu ngôn ngữ học số. Phiên bản lớn với vector 300 chiều giúp nắm bắt tốt các mối quan hệ ngữ nghĩa giữa các từ.
#spaCy #TurkishNLP #TokenClassification #NER #TiniX
Similar Projects
Discover other similar projects and AI models.
bert-base-NER If my open source models have been useful to you, please consider supporting me in building small, useful AI models for everyone (and help me afford med school / help out my parents financially). Thanks! Model description bert-base-NER...
OpenAI Privacy Filter OpenAI Privacy Filter is a bidirectional token-classification model for personally identifiable information (PII) detection and masking in text. It is intended for high-throughput data sanitization workflows where teams need a...
WikiNEuRal: Combined Neural and Knowledge-based Silver Data Creation for Multilingual NER This is the model card for the EMNLP 2021 paper WikiNEuRal: Combined Neural and Knowledge-based Silver Data Creation for Multilingual NER(https://aclanthology....
Contact william (at) integrinet dot org Piiranha-v1: Protect your personal information! Piiranha (cc-by-nc-nd-4.0 license) is trained to detect 17 types of Personally Identifiable Information (PII) across six languages. It successfully catches 98.27...
This model predicts the punctuation of English, Italian, French and German texts. We developed it to restore the punctuation of transcribed spoken language. This multilanguage model was trained on the Europarl Dataset(https://huggingface.co/datasets/...
deberta-med-ner-2 This model is a fine-tuned version of DeBERTa(https://huggingface.co/microsoft/deberta-v3-base) on the PubMED Dataset. Model description Medical NER Model finetuned on BERT to recognize 41 Medical entities. Training hyperparameters...
About the Model An English Named Entity Recognition model, trained on Maccrobat to recognize the bio-medical entities (107 entities) from a given text corpus (case reports etc.). This model was built on top of distilbert-base-uncased - Dataset: Macc...
LLMLingua-2-Bert-base-Multilingual-Cased-MeetingBank This model was introduced in the paper LLMLingua-2: Data Distillation for Efficient and Faithful Task-Agnostic Prompt Compression (Pan et al, 2024)(https://arxiv.org/abs/2403.12968). It is a BERT...
xlm-roberta-large-finetuned-conll03-english Table of Contents 1. Model Details(model-details) 2. Uses(uses) 3. Bias, Risks, and Limitations(bias-risks-and-limitations) 4. Training(training) 5. Evaluation(evaluation) 6. Environmental Impact(environme...