tmquan/anle-toaan-gov-vn
Vietnamese Án lệ Corpus — anle.toaan.gov.vn 🇻🇳 Tóm tắt. Bộ dữ liệu đa cấp của các bản án + án lệ Việt Nam thu thập từ cổng anle.toaan.gov.vn của Tòa án nhân dân tối cao. Mỗi văn bản pháp lý đi kèm markdown đã chuẩn hoá tiếng Việt (NFC + chính tả hiện đại) và lớp cấu trúc phân cấp đầy đủ: document → section → paragraph → sentence. Bộ dữ liệu ship bốn cấu hình HF tương ứng bốn giai đoạn pipeline: documents (mặc định) · sentences (mức câu) · embed (vector 2048-D) · reduce (PCA /… See the full description on the dataset page: https://huggingface.co/datasets/tmquan/anle-toaan-gov-vn.
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tháng
#1 Repository Của Tháng
#1 Repository Của Tháng
📊 Bộ dữ liệu pháp lý Việt Nam từ Tòa án Nhân dân Tối cao
Bộ dữ liệu án lệ + bản án gồm 1,963 văn bản, 273,379 câu, được chuẩn hoá tiếng Việt NFC và phân cấp chi tiết từ document đến câu.
Bộ dữ liệu anle-toaan-gov-vn thu thập từ cổng anle.toaan.gov.vn của Tòa án nhân dân tối cao. Mỗi văn bản đi kèm markdown đã chuẩn hoá (NFC + chính tả hiện đại) và lớp cấu trúc phân cấp đầy đủ: document → section → paragraph → sentence, đồng thời cung cấp bốn cấu hình Hugging Face tương ứng với bốn giai đoạn pipeline: documents (mặc định), sentences, embed (vector 2048-D), và reduce (PCA/t-SNE/UMAP + HDBSCAN).
✨ Điểm nổi bật
- Cấu trúc phân cấp: Mỗi văn bản được chia thành section → paragraph → sentence, kèm ID ổn định và vị trí ký tự trỏ về markdown.
- Markdown chuẩn hoá: Tiếng Việt được xử lý NFC và cập nhật chính tả hiện đại.
- Bốn cấu hình pipeline: Hỗ trợ từ dữ liệu gốc, câu, embedding đến giảm chiều và phân cụm.
- Vector 2048-D: Cung cấp embedding cho mỗi tài liệu.
- Giảm chiều + phân cụm: Hỗ trợ PCA, t-SNE, UMAP và HDBSCAN.
- Metadata phong phú: Bao gồm loại văn bản, lĩnh vực án, cấp xét xử, cấp toà, năm, ngày phát hành, và tác quyền.
- Dữ liệu NER: Trích xuất thực thể và tham chiếu điều luật bằng regex.
- Theo dõi tiền lệ: 51 văn bản được gán số án lệ.
💡 Vì sao đáng chú ý
Không chỉ là bộ dữ liệu văn bản pháp lý, mà còn là nền tảng có cấu trúc phân cấp chi tiết, hỗ trợ toàn bộ pipeline từ xử lý ngôn ngữ đến phân tích nhúng dẫn dắt. Đặc biệt, việc cung cấp sẵn embedding và các phương pháp giảm chiều giúp người dùng dễ dàng khám phá, truy xuất và phân lớp án lệ.
#LegalAI #TextClassification #Vietnamese #CourtJudgment #Precedent #TiniX
Similar Projects
Discover other similar projects and AI models.
Dataset Card for GSM8K Dataset Summary GSM8K (Grade School Math 8K) is a dataset of 8.5K high quality linguistically diverse grade school math word problems. The dataset was created to support the task of question answering on basic mathematical problems that require multi-step reasoning. These problems take between 2 and 8 steps to solve. Solutions primarily involve performing a sequence of elementary calculations using basic arithmetic operations (+ − ×÷) to… See the full description on the dataset page: https://huggingface.co/datasets/openai/gsm8k.
🐋 The OpenOrca Dataset! 🐋 We are thrilled to announce the release of the OpenOrca dataset! This rich collection of augmented FLAN data aligns, as best as possible, with the distributions outlined in the Orca paper. It has been instrumental in generating high-performing model checkpoints and serves as a valuable resource for all NLP researchers and developers! Official Models Mistral-7B-OpenOrca Our latest model, the first 7B to score better overall than all… See the full description on the dataset page: https://huggingface.co/datasets/Open-Orca/OpenOrca.
OpenAssistant Conversations Dataset (OASST1) Dataset Summary In an effort to democratize research on large-scale alignment, we release OpenAssistant Conversations (OASST1), a human-generated, human-annotated assistant-style conversation corpus consisting of 161,443 messages in 35 different languages, annotated with 461,292 quality ratings, resulting in over 10,000 fully annotated conversation trees. The corpus is a product of a worldwide crowd-sourcing effort… See the full description on the dataset page: https://huggingface.co/datasets/OpenAssistant/oasst1.
Dataset Card for GLUE Dataset Summary GLUE, the General Language Understanding Evaluation benchmark (https://gluebenchmark.com/) is a collection of resources for training, evaluating, and analyzing natural language understanding systems. Supported Tasks and Leaderboards The leaderboard for the GLUE benchmark can be found at this address. It comprises the following tasks: ax A manually-curated evaluation dataset for fine-grained… See the full description on the dataset page: https://huggingface.co/datasets/nyu-mll/glue.
APIGen Function-Calling Datasets Paper | Website | Models This repo contains 60,000 data collected by APIGen, an automated data generation pipeline designed to produce verifiable high-quality datasets for function-calling applications. Each data in our dataset is verified through three hierarchical stages: format checking, actual function executions, and semantic verification, ensuring its reliability and correctness. We conducted human evaluation over 600 sampled data points… See the full description on the dataset page: https://huggingface.co/datasets/Salesforce/xlam-function-calling-60k.
a.k.a. Awesome ChatGPT Prompts This is a Dataset Repository mirror of prompts.chat — a social platform for AI prompts. 📢 Notice This Hugging Face dataset is a mirror. For the latest prompts, features, and community contributions, please visit: 🌐 Website: prompts.chat 📦 GitHub: github.com/f/awesome-chatgpt-prompts About prompts.chat is an open-source platform where users can share, discover, and collect AI prompts from the community. The project can… See the full description on the dataset page: https://huggingface.co/datasets/fka/prompts.chat.
Dataset Card for Alpaca Dataset Summary Alpaca is a dataset of 52,000 instructions and demonstrations generated by OpenAI's text-davinci-003 engine. This instruction data can be used to conduct instruction-tuning for language models and make the language model follow instruction better. The authors built on the data generation pipeline from Self-Instruct framework and made the following modifications: The text-davinci-003 engine to generate the instruction data… See the full description on the dataset page: https://huggingface.co/datasets/tatsu-lab/alpaca.
News [2025/04/22] We split the data and kept only the medical SFT dataset (medical_o1_sft.json). The file medical_o1_sft_mix.json contains a mix of medical and general instruction data. [2025/02/22] We released the distilled dataset from Deepseek-R1 based on medical verifiable problems. You can use it to initialize your models with the reasoning chain from Deepseek-R1. [2024/12/25] We open-sourced the medical reasoning dataset for SFT, built on medical verifiable problems and an… See the full description on the dataset page: https://huggingface.co/datasets/FreedomIntelligence/medical-o1-reasoning-SFT.
Dataset Card for MMLU Dataset Summary Measuring Massive Multitask Language Understanding by Dan Hendrycks, Collin Burns, Steven Basart, Andy Zou, Mantas Mazeika, Dawn Song, and Jacob Steinhardt (ICLR 2021). This is a massive multitask test consisting of multiple-choice questions from various branches of knowledge. The test spans subjects in the humanities, social sciences, hard sciences, and other areas that are important for some people to learn. This covers 57… See the full description on the dataset page: https://huggingface.co/datasets/cais/mmlu.