EVA-UNIT-01/EVA-Qwen2.5-32B-v0.2
EVA Qwen2.5-32B v0.2 A RP/storywriting specialist model, full-parameter finetune of Qwen2.5-32B on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and "flavor" of t...
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tuần
#1 Repository Của Tuần
#1 Repository Của Tuần
✨ EVA-Qwen2.5-32B-v0.2: Mô hình RP & viết truyện mạnh mẽ từ bộ dữ liệu đa dạng
Full-parameter fine-tune của Qwen2.5-32B, tối ưu cho RP và sáng tạo nội dung văn học.
EVA-Qwen2.5-32B-v0.2 là một mô hình ngôn ngữ lớn chuyên về RP (roleplay) và viết truyện, được huấn luyện bằng kỹ thuật full-parameter finetune từ Qwen2.5-32B. Dựa trên bộ dữ liệu Celeste 70B 0.1, mô hình đã được mở rộng đáng kể để nâng cao tính đa dạng, sáng tạo và "hương vị" cục bộ. Phiên bản 0.2 sửa chữa lỗi dữ liệu bị nhiễm ký tự không Unicode, mang lại kết quả sinh tạo ổn định hơn.
✨ Điểm nổi bật
- Fine-tune toàn bộ tham số: Sử dụng Qwen2.5-32B làm nền tảng, tinh chỉnh toàn bộ trọng số.
- Hỗn hợp dữ liệu đa dạng: Kết hợp cả dữ liệu đồng sinh và tự nhiên từ nhiều nguồn khác nhau.
- Dựa trên Celeste 70B 0.1: Mở rộng bộ dữ liệu gốc để tăng cường tính sáng tạo và đa dạng chủ đề.
- Định dạng prompt ChatML: Hỗ trợ chuẩn định dạng ChatML phổ biến trong cộng đồng.
- Giá trị sampler đề xuất: Temperature 1, Min-P 0.05, Top-A 0.2, Repetition Penalty 1.03.
- Tối ưu cho SillyTavern: Cung cấp preset ngữ cảnh và hướng dẫn sử dụng chi tiết.
- Huấn luyện nhanh chóng: Hoàn thành trong 7 giờ trên 8xH100 SXM do FeatherlessAI hỗ trợ.
💡 Vì sao đáng chú ý
EVA-Qwen2.5-32B-v0.2 nổi bật nhờ việc kết hợp sâu rộng từ bộ dữ liệu Celeste 70B 0.1, mở rộng để cải thiện khả năng sáng tạo và "hương vị" sinh học của mô hình. Phiên bản 0.2 còn khắc phục vấn đề nhiễm ký tự không Unicode từ phiên bản trước, mang lại hiệu suất ổn định và chất lượng sinh tạo cao. Mô hình phù hợp với các ứng dụng RP, viết truyện và sáng tạo nội dung văn học phong phú.
#AIFineTune #Qwen2.5 #TextGeneration #RoleplayAI #StoryWriting #TiniX
Similar Projects
Discover other similar projects and AI models.
Qwen3-0.6B Qwen3 Highlights Qwen3 is the latest generation of large language models in Qwen series, offering a comprehensive suite of dense and mixture-of-experts (MoE) models. Built upon extensive training, Qwen3 delivers groundbreaking advancement...
EVA Qwen2.5-32B v0.0 A RP/storywriting specialist model, full-parameter finetune of Qwen2.5-32B on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and "flavor" of t...
DeepSeek-R1 Paper Link👁️ 1. Introduction We introduce our first-generation reasoning models, DeepSeek-R1-Zero and DeepSeek-R1. DeepSeek-R1-Zero, a model trained via large-scale reinforcement learning (RL) without supervised fine-tuning (SFT) as a p...
Model Information The Meta Llama 3.1 collection of multilingual large language models (LLMs) is a collection of pretrained and instruction tuned generative models in 8B, 70B and 405B sizes (text in/text out). The Llama 3.1 instruction tuned text onl...
Try gpt-oss · Guides · Model card · OpenAI blog Welcome to the gpt-oss series, OpenAI’s open-weight models(https://openai.com/open-models) designed for powerful reasoning, agentic tasks, and versatile developer use cases. We’re releasing two flavors...
Try gpt-oss · Guides · Model card · OpenAI blog Welcome to the gpt-oss series, OpenAI’s open-weight models(https://openai.com/open-models) designed for powerful reasoning, agentic tasks, and versatile developer use cases. We’re releasing two flavors...
Model Details Meta developed and released the Meta Llama 3 family of large language models (LLMs), a collection of pretrained and instruction tuned generative text models in 8 and 70B sizes. The Llama 3 instruction tuned models are optimized for dia...
EVA LLaMA 3.33 70B v0.0 A RP/storywriting specialist model, full-parameter finetune of Llama-3.3-70B-Instruct on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and...
EVA Qwen2.5-14B v0.2 A RP/storywriting specialist model, full-parameter finetune of Qwen2.5-14B on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and "flavor" of t...