EVA-UNIT-01/EVA-Qwen2.5-14B-v0.2
EVA Qwen2.5-14B v0.2 A RP/storywriting specialist model, full-parameter finetune of Qwen2.5-14B on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and "flavor" of t...
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tuần
#1 Repository Của Tuần
#1 Repository Của Tuần
EVA-Qwen2.5-14B-v0.2: Chuyên gia Roleplay và Viết Truyện từ Qwen2.5
Mô hình fine-tune toàn bộ tham số của Qwen2.5-14B, tối ưu cho roleplay và sáng tạo nội dung văn học.
EVA-Qwen2.5-14B-v0.2 là một mô hình chuyên biệt về roleplay và viết truyện, được huấn luyện bằng kỹ thuật full-parameter finetuning từ Qwen2.5-14B trên một hỗn hợp dữ liệu t合成 và tự nhiên. Dựa trên bộ dữ liệu Celeste 70B 0.1, mô hình đã được mở rộng để nâng cao tính đa dạng, sáng tạo và "hương vị" của đầu ra.
✨ Điểm nổi bật
- Fine-tune toàn bộ tham số: Sử dụng Qwen2.5-14B làm mô hình cơ sở.
- Tập trung roleplay & viết truyện: Tối ưu cho các tác vụ sáng tạo nội dung và nhân vật ảo.
- Cải tiến phiên bản 0.2: Sử dụng bộ dữ liệu tinh chỉnh từ phiên bản 32B 0.2, nâng cao đáng kể độ mạch lạc, khả năng tuân thủ lệnh và hiểu biết ngữ cảnh dài.
- Định dạng prompt ChatML: Hỗ trợ chuẩn định dạng trò chuyện phổ biến.
- Cấu hình sampler đề xuất: Temperature 0.8, Min-P 0.05, Top-A 0.3, Repetition Penalty 1.03.
- Huấn luyện nhanh chóng: Hoàn thành trong 3 giờ trên 8xH100 SXM do FeatherlessAI hỗ trợ.
- Bộ dữ liệu đa dạng: Bao gồm Celeste, Opus Instruct, SynthRP, Synthstruct, ChatGPT-4o Writing Prompts, Dolphin và nhiều nguồn khác.
- Hỗ trợ công cụ tích hợp: Tương thích với Axolotl và các preset SillyTavern.
💡 Vì sao đáng chú ý
EVA-Qwen2.5-14B-v0.2 khác biệt nhờ việc kết hợp một bộ dữ liệu đa dạng cả từ tự nhiên lẫn t合成, giúp mô hình phát triển khả năng sáng tạo và cá nhân hóa nội dung xuất ra. Phiên bản 0.2 mang lại những cải tiến đáng kể về độ mạch lạc và khả năng xử lý ngữ cảnh dài nhờ việc tinh chỉnh lại bộ dữ liệu từ phiên bản 32B.
Mô hình phù hợp với các ứng dụng như xây dựng nhân vật ảo, viết truyện tương tác, và sáng tạo nội dung giải trí đòi hỏi sự sâu sắc và linh hoạt trong ngôn ngữ.
#AIA #Qwen2.5 #Roleplay #Storytelling #OpenSource #TiniX
Dự án tương tự
Khám phá các dự án và mô hình AI khác có sự tương đồng.
Qwen3-0.6B Qwen3 Highlights Qwen3 is the latest generation of large language models in Qwen series, offering a comprehensive suite of dense and mixture-of-experts (MoE) models. Built upon extensive training, Qwen3 delivers groundbreaking advancement...
EVA Qwen2.5-32B v0.2 A RP/storywriting specialist model, full-parameter finetune of Qwen2.5-32B on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and "flavor" of t...
DeepSeek-R1 Paper Link👁️ 1. Introduction We introduce our first-generation reasoning models, DeepSeek-R1-Zero and DeepSeek-R1. DeepSeek-R1-Zero, a model trained via large-scale reinforcement learning (RL) without supervised fine-tuning (SFT) as a p...
Model Information The Meta Llama 3.1 collection of multilingual large language models (LLMs) is a collection of pretrained and instruction tuned generative models in 8B, 70B and 405B sizes (text in/text out). The Llama 3.1 instruction tuned text onl...
Try gpt-oss · Guides · Model card · OpenAI blog Welcome to the gpt-oss series, OpenAI’s open-weight models(https://openai.com/open-models) designed for powerful reasoning, agentic tasks, and versatile developer use cases. We’re releasing two flavors...
Try gpt-oss · Guides · Model card · OpenAI blog Welcome to the gpt-oss series, OpenAI’s open-weight models(https://openai.com/open-models) designed for powerful reasoning, agentic tasks, and versatile developer use cases. We’re releasing two flavors...
Model Details Meta developed and released the Meta Llama 3 family of large language models (LLMs), a collection of pretrained and instruction tuned generative text models in 8 and 70B sizes. The Llama 3 instruction tuned models are optimized for dia...
EVA LLaMA 3.33 70B v0.0 A RP/storywriting specialist model, full-parameter finetune of Llama-3.3-70B-Instruct on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and...
EVA LLaMA 3.33 70B v0.1 A RP/storywriting specialist model, full-parameter finetune of Llama-3.3-70B-Instruct on mixture of synthetic and natural data. It uses Celeste 70B 0.1 data mixture, greatly expanding it to improve versatility, creativity and...