NousResearch/DeepHermes-AscensionMaze-RLAIF-8b-Atropos-GGUF
The following Model Card is self-generated by this model DeepHermes Feedback Maze Experiment - Atropos RL Model Overview The DeepHermes Feedback Maze Experiment - Atropos RL model is an experimental artifact fine-tuned by Nous Research using our inn...
Thành tựu nổi bật
Những danh hiệu mới nhất của dự án
#1 Repository Của Tuần
#1 Repository Của Tuần
#1 Repository Của Tuần
🧪 Mô hình RL thử nghiệm từ Nous Research với khung Atropos
Một mảnh đồ thí nghiệm từ vòng lên "ascension maze" của Nous Research, dựa trên Atropos và WildChat.
DeepHermes Feedback Maze Experiment - Atropos RL là một mô hình thử nghiệm do Nous Research tinh chỉnh bằng khung học máy tăng cường (RL) mã nguồn mở Atropos. Mô hình được huấn luyện trên bộ dữ liệu WildChat và dựa trên nền tảng Meta-Llama-3.1-8B. Đây là một tác phẩm thử nghiệm, không phù hợp cho sử dụng chung rộng rãi.
✨ Điểm nổi bật
- Atropos Framework: Khung RL mã nguồn mở của Nous Research, thiết kế để tăng cường chức năng LLM qua các phương pháp RL có cấu trúc.
- Ascension Maze: Quá trình huấn luyện thử nghiệm trên WildChat, mô phỏng một "lò đường lên" tự mô tả.
- Hỗ trợ GGUF: Xuất ra ở định dạng GGUF, tương thích với các công cụ như llama.cpp.
- Tích hợp Tool Calling & JSON Mode: Hỗ trợ gọi hàm và xuất JSON có cấu trúc.
- Reasoning & Instruct Tuning: Tinh chỉnh hướng dẫn và lý luận, dựa trên Llama 3.1.
- ChatML Format: Sử dụng định dạng trò chuyện ch chuẩn.
💡 Vì sao đáng chú ý
Đây là một mô hình thử nghiệm mang tính nghiên cứu, không phải sản phẩm hoàn chỉnh. Nó cho thấy tiềm năng của khung Atropos trong việc áp dụng RL vào LLM thông qua các ví dụ thử nghiệm như lý trí tuệ tự đặt câu hỏi hay khung không chắc chắn có cấu trúc. Phù hợp cho nghiên cứu môi trường RL, phát triển khung Atropos, hoặc khám phá hành vi mới của các mô hình sau khi được tinh chỉnh bằng RL.
#DeepLearning #ReinforcementLearning #Atropos #NousResearch #TiniX
Similar Projects
Discover other similar projects and AI models.
Hermes 3 - Llama-3.1 8B !image/jpeg(https://cdn-uploads.huggingface.co/production/uploads/6317aade83d8d2fd903192d9/bMcZ3sNNQK8SRZpHXBmwM.jpeg) Model Description Hermes 3 is the latest version of our flagship Hermes series of LLMs by Nous Research. F...
Hermes 3 - Llama-3.1 8B !image/jpeg(https://cdn-uploads.huggingface.co/production/uploads/6317aade83d8d2fd903192d9/bMcZ3sNNQK8SRZpHXBmwM.jpeg) Model Description Hermes 3 is the latest version of our flagship Hermes series of LLMs by Nous Research. F...
DeepHermes 3 - Llama-3.1 8B GGUF !image/jpeg(https://cdn-uploads.huggingface.co/production/uploads/6317aade83d8d2fd903192d9/9fxlaDxteqe3SasZ706.jpeg) Model Description THIS IS THE GGUF MODEL FOR DeepHermes-3(https://huggingface.co/NousResearch/DeepH...
DeepHermes Tool Calling Specialist - Atropos RL Model Overview The DeepHermes Tool Calling Specialist - Atropos RL model is an experimental artifact fine-tuned by Nous Research using our innovative open-source reinforcement learning framework—Atropo...
The following Model Card is self-generated by this model DeepHermes Feedback Maze Experiment - Atropos RL Model Overview The DeepHermes Feedback Maze Experiment - Atropos RL model is an experimental artifact fine-tuned by Nous Research using our inn...
Hermes 2 Pro - Llama-3 8B !image/png(https://cdn-uploads.huggingface.co/production/uploads/6317aade83d8d2fd903192d9/ggO2sBDJ8Bhc6w-zwTx5j.png) Model Description Hermes 2 Pro is an upgraded, retrained version of Nous Hermes 2, consisting of an update...
Hermes 4 — Llama-3.1 70B !image/jpeg(https://cdn-uploads.huggingface.co/production/uploads/6317aade83d8d2fd903192d9/roT9o5bMYBtQziRMlaSDf.jpeg) Model Description Hermes 4 70B is a frontier, hybrid-mode reasoning model based on Llama-3.1-70B by Nous...
all-MiniLM-L6-v2 This is a sentence-transformers(https://www.SBERT.net) model: It maps sentences & paragraphs to a 384 dimensional dense vector space and can be used for tasks like clustering or semantic search. Usage (Sentence-Transformers) Using t...
Model Information The Meta Llama 3.1 collection of multilingual large language models (LLMs) is a collection of pretrained and instruction tuned generative models in 8B, 70B and 405B sizes (text in/text out). The Llama 3.1 instruction tuned text onl...