Hoa Kỳ
asigalov61/Giant-Music-Transformer
[SOTA] [92% acc] 786M-8k-44L-32H multi-instrumental music transformer with true full MIDI instruments range, efficient encoding, octo-velocity and outro tokens
🎵 Giant Music Transformer: Bước đột phá SOTA trong tạo nhạc đa nhạc cụ bằng AI
Mô hình Music Transformer 786M tham số đạt 92% độ chính xác với dải MIDI đầy đủ và mã hóa hiệu quả.
Giant Music Transformer là một dự án mã nguồn mở phát triển bởi Project Los Angeles, sử dụng kiến trúc Transformer lớn với 44 tầng (44L), 32 đầu chú ý (32H) và ngữ cảnh lên đến 8192 token (8k). Mô hình hỗ trợ toàn bộ dải nhạc cụ MIDI thực sự, kết hợp kỹ thuật mã hóa hiệu quả, octo-velocity và token outro để tạo ra nhạc đa nhạc cụ chất lượng cao.
✨ Điểm nổi bật
- 786M tham số: Mô hình Transformer lớn với 44 tầng và 32 đầu chú ý, hỗ trợ ngữ cảnh 8k token.
- Dải MIDI đầy đủ: Hỗ trợ toàn bộ dải nhạc cụ MIDI thực sự, không giới hạn kênh hoặc dải nhỏ.
- Mã hóa hiệu quả: Kỹ thuật mã hóa tối ưu giảm kích thước token nhưng giữ nguyên thông tin nhạc.
- Octo-velocity: Mã hóa tốc độ bằng 8 mức độ để tăng khả năng biểu đạt động lượng.
- Token outro: Đánh dấu kết thúc bản nhạc một cách rõ ràng.
- Độ chính xác 92%: Kết quả đánh giá mô hình đạt mức SOTA.
- Hỗ trợ đa phiên bản: Original, Composer, Text-to-Music, Bulk Generator.
💡 Vì sao đáng chú ý
Giant Music Transformer nổi bật nhờ khả năng xử lý toàn bộ dải nhạc cụ MIDI và kỹ thuật mã hóa hiệu quả, giúp mô hình học sâu hơn về cấu trúc nhạc. Với 786 triệu tham số và ngữ cảnh 8k, mô hình có khả năng tạo ra các bản nhạc phong phó, tiếp tục bản nhạc và thậm chí tạo nhạc từ tiêu đề. Đây là công cụ mạnh mẽ cho nhà sáng tạo âm nhạc và nghiên cứu AI âm nhạc.
#AI #MusicTransformer #Midi #OpenSource #TiniX `
Dự án tương tự
Khám phá các dự án và mô hình AI khác có sự tương đồng.
SOTA Google's Perceiver-AR Music Transformer Implementation and Model
Orpheus Music Transformer SOTA 8k multi-instrumental music transformer trained on 2.31M+ high-quality MIDIs !Orpheus-Music-Transformer-Artwork-1.jpg(https://cdn-uploads.huggingface.co/production/uploads/5f57ea2d3f32f12a3c0692e6/ga9kOTV6mH8nDljTw2OsO...
AutoGPT is the vision of accessible AI for everyone, to use and to build on. Our mission is to provide the tools, so that you can focus on what matters.
f.k.a. Awesome ChatGPT Prompts. Share, discover, and collect prompts from the community. Free and open source — self-host for your organization with complete privacy.
利用 AI 大模型和自动化工作流，根据主题或关键词一键生成高清短视频。Generate HD short videos from a topic or keyword with an automated AI workflow.
Open-source AI penetration testing tool to find and fix your app’s vulnerabilities.
🤗 Transformers: the model-definition framework for state-of-the-art machine learning models in text, vision, audio, and multimodal models, for both inference and training.
The most powerful and modular diffusion model GUI, api and backend with a graph/nodes interface. The fastest local inference engine in the world.
Implement a ChatGPT-like LLM in PyTorch from scratch, step by step