Meta Open-sources AI Tool MusicGen ที่สามารถสร้างเพลงจากข้อความแจ้ง – TechCult
เบ็ดเตล็ด / / June 13, 2023
Meta บริษัทเทคโนโลยีชื่อดังที่อยู่เบื้องหลังนวัตกรรมที่ก้าวล้ำต่างๆ ได้เปิดตัวความสำเร็จล่าสุดในด้านปัญญาประดิษฐ์ เนื่องจากเป็นโอเพ่นซอร์ส ดนตรี เพื่อสร้างเพลงจากข้อความแจ้ง เครื่องกำเนิดเพลงที่ขับเคลื่อนด้วย AI แบบโอเพ่นซอร์สนี้มีความสามารถที่โดดเด่นในการสร้างองค์ประกอบที่ไม่เหมือนใครตามข้อความแจ้ง
![Meta Open-sources เครื่องมือสร้าง AI MusicGen ที่สามารถสร้างเพลงจากข้อความแจ้ง](/f/7166f2dcf7ee1b1f193906d34a92db14.png)
สารบัญ
MusicGen ทำงานอย่างไร
MusicGen ดำเนินการโดยใช้ประโยชน์จากความล้ำสมัย โมเดลเอไอ ได้รับการฝึกฝนในชุดข้อมูลเพลงที่มีลิขสิทธิ์มากมาย กระบวนการฝึกอบรมเกี่ยวข้องกับการวิเคราะห์คอลเลกชันมากมายของ 20,000 ชม ของแทร็กเพลงคุณภาพสูง รวมถึงชุดข้อมูลภายในของ Meta และแทร็กที่มาจาก Shutterstock และ Pond5. คลังข้อมูลสไตล์และแนวเพลงที่หลากหลายนี้ช่วยให้ MusicGen สามารถนำเสนอความเป็นไปได้ในการสร้างสรรค์ที่หลากหลาย
เพื่อเพิ่มประสิทธิภาพ Meta ใช้ของพวกเขา 32Khz EnCodec audio tokenizer ซึ่งแบ่งเพลงออกเป็นชิ้นเล็กๆ. สิ่งนี้ทำให้สามารถประมวลผลแบบขนาน ส่งผลให้การสร้างเพลงเร็วขึ้นและมีประสิทธิภาพมากขึ้น ผู้ใช้สามารถป้อนข้อมูลต่างๆ
ข้อความแจ้งเช่น แนวเพลงหรือทำนองเฉพาะ เพื่อเป็นแนวทางให้ MusicGen สร้างสรรค์ผลงานเพลงที่สอดคล้องกับทิศทางดนตรีที่พวกเขาต้องการนอกจากนี้ MusicGen ยังช่วยให้ผู้ใช้สามารถ ให้ไฟล์เสียงอ้างอิงซึ่งทำหน้าที่เป็นพิมพ์เขียวสำหรับการสร้างเพลงใหม่ MusicGen มอบโอกาสที่ไม่เหมือนใครในการสร้างผลงานที่กลมกลืนซึ่งสอดคล้องกับท่วงทำนองหรือเพลงที่สร้างโดยการจัดองค์ประกอบที่สร้างขึ้นให้สอดคล้องกับแทร็กอ้างอิง
![MusicGen บนใบหน้ากอด | Meta โอเพ่นซอร์ส MusicGen เพื่อสร้างเพลงจากข้อความแจ้ง](/f/a73d6a597690a4f5d6523c837a4af9c5.png)
คุณสมบัติของ MusicGen คืออะไร
- การสร้างเพลงตามข้อความแจ้ง: MusicGen ใช้ประโยชน์จากพลังของ AI เพื่อสร้างองค์ประกอบเพลงต้นฉบับตามข้อความแจ้งที่ผู้ใช้ให้มา ตั้งแต่การระบุแนวเพลงไปจนถึงการสรุปทำนอง ผู้ใช้สามารถสำรวจความเป็นไปได้ในการสร้างสรรค์ที่หลากหลาย
- การฝึกอบรมเกี่ยวกับชุดข้อมูลเพลงที่กว้างขวาง: โมเดล AI ที่ขับเคลื่อน MusicGen ได้รับการฝึกฝนเกี่ยวกับคอลเลกชั่นเพลงลิขสิทธิ์จำนวนมหาศาล ซึ่งประกอบด้วย 10,000 เพลง แทร็กคุณภาพสูงจากชุดข้อมูลภายในของ Meta รวมถึงแทร็กที่มาจาก Shutterstock และ บ่อน้ำ5. ชุดข้อมูลการฝึกอบรมที่หลากหลายนี้ทำให้มั่นใจได้ว่า MusicGen สามารถตอบสนองสไตล์และแนวดนตรีที่หลากหลาย
- การสร้างเพลงที่ง่ายและรวดเร็ว: MusicGen ทำให้กระบวนการสร้างเพลงใหม่ง่ายขึ้นด้วยการจัดเตรียมส่วนต่อประสานที่ใช้งานง่ายและการควบคุมที่ใช้งานง่าย นักดนตรีและโปรดิวเซอร์สามารถทดลองไอเดียและแนวคิดต่างๆ ได้อย่างรวดเร็ว เร่งขั้นตอนการทำงานสร้างสรรค์ของพวกเขา
- อำนวยความสะดวกในการทดลองที่สร้างสรรค์: ด้วย MusicGen ศิลปินสามารถผลักดันขอบเขตความคิดสร้างสรรค์ของพวกเขาโดยการทดลองกับแนวคิดทางดนตรีใหม่ๆ ด้วยการจัดเตรียมแพลตฟอร์มสำหรับการสำรวจ MusicGen สนับสนุนการค้นพบท่วงทำนอง ฮาร์โมนี และจังหวะที่แปลกใหม่
เรานำเสนอ MusicGen: รูปแบบการสร้างเพลงที่เรียบง่ายและควบคุมได้ MusicGen สามารถแสดงได้ทั้งข้อความและเมโลดี้
เราเผยแพร่โค้ด (MIT) และโมเดล (CC-BY NC) สำหรับการวิจัยแบบเปิด การทำซ้ำ และสำหรับชุมชนดนตรี: https://t.co/OkYjL4xDN7pic.twitter.com/h1l4LGzYgf— เฟลิกซ์ ครึก (@FelixKreuk) 9 มิถุนายน 2566
MusicGen ของ Meta เทียบกับ MusicLM ของ Google
Google ก็เปิดตัวโปรแกรมสร้างข้อความเป็นเพลง MusicLM ที่งาน Google I/O 2023 เช่นกัน ลองเปรียบเทียบผลิตภัณฑ์เหล่านี้:
คุณสมบัติ | ดนตรี | ดนตรีLM |
ประเภทโมเดล | เวทีเดียว (การสร้างเพลงทั้งหมดในครั้งเดียว) | ลำดับชั้น (การสร้างดนตรีเป็นส่วนๆ) |
ข้อมูลการฝึกอบรม | โน้ตเพลง | บันทึกเสียง |
ความพร้อมใช้งาน | โอเพ่นซอร์ส | ไม่ใช่โอเพ่นซอร์ส |
จุดแข็ง | ใช้งานง่ายและรวดเร็วสามารถสร้างเพลงได้หลากหลายสไตล์ | เพลงคุณภาพสูงที่ให้เสียงเหมือนการบันทึกในโลกแห่งความเป็นจริง |
จุดอ่อน | อาจมีความแม่นยำน้อยกว่า MusicLM อาจไม่สามารถสร้างเพลงได้ทุกสไตล์ | จำกัดเฉพาะพนักงานของ Google และพันธมิตรที่เลือก |
ประโยชน์ของ MusicGen
ต่อไปนี้คือตัวอย่างเฉพาะบางประการเกี่ยวกับวิธีใช้ MusicGen เพื่อประโยชน์ของนักดนตรีและผู้ผลิตเพลง:
- ก นักดนตรีเริ่มต้น สามารถใช้ MusicGen เพื่อเรียนรู้เกี่ยวกับสไตล์และเทคนิคทางดนตรีที่แตกต่างกัน พวกเขาสามารถทดลองด้วยข้อความแจ้งต่างๆ และดูว่า MusicGen สร้างผลลัพธ์ที่แตกต่างกันอย่างไร สิ่งนี้สามารถช่วยให้พวกเขาพัฒนาสไตล์ดนตรีของตนเองและเรียนรู้เทคนิคใหม่ๆ
- หนึ่ง นักดนตรีที่มีประสบการณ์ สามารถใช้ MusicGen เพื่อทดลองกับท่วงทำนอง จังหวะ และฮาร์โมนีต่างๆ สิ่งนี้สามารถช่วยให้พวกเขาเกิดไอเดียใหม่ๆ สำหรับเพลงที่พวกเขาคิดไม่ถึงด้วยตัวเอง
- ก ผู้ผลิตเพลง สามารถใช้ MusicGen เพื่อสร้างแบ็คกิ้งแทร็กรูปแบบต่างๆ ซึ่งสามารถใช้เพื่อสร้างอารมณ์และบรรยากาศที่หลากหลาย
ข้อ จำกัด ของ MusicGen
คุณภาพเอาต์พุตแปรผัน: ในขณะที่ MusicGen พยายามสร้างคุณภาพสูง ดนตรีผลลัพธ์ของระบบ AI อาจไม่ตรงตามความคาดหวังของผู้ใช้เสมอไป เนื่องจากลักษณะการแต่งเพลงที่ซับซ้อนและความชอบของแต่ละคน ชิ้นงานที่สร้างขึ้นบางชิ้นอาจขาดคุณภาพในแง่ของการรับรู้
เนื่องจาก Meta เป็นโอเพ่นซอร์ส MusicGen เพื่อสร้างเพลงจากข้อความแจ้ง มันบ่งบอกถึงความสำเร็จครั้งสำคัญในขอบเขตของเครื่องมือสร้าง AI สำหรับการสร้างเพลง เนื่องจากนักดนตรีและโปรดิวเซอร์หันมาใช้เทคโนโลยีที่ขับเคลื่อนด้วย AI มากขึ้น MusicGen จึงนำเสนอช่องทางที่มีแนวโน้มดีสำหรับการสำรวจและสร้างสรรค์สิ่งใหม่ๆ
แหล่งที่มา: Felix Kreuk ทวีต
![อเล็กซ์ เครก](/f/82c0af5dbedfba7e1fc95a8d7136c74d.jpg)
อเล็กซ์ เครก
Alex ขับเคลื่อนด้วยความหลงใหลในเทคโนโลยีและเนื้อหาเกม ไม่ว่าจะเป็นการเล่นวิดีโอเกมล่าสุด การติดตามข่าวสารเทคโนโลยีล่าสุด หรือการมีส่วนร่วม กับบุคคลอื่นๆ ที่มีแนวคิดเดียวกันทางออนไลน์ ความรักในเทคโนโลยีและการเล่นเกมของอเล็กซ์นั้นปรากฏชัดในทุกสิ่งที่เขามี ทำ.
Alex ขับเคลื่อนด้วยความหลงใหลในเทคโนโลยีและเนื้อหาเกม ไม่ว่าจะเป็นการเล่นวิดีโอเกมล่าสุด การติดตามข่าวสารเทคโนโลยีล่าสุด หรือการมีส่วนร่วม กับบุคคลอื่นๆ ที่มีแนวคิดเดียวกันทางออนไลน์ ความรักในเทคโนโลยีและการเล่นเกมของอเล็กซ์นั้นปรากฏชัดในทุกสิ่งที่เขามี ทำ.