Riffusion
ಸೇಥ್ ಫಾರ್ಸ್ಗ್ರೆನ್ ಮತ್ತು ಹೇಕ್ ಮಾರ್ಟಿರೋಸ್ ವಿನ್ಯಾಸಗೊಳಿಸಿದ ರಿಫ್ಯೂಷನ್ ಒಂದು ನರವ್ಯೂಹದ ಜಾಲವಾಗಿದ್ದು, ಇದು ಧ್ವನಿಯ ಬದಲಿಗೆ ಧ್ವನಿಯ ಚಿತ್ರಗಳನ್ನು ಬಳಸಿಕೊಂಡು ಸಂಗೀತವನ್ನು ಉತ್ಪಾದಿಸುತ್ತದೆ. ಇದನ್ನು ಸ್ಥಿರವಾದ ಪ್ರಸರಣದ ಸೂಕ್ಷ್ಮ-ಸಂಯೋಜನೆಯಾಗಿ ರಚಿಸಲಾಗಿದೆ, ಇದು ಸ್ಪೆಕ್ಟ್ರೋಗ್ರಾಮ್ಗಳಲ್ಲಿ ಪಠ್ಯ ಪ್ರಾಂಪ್ಟ್ಗಳಿಂದ ಚಿತ್ರಗಳನ್ನು ಉತ್ಪಾದಿಸಲು ಅಸ್ತಿತ್ವದಲ್ಲಿರುವ ತೆರೆದ ಮೂಲ ಮಾದರಿಯಾಗಿದೆ. ಇದು ಇಮೇಜ್ ಫೈಲ್ಗಳನ್ನು ರಚಿಸಲು ಟೆಕ್ಸ್ಟ್ ಪ್ರಾಂಪ್ಟ್ಗಳನ್ನು ಬಳಸುವ ಮಾದರಿಗೆ ಕಾರಣವಾಗುತ್ತದೆ, ಇದನ್ನು ವಿಲೋಮ ಫೋರಿಯರ್ ರೂಪಾಂತರದ ಮೂಲಕ ಇರಿಸಬಹುದು ಮತ್ತು ಆಡಿಯೊ ಫೈಲ್ಗಳಾಗಿ ಪರಿವರ್ತಿಸಬಹುದು. ಈ ಕಡತಗಳು ಕೇವಲ ಹಲವಾರು ಸೆಕೆಂಡುಗಳಷ್ಟು ಉದ್ದವಾಗಿದ್ದರೂ, ಮಾದರಿಯು ವಿವಿಧ ಕಡತಗಳನ್ನು ಒಟ್ಟಿಗೆ ಇಂಟರ್ಪೋಲೇಟ್ ಮಾಡಲು ಔಟ್ಪುಟ್ಗಳ ನಡುವೆ ಸುಪ್ತ ಜಾಗವನ್ನು ಸಹ ಬಳಸಬಹುದು. ಇದನ್ನು ಐಎಮ್ಜಿ2ಐಎಮ್ಜಿ ಎಂದು ಕರೆಯಲಾಗುವ ಸ್ಥಿರ ಪ್ರಸರಣ ಮಾದರಿಯ ಕಾರ್ಯವನ್ನು ಬಳಸಿಕೊಂಡು ಸಾಧಿಸಲಾಗುತ್ತದೆ. ಇದರ ಪರಿಣಾಮವಾಗಿ ಬಂದ ಸಂಗೀತವನ್ನು "ಡಿ ಒಟ್ರೋ ಮುಂಡೋ" (ಪಾರಮಾರ್ಥಿಕ) ಎಂದು ವಿವರಿಸಲಾಗಿದೆ, ಆದಾಗ್ಯೂ ಇದು ಮಾನವ ನಿರ್ಮಿತ ಸಂಗೀತವನ್ನು ಬದಲಿಸುವ ಸಾಧ್ಯತೆಯಿಲ್ಲ. ಈ ಮಾದರಿಯು ಡಿಸೆಂಬರ್ 15,2022 ರಂದು ಲಭ್ಯವಾಯಿತು, ಈ ಕೋಡ್ ಗಿಟ್ಹಬ್ನಲ್ಲಿ ಉಚಿತವಾಗಿ ಲಭ್ಯವಿದೆ. ಸ್ಥಿರವಾದ ಪ್ರಸರಣದಿಂದ ಪಡೆದ ಅನೇಕ ಮಾದರಿಗಳಲ್ಲಿ ಇದು ಒಂದಾಗಿದೆ. ರಿಫ್ಯೂಷನ್ ಅನ್ನು AI ಟೆಕ್ಸ್ಟ್-ಟು-ಮ್ಯೂಸಿಕ್ ಜನರೇಟರ್ಗಳ ಉಪವಿಭಾಗದಲ್ಲಿ ವರ್ಗೀಕರಿಸಲಾಗಿದೆ. 2022ರ ಡಿಸೆಂಬರ್ನಲ್ಲಿ, ಮುಬರ್ಟ್ ಇದೇ ರೀತಿ ವಿವರಣಾತ್ಮಕ ಪಠ್ಯವನ್ನು ಸಂಗೀತದ ಲೂಪ್ಗಳಾಗಿ ಪರಿವರ್ತಿಸಲು ಸ್ಥಿರವಾದ ಪ್ರಸರಣವನ್ನು ಬಳಸಿದರು. ಜನವರಿ 2023ರಲ್ಲಿ, ಗೂಗಲ್ ತಮ್ಮದೇ ಆದ ಟೆಕ್ಸ್ಟ್-ಟು-ಮ್ಯೂಸಿಕ್ ಜನರೇಟರ್ನಲ್ಲಿ ಮ್ಯೂಸಿಕ್ಎಲ್ಎಂ ಎಂಬ ಪ್ರಬಂಧವನ್ನು ಪ್ರಕಟಿಸಿತು. ಆಳವಾದ ಕಲಿಕೆಯ ತಂತ್ರಾಂಶ ಅನ್ವಯಿಕೆಗಳು ಕಂಪ್ಯೂಟರ್ ಸಂಗೀತ