SheetSage: ИИ сам переводит музыку в ноты и MIDI

Рет қаралды 31,528

Эльнур Рахматуллин | Искусство и технологии

Жыл бұрын

Sheetsage: github.com/chrisdonahue/sheet...
Публикация: arxiv.org/abs/2212.01884

Пікірлер: 113

@SU88US 8 күн бұрын

Вау, вот это да:) это как черновик. Отличная программа.

@Oblomovblues Жыл бұрын

Ютуб засранец вооюще не выдает твоих видео в рекомендациях. столько интересного пропустил! Спасибо друг. поставил колокольчик для опевещений.

@user-qn4zy7wz6j Жыл бұрын

Эльнур, восхищён вашим контентом! подскажите пожалуйста, способен ли ИИ из изображения на котором теннисист бьёт по мячу поменять стиль изображения не трогая самого спортсмена и мяч?( используя например "midjourney")

@dasdas221_ Жыл бұрын

Почитай Stable Diffusion, расширение controlnet. Кто ищет - тот найдёт.

@Musicchannel-wp2je Ай бұрын

Вот это круть, действительно стоит скачать

@AlexMost57 8 ай бұрын

Программу, возможно, установить на Windows 10? Помогите, если знаете как? Очень нужно, срочно. Спасибо! С меня подписка.

@user-py2qt7rb5j Жыл бұрын

О, новое видео ура

@user-py2qt7rb5j Жыл бұрын

Очень круто

@aruzhan6694 2 ай бұрын

Интересно подойдут ли эти ноты для 2 струнных инструментов типо домбры…

@GUITARKOS 10 ай бұрын

как перевести в табулатуру?

@maximkabalskis1723 2 ай бұрын

Это пока что провал, мелодия начинается не с той доли и не совпадает с гармонией

@antonshtefan1547 10 ай бұрын

На винду не поставить?

@izotoperx 5 ай бұрын

Подскажите, где можно скачать этй программу на мак?

@zuowa Жыл бұрын

Я к сожалению не помню название, но в году 2007-2008 я использовал прогу для перевода mp3 в midi, и тогда уже это не было чем то удивительным. Я тестил на треке из начальной заставки GTA S.A. результат был вполне неплохим. Ремикс долго висел в топе на realmusic)

@tirannozavr2093 4 ай бұрын

WIDI.Recognition.System.Professional. Но там тоже кривовато на выходе

@alkraa1 Жыл бұрын

Круто!

@e-orchestral_ 4 ай бұрын

Согласна с вами. Оно нас заменит. Пока только ИИ не дают авторские права. Но это пока. И когда это произойдет,то нам конец.

@qwertyqee6687 3 ай бұрын

Есть программа или какой то способ,что бы ноты писались в цифрах,что бы я смог сыграть на телефоне

@uganda0340 11 ай бұрын

а на кали Линукс она заработает? А то все пытался и пытался, но так и не смог ее установить

@alkraa1 Жыл бұрын

А как зделать так чтобы вместо название аккорла был нота

@Bretton5863 2 ай бұрын

🔥

@anitabundina6642 Ай бұрын

Подскажите, на мак устанавливается она? Совсем не могу понять их сайт:((

@Yuriy501 3 ай бұрын

И где там кнопка Скачать? Где программу можно скачать?

@Alexe7438 Ай бұрын

Есть такая програма если видишь ноты но не знаешь на какие клавиши их нажимать и что бы она показала?

@marat_abramian 11 күн бұрын

Мы все этого боялись

@yuriyi1 3 ай бұрын

Как помощник пойдёт.

@user-um9we6qh7d Ай бұрын

А онлайн есть?

@artem59k13 14 күн бұрын

Доброго времени суток. По моему мнению AI музыкантов и художников не заменит, а станет вспомогательным решением для всех. Даже для художников. Они смогут обучать компьютерное зрение. Мне как странно бы не показалось в сообщении незрячему зрителю помогает компьютерное зрение в распознавании картинок и даже текста. Я вообще случайно наткнулся на этот ролик по запросу в Яндексе распознавание нот музыки с помощью AI. Благодарю автора за информацию.

@dinarasadieva1201 8 ай бұрын

как поставить на винду? очень нужно

@vladeksss 4 ай бұрын

интересно тоже

@Andrejr77rv 3 ай бұрын

А можно ли вообще на Винду!? Тоже надо

@Evgenc4hik 3 ай бұрын

Можно Linux на внешний ssd установить. С него и запускать программу. Если, конечно, разберëтесь как еë установить

@airmail9937 Жыл бұрын

Сделай туториал пожалуйста как установить?

@SAFO-MAN 7 ай бұрын

поддерживаю!!❤😂

@user-lu4xo6nd8h 7 ай бұрын

DAW Cubase 12 это делает намного лучше и корректнее, спасибо за ваш обзор, ещё один момент в общую копилку

@darkage8967 7 ай бұрын

как именно ? куда заходить?

@user-lu4xo6nd8h 7 ай бұрын

@@darkage8967закидывает трек референс создаёте аккордовый трек и перетягивает референс на этот аккордовый трек и вауля. Можно потом перевести этот трек в миди и экспортировать в нотный редактор

@Rest3x 7 ай бұрын

Тоже интересно

@user-mg2dz9ud9u 6 ай бұрын

Тоже самое

@robertandrew1494 6 ай бұрын

@@darkage8967 вариаудио

@romzi8710 Ай бұрын

Вообще не разобрался как с этой штукой работать(( нужна помощь

@tischenkovitaliy 3 ай бұрын

меня больше удивляет не способности этой программы, а восторг автора видео.

@janinasakharnykh1278 7 ай бұрын

Можно ли использовать эти миди где-нибудь? Как обстоят дела с копирайтом? Это чья музыка тогда получается?

@MS-qx1to 4 ай бұрын

Ну вы же понимаете, что это ноты существующего произведения?

@user-um9we6qh7d Ай бұрын

0:59 "Белые розы" это не попса, а нормальная ретро песня Попса это "Любовь красива" (любят крутить на "Юмор-ФМ"), "Чашка кофию".

@AlexisLionel Ай бұрын

Согласен - неаккуратно слово подобрал в видео.

@djbassyns 8 ай бұрын

Ну а как же быть с остальными то инструментами?но Где бас шляпы и автоматизация ?

@user-uu2fz9it5k 18 күн бұрын

вы большой мечтатель

@djbassyns 18 күн бұрын

@@user-uu2fz9it5k yes ☺️

@user-jx4qb1pv2z 4 ай бұрын

Как установить?

@mityadont Ай бұрын

Эльнур, можно я вам скину простую мелодию, очень нужны ноты. Убунты нет.

@AlexisLionel Ай бұрын

К сожалению, уже снёс свою убунту с программой

@Declan29483 Жыл бұрын

Офигеть

@ChinchillaYT 5 ай бұрын

Какая у тебя ОС?

@user-yr9qw3ei4c 2 ай бұрын

*_Linux_*

@user-yi2ln4np4c 6 ай бұрын

Я пою телефон записывает ноты.Есть такое приложение.?

@Vladyslav_Sakhno 9 күн бұрын

Добрый вечер! Если ещё актуально - на телефон есть приложение "Melody Scanner"

@VictorKoryakin Жыл бұрын

А как она классику снимает? Например классическую гитару соло или фортепиано.

@AlexisLionel Жыл бұрын

Коряво - особенно, если модуляции ритмические или по тональности есть

@VictorKoryakin Жыл бұрын

@@AlexisLionel ясно, спасибо за ответ. Я рад что технологии дошли и до музыкального текста, была бы еще прога нормальная сканирующая ноты в PDF формате или формате для разных редакторов. Те что есть корявые на столько что уж лучше вручную копировать.

@nazario4258 5 ай бұрын

Данная программа идет только на linux!

@vvwwvv Жыл бұрын

Заменил винду на бубунту?)

@AlexisLionel Жыл бұрын

Не, убунта как запасная пока, я виндушник всё же.

@ayazbekrustamov-rz4rx Жыл бұрын

@@AlexisLionel где взять этот программу

@user-xw5oz6nn4k 5 ай бұрын

прога на линуксе же

@AnnaTrubetskaya 8 ай бұрын

Эльнур спасибо, Пока я так вижу, что Вы один научились ей пользоваться, можете зарабатывать на транскрибировании. У меня есть первый заказ) напишите мне

@sanbait 5 ай бұрын

а есть какая то ИИшка которая сможет написать мелодию из напева голосом кто то в курсе?

@nikitaarktorus2919 5 ай бұрын

suno попробуй, офигеешь)

@sanbait 5 ай бұрын

@@nikitaarktorus2919 это не то совсем

@izotoperx 5 ай бұрын

Каким образом заменит то,а кто сцене будет дудеть в сакс и петь ? 😂

@Alik_msk 10 ай бұрын

Даже если ей удасться передать медодию. Кому это нужно по одной ноте играть, флейтисту и то они кажется тоде аккорды могут аоспроизводить))

@rikalexx 3 ай бұрын

Много кому это будет нужно) и да, флейта не сыграет вам аккорд xDDD

@user-lf6gg2hw6s Жыл бұрын

Очень криво конечно все определяет, с простой казалось бы задачей, хотя-бы найти точно сильную долю, ориентируясь на акценты и начало смены гармонии, не справляется. До возможности, её хоть какого то использования и пользы ещё очень и очень далеко.

@solb123 5 ай бұрын

сделай туториал на винду пожайлуста!!!

@user-os4pj6fw4n 6 ай бұрын

Здравствуйте! Вы сможете написать ноты с к фильма Соната? kzfaq.info/get/bejne/obCHo5uq0amapas.htmlsi=oEfbGOuq1zFQsvFt

@edmar6149 3 ай бұрын

Здравствуйте, как можно с вами связаться ?

@Sergey_Kyl 4 ай бұрын

мдаааааааа. нафигггг токо счастье.

@olegsergeev3281 4 ай бұрын

В DAW Муз редакторе Studio One 'это есть 5 лет уже, и на телефоне приложения, полно плагинов, выглядит как web интерфейс к удаленной такой программе. Всему давно обучили пк, а видеокарты ваши используют для крипты))))))

@angrybalkon1471 6 күн бұрын

В какой версии и есть и где искать этот инструмент?

@user-py2qt7rb5j Жыл бұрын

Ждём. Когда расскажешь. Как делать

@user-py2qt7rb5j Жыл бұрын

На Винде

@AlexisLionel Жыл бұрын

Эту прям геморно запускать - убунта нужна, скрипты кривые. Я думаю, в течение месяца-двух выложат ещё более интересное что-то, что намного легче использовать будет. А если нет, могу потом стрим по этой провести с объяснениями.

@dinarasadieva1201 8 ай бұрын

@@AlexisLionel выложили что - нибудь более интереснее? для винды? очень актуально для меня сейчас. Пожалуйста, соориентируйте, что из подобного есть для винды сейчас?

@AlexisLionel 8 ай бұрын

@@dinarasadieva1201 насколько знаю, так ничего и не выложили. Очень невыгодно будет заинтересованным лицам, получающим с этого деньги, поэтому попытки что-то улучшить рубят с плеча.

@3asranka 7 ай бұрын

@@AlexisLionel мда, как же жаль. А можно вас попросить из двух видео миди вытащить? Линукса нет, к сожалению. Не сочтите за наглость, я самоучка, учусь играть по синтесии, есть две старые, но любимые аранжировки, чем только не пыталась вытащить миди - каша, замедляла видео и пыталась разобраться, но ракурс камеры не позволяет, авторам видео писала, одна играла на слух, нот нет, другой не отвечает, но в комментариях аккорды нашла, пыталась в них разобраться, так ничего из этого не вышло, уже отчаялась.

@slok1_ Жыл бұрын

а на винду как?

@DxD_Mushoku Жыл бұрын

phyton/powershell

@DxD_Mushoku Жыл бұрын

или ты не знаешь как с гитхаба качать?

@nazario4258 5 ай бұрын

@@DxD_Mushoku прикол, что прога идет только на linux

@zawatsky 10 ай бұрын

Как же она заменит, если перевести можно только _готовую_ музыку?! Автор и сам может к ней миди выложить, это не проблема. А вот новую писать... Нет, справится, но кому какое дело до творений бездушной железки? Интересно, что тебе своей музыкой именно человек сказать собирался!

@1_plus_1_ravno_vopros 7 ай бұрын

Так он говорил вроде о замене не композитора, а транскриптора

@Sharada38 4 ай бұрын

Ты не понял смысла программы

@zawatsky 4 ай бұрын

@@Sharada38по ходу, не я тут непонятливый. Автор оговорился, видать. Кстати, знакомый композитор всегда подбирает готовую музыку на слух, может хоть один в один, при этом, в отличие от ИИ, у него в мидяках не остаётся мусора. Так что даже тут если заменит, то очень нескоро.

@OVS888 2 ай бұрын

Тю та где ж она хорошо работает? Полностю всё запорото. Решила что начало такта не в первую долю а на 2 и😂 все ноты смещены на три восьмые раньше чем надо😂

@pinkow_yuga_999 Ай бұрын

Пока не очень понятна цель этого действа. Ноты печатать для дальнейшего исполнения по нотам? Или еще для чего то? Композиторскую (сочиненную человеком) музыку вряд ли заменит. Пока что - то, что выдает сетка - это компиляция (при чем очень предсказуемая) того что уже есть ("с миру по нитке на симфонию Шнитке" 😂). В академической музыке - симфонической и камерной - вообще пока мимо. Правда надо сказать, что сетка легко заменит так называемый "авангард" (математическую музыку основанную на додекафонной серии, сонористики и всей этой лабуды). Там особо то и дарования не нужно. Музыка собирается и "пишется" как лего из детского конструктора. Создать по настоящему вдохновенную музыку сетка не сможет по весьма банальным причинам. Во первых нет интуиции, во вторых нет художественных эмоций (плакать и смеяться не заставит) и в третьих, настоящая музыка пишется с Верой. Есть понятия добра и зла, жизни и смерти, любви и ненависти. Сетка сможет это имитировать, но не жить в этом, как человек. Но есть одна опасность - у человека, имитирующего настоящие эмоции может потеряться смысл жизни, ощущение самосохранения ( опасность смерти), чувства природного секса и тогда процесс самоуничтожения человечества неизбежен...

@AlexisLionel Ай бұрын

Полностью с Вами согласен, что ни один механический опус не сравнится с тем, что пишется людьми, в ком талант композиции есть от Бога. Но с другой стороны, и людей таких - единицы, а заменить посредственных музыкантов и композиторов нейросети уже в состоянии. И музыкальная интуиция, и способность передавать эмоции у нейросетей уже на вполне достойном уровне - точно выше среднего композитора. Сам недавно проигрался с Udio - нашумевшая музыкальная нейросеть, и даже я был шокирован тем, насколько быстро развивается отрасль. Я текстом описал стиль композиции, желаемые инструменты, стиль оркестровки и прочее - и за минуту получил песню. И развитие этих инструментов будет лишь ускоряться, чему настоящие музыканты будут лишь рады.

@pinkow_yuga_999 Ай бұрын

@@AlexisLionel стоп стоп стоп... Интуиция у сетки - имитированная. Ее не может быть, пока не появятся биороботы (гибрид машины и человеческого сердца и мозга с кровеносными сосудами). Эмоции - тоже имитированные. Сетка не знает что такое боль, смерть, страх, счастье смех. Поэтому то, что Вы пишите в принципе с нынешними сетками невозможно. Если будет сделана сеть на основе реального сердца и мозга - тогда.... Сеть будет бояться смерти - у сети будет инстинкт самосохранения - тогда возможно появится и музыка. Но пока... Нереально...

@AlexisLionel Ай бұрын

@@pinkow_yuga_999 если сетка создаёт пьесы, способные вызывать у человека истинные эмоции и слёзы, то так ли важна семантика о том, истинная ли у сетки интуиция? Если её спросить о её эмоциях - она опишет их так же убедительно и тем же языком, что и люди. С таким же успехом можно назвать человеческие эмоции и музыкальную интуицию - искусственной. Творец вложил в людей свою искру, а люди вкладывают искру творения в машины - следующую, более совершенную ступень эволюции - и всё самое гениальное отныне будет создаваться ими. Самая прекрасная музыка, живопись, научные открытия, эмоции - уже к 2030 году будет прерогативой кремниевого мозга машин и их души, а не человеческой. Это пока в 2024 они примитивны, но даже на этом уровне способны на настоящее творчество.