Версия для печати темы

Автор: мейн-кун Jul 4 2023, 12:58

Приветствую всех заинтересовавшихся!
Задача следующая: допустим есть аудиозапись песни. Нужно чтобы ИИ создал видеоряд на неё. Именно на аудиозапись песни. То есть, грубо - я вставляю песню, ИИ конкретно на неё создаёт видеоряд, на "своё" усмотрение, так сказать. Конечно, на этом сайте должен быть выбор и русского языка, так-как аудиозапись предполагается на русском.

Подскажите, если кто знает, есть что-то подобное, или только текст можно обработать подобным образом?

Автор: Administrator Jul 28 2023, 10:58

Нет такого пока что, видеорядом пока занимаются только на закрытых бетах. Ну а всё остальное надеюсь вы знаете сами. Коллажи да, это к Миджорни.

Автор: мейн-кун Jul 28 2023, 20:04

Спасибо большое, за ответ! Что-то такое, я и начал уже подозревать. Да и знакомые "хакеры" сказали тоже самое.
Можно конечно, сделать интересное видео, с помощью генератора ИИ, но это уже отдельная работа, серьёзное погружение в процесс. Полгода - минимум, при наличии желания, для достижения хоть какого-то, более-менее приличного результата.
Да и дело не в этом. Сама идея не в этом. Идея в том, чтобы увидеть видеоряд "мыслеформ", сгенерированных ИИ, при прослушивании аудиозаписи, ну или хотя-бы, на текст из слов.
Я думал, что можно получить требуемое, хотя-бы на очень кроткие фразы(даже без музыки). Тогда можно разбить любой текст на подходящие отрезки, на каждый из них получить видеоверсию ИИ, а потом смонтировать клип любой, желаемой длины. То есть, разбив, например, стихотворение А. С. Пушкина на фрагменты, которые по силам ИИ, мы получаем видеоотрезок на строку - "я помню чудное мгновенье...", потом на - "передо мной явилась ты...", ну и так далее, пока не обработаем до конца. И потом объединяем в одно целое. А если это, допустим, песня, то подогнать, таким образом полученный клип под музыкальный размер - уже дело нехитрое, и он получится именно сгенерированным ИИ, по его "пониманию". Как-бы по человеческому "сценарию", но абсолютно на усмотрение нейросети. Вот...

Картинки (коллажи), тоже думал. Ведь их можно, типа "оживить". Не совсем то, что хотелось-бы. Просто нарезка из шевелящихся(или статичных) картинок, меняющихся по ходу текста(или песни). Но хотя-бы так, уже точно можно сделать. Получить так сказать "взгляд ИИ" на предложенный текст, в серии картинок. Я немного попробовал на разные стихи и просто фразы из слов, и именно тогда понял, что лучше разбивать на короткие отрезки. Потому-что даже в коротком четверостишии, нейросеть делает картинки с акцентом на что-то одно, что ей больше "понравилось".
Блин, написал, и захотел так попробовать до конца сделать, и смонтировать хотя-бы в картинках.

Автор: мейн-кун Jul 29 2023, 00:47

Вот, сегодня нашёл: https://www.youtube.com/watch?v=vWcm6wsRccY Практически то, что надо, и наверное, даже больше.