Видеомонтаж

На последней волне постов про дипфейки у меня активизировался древний вопрос. Еще с середины нулевых, когда я плотно сидел в ммошках, в тамошнем сообществе начали массово ходить легенды о программах для смены голоса, с помощью которых парни разводят спермотоксикозных дурачков кося под девушек, а девушки строят топ-кланы, используя брутальный мужской голос для солидности. В качестве пруфов и тогда и сейчас либо ссылки на программы, которыми разве что глухого можно обмануть (даже если это пятисотдолларовый плагин для adobe audition) либо фейковые ролики на ютубе, где банально чужой голос выдают за результат работы этих самых программ. Самое главное, что задача с инженерной точкой сложной не кажется, ведь даже если соответствующий фильтр невозможен, то и распознаватели и генераторы голоса давно работают на вполне приличном уровне, почему бы их просто не объединить? Фильтры между тем точно возможны, профессиональный звукомонтажер ручками за пару минут превратит запись мужского голоса в женский и наоборот. Так что сейчас, на фоне резкого прогресса в нейросетях, делающих куда более сложную работу,  отсутствие адекватных войсченджеров реально удивляет, впору задуматься о всемирном заговоре спецслужб. Оно, конечно, странно, что спецслужбам мирового правительства пофиг на возможность пройти верификацию торганув фейковым фейсом на фоне чужого паспорта, зато не пофиг если какой-то трап сделает себе женственный голос, ну да им виднее, что важнее для всемирной безопасности. Впрочем конспирология в данном случае практической пользы не принесет, так что возвращаясь к вопросу к пикабушникам - может в последнее время  прорыв все-таки произошел и в этой сфере и войсченджеры "на троечку" уже появились?

Ускорение в 2-4 раза

Здесь идет речь об Дипфейке в один клик, который успел нашуметь.

Для упрощения процесса установки сделал сборку с запуском из bat файла.

Основная особенность этой сборки: вырезана цензура, более свежий код и возможно выставления GPU потоков, что ускорит обработку видео в 2-4 раза, за счет более активного использования видеопамяти.

Скачать можно тут:

Гугл Диск

Яндекс Диск

Данная сборка не совместима с оригинальной, поэтому скопируйте файлы в пустую папку. Если вы попытаетесь перезаписать поверх оригинальной версии - есть большой шанс появления конфликтов.

Обязательно ознакомьтесь с файлом "Прочтите перед запуском" - там есть небольшая инструкция по подготовке системы, если вы запускаете что-то подобное в первый раз.

Что касается обновлений, то вся информация по ним будет в моем телеграм канале Neurogen News

Вчера автор добавил код, чтобы приложуха крашилась если пробуешь её на nsfw контенте.
Всё бы ничего, да вот только этот контент часто не правильно определяется библиотекой opennsfw2. У меня например, крашилось видео где солдат засовывает снаряд в гаубицу )

Думаю надо убрать из кода эти строчки из файла run.py и всё будет норм. Дома проверю сегодня, чтоб наверняка.

from opennsfw2 import predict_video_frames, predict_image

seconds, probabilities = predict_video_frames(video_path=args['target_path'], frame_interval=100) if any(probability > 0.7 for probability in probabilities): quit()

if predict_image(target_path) > 0.7: quit()

Речь об этом посте