Сьогодні в статті на вас чекає огляд на 10 найкорисніших нейромереж, які підійдуть манімейкерам з будь-якої сфери. Серед них є програми для створення відео та фото, видалення вотермарок і навіть генерації повноцінних діалогів. Усі вони стануть у пригоді при створенні рекламних кампаній. Наприклад, щоб згенерувати креативи або подивитися, наскільки добре зроблений лендінг.
GEN-2
GEN-2 - нейромережа, яка працює з відео та фото. Донедавна вона була здатна прибирати фон на відео та окремі його частини. Тепер же GEN-2 додали ще кілька нових можливостей: генерація відео і фото за текстовим запитом, а ще створення нового відео з вихідного.
Поки що лише кілька нейронок можуть створювати відео з текстового промпта, і майже всі вони роблять це не дуже добре. Тому ми протестуємо дві нові функції і подивимося, як GEN-2 справляється з ними.
Для початку роботи потрібно зареєструватися, потім переходимо у вкладку Text/Image to Video і вводимо промпт, у якому описуємо потрібну сцену. Чим докладніше, тим краще:
Також на додаток до тексту можна завантажити фото-референс праворуч. Ми попросили створити відео людину, яка радіє виграшу в казино, і ось, що отримали:
Створення відео зайняло кілька хвилин, і загалом результат непоганий, але далекий від ідеалу.
Тепер спробуємо зробити відео без промпта, але за фото-референсом. Для цього ми створили картинку в Midjourney з гравцем у казино:
Ось такий результат ми отримали через 2 хвилини обробки:
Результат вийшов кращим. З цього можна зробити висновок, що такі короткі чотирисекундні відео краще робити з готових зображень. Іншими словами "оживляти" їх.
Загалом, GEN-2 працює добре, порівняно з нейронками з категорії Text-to-video та Image-to-video. Також великим плюсом є те, що GEN-2 можна використовувати безкоштовно та онлайн.
Dreamix: Video Editing Tool
Dreamix - нейронка від Google, яка генерує відео з вихідного зображення або відеофрагмента. Вона може змінювати діючий об'єкт у кадрі, при цьому не змінюючи суті рухів.
Також у Dreamix є функціонал для заміни або додавання окремих об'єктів у відео.
Презентація на офіційному сайті показує цікаві результати, але протестувати цю нейромережу поки що не можна. Dreamix є внутрішньою розробкою Google, і невідомо, чи з'явиться у відкритому доступі.
WatermarkRemover.io
Нейронка для видалення вотермарок з фотографій WatermarkRemover.io стане в пригоді представникам будь-яких професій. Ми вирішили одразу перевірити її на міцність і взяли один із найскладніших вотермарок, які важко видалити без сліду:
Сервіс не потребує реєстрації, а обробка вихідного зображення займає близько хвилини. Ось такий результат ми отримали:
Залишився зовсім невеликий слід від сітки зліва і у верхньому правому куті, але загалом це хороший результат.
Спробуємо друге таке саме зображення, але з великим написом посередині:
Ось що вийшло:
Напівпрозора вотермарк-сітка пішла, але напис залишився. Річ не в тому, що нейронка спрацювала погано, бо технічно напис - це не вотермарк.
WatermarkRemover.io - корисний інструмент, який стане в пригоді кожному в роботі. До того ж, за нього не треба платити, а користуватися можна без обмежень.
SoundStorm
SoundStorm - нейронка від Google для генерації повноцінного людського діалогу з тексту. Для створення такого діалогу потрібно дві речі: текстовий промпт мови і зразок голосу. Далі нейронка розбиває звукові хвилі на нейронні аудіокодеки і синтезує суперреалістичний діалог високої якості.
SoundStorm здатний синтезувати 30 секунд звуку за півсекунди. Проблема, з якою зіткнулися розробники, полягала в тому, що нейромережу могли б використати зловмисники та телефонні шахраї.
Ось ще один класний приклад роботи SoundStorm, де спочатку програється звуковий промпт, а потім синтезований діалог:
Поки що нейромережу не планують виводити у відкритий доступ, оскільки їй потрібно продовжувати навчання.
StyleDrop
І знову крута нейромережа від Google - StyleDrop, яка зчитує дизайн і генерує зображення з ідеальною точністю. Причому це стосується як дитячих малюнків, так і картин великих художників.
Такий інструмент дасть змогу дизайнерам і власникам брендів розв'язувати будь-які візуальні завдання на основі начерків від руки та підганяти їх під бажане бачення.
Також можна створювати унікальні шрифти на основі стилю обраного зображення.
Також це працює і для створення логотипів, емблем та аватарок:
Для загального користування StyleDrop поки недоступна, але будемо сподіватися, що це станеться в майбутньому.
Attention Insight
Ця програма на базі нейромережі буде корисна всім, хто займається створенням сайтів або власникам бізнесу. Вона аналізує дизайн сайту і складає теплову карту уваги. Навчений алгоритм розуміє, куди падає погляд відвідувача сторінки і відзначає їх у своєму звіті. Такий аналіз може виявити проблеми дизайну і допомогти їх виправити.
Давайте подивимося на аналіз сайту рекламної мережі
Усередині все інтуїтивно зрозуміло, і є спливаючі підказки:
Далі вибираємо формат ресурсу, і в нашому випадку це Desktop-версія:
Потім завантажуємо скріншот сайту:
Ось так виглядає головна сторінка HilltopAds:
А ось аналіз розподілу користувацької уваги і теплова карта, яку склала Attention Insight. Праворуч можна побачити діапазон чіткості:
Теплова карта показує, що перше, на що звертає увагу відвідувач сторінки - напис посередині. Потім погляд спускається на дві кнопки, а ось на саму назву рекламної мережі у верхньому лівому кутку увага майже не потрапляє. Так само, як і на розділи в хедері. Діапазон чіткості сайту склав 69% - це в межах оптимального значення:
Підбиваючи підсумок: Attention Insight працює відмінно і видає релевантні результати, на які можна спиратися. Семиденний пробний період дасть змогу перевірити особистий сайт або протестувати функціонал перед купівлею підписки. Всього їх 4 варіанти для різних цілей:
Pika Labs
PikaLabs - це нейронка для генерації відео за текстовим промптом, яка нещодавно стала доступна всім охочим у Discord. Щоб скористатися нею, потрібно перейти за цим посиланням і натиснути на будь-яку з вкладок #generated:
Потім ми вводимо промпт командою /create і в полі, що з'явилося, вводимо текст:
Ми знову ввели той самий промпт про хлопця, який виграв у казино. Через кілька хвилин отримуємо результат:
Якщо не сподобається робота нейронки, генерацію можна повторити. Для цього потрібно натиснути сюди:
Ось другий варіант із того ж самого промпта:
Користуватися PikaLabs можна безкоштовно і без обмежень. Відео виходять хорошими для згенерованих, і, можливо, якщо поліпшити якість промпта, вони будуть виходити краще.
Mixer від Artbreeder
Artbreeder - це програма на базі нейромережі, в якій є багато корисних функцій для роботи із зображеннями. Наприклад, Mixer, Splicer, Collager і Outpainter. Mixer з'явився нещодавно, і тому ми протестуємо саме його.
Mixer непомітно змішує два зображення між собою і створює з них нове, зберігаючи особливості кожного. Спробуємо змішати кілька зображень і подивитися, що з цього вийде.
Після авторизації натискаємо Create, а потім Mixer:
Після цього вибираємо зображення і натискаємо на кнопку Generate:
Ми взяли дві картинки, поєднали їх, і ось результат:
Тепер поєднаємо Шрека з аніме-тян і подивимося, що вийде:
Перший і третій варіант класні. Зверніть увагу, як перемішалися стилі двох зображень.
Наостанок ми спробували поєднати ще дві картинки, і ось що вийшло:
Також можна рухати повзунки збоку від картинок, щоб змінювати ступінь інтенсивності змішування і додавати додаткові зображення:
Користуватися функціями Artbreeder можна безкоштовно, потрібна лише реєстрація. Загалом Mixer заслуговує на увагу і буде корисний манімейкерам для створення креативів і релевантних картинок.
AnimateDiff
AnimateDiff - нейронка, яка анімує будь-яке зображення. Іншими словами, "оживляє" його за допомогою дифузійної моделі з civitai. Ось кілька прикладів того, як нейронка робить GIF зі звичайного зображення:
Щоб спробувати AnimateDiff, потрібно завантажити код
тут, але потрібно 60 Гб відеопам'яті. Також можна зробити це онлайн через Colab ось тут.
Vmake
Vmake - нейронка для поліпшення якості відео та позбавлення від дефектів. Вона повністю безкоштовна, а скористатися нею можна онлайн ось тут. Програми для поліпшення якості фотографій часто погано справляються з цією роботою, тому ми перевіримо, наскільки Vmake зможе поліпшити погане відео.
Головна сторінка дуже проста і зрозуміла. Для початку роботи натискаємо на кнопку завантаження файлу:
Ми погіршили найперше згенероване відео і спробували поліпшити його в цій нейронці:
Відео і справді стало кращим, але тепер воно межує з мультяшністю через сильне згладжування і окреслені межі. На обробку відео пішло близько 30 секунд. Загалом, сервіс гідний і стане в пригоді всім, хто працює з відео.
Висновок
Ми протестували 6 нейронок із 10, і більшість із них будуть корисні під час роботи з фото, відео, дизайном і рекламою.
На цьому в мене все! Якщо вам сподобався матеріал, то розповсюдьте його серед друзів або в соціальних мережах. І підпишіться на телеграм-канал.
