Перший повністю згенерований навчальний ШІ застосунок для VisionOS

Сергій — Tue, 30 Dec 2025 21:32:48 +0000

Привіт усім 👋
Я створив повністю створений ШІ застосунок для VisionOS — від графіки, озвучення та музики до генерації коду.
Можна сказати це перший VisionOS застосунок який повністю згенерований

Мені вдалося втілити хакатон-проєкт у життя — і він уже доступний в App Store
👉 https://apps.apple.com/app/exoview/id6754521117

Kepler-186f Екзопланета

Якщо у вас є Apple Vision Pro — запрошую досліджувати та навчатися. Усі екзопланети згенеровані на основі реальних даних NASA (можна сказати, першим створив візуалізацію екзопланет з поверхні для дослідження та навчання, напевно перший у Всесвіті 🌌).

Кастомна модель ML для генерації зображень, використана для створення нових даних про планети (у вигляді зображень на основі JSON-набору та навчана на дата сеті NASA)

Я створив візуалізації з поверхні цих екзопланет. 🚀
Перший навчальний у світі повністю згенерований ШІ застосунок для VisionOS з квізами, графікою, UI/UX та голосом та музикою (напевно навіть всьому Всесвіті :D )

360° VR-панорама, згенерована ШІ з кастомної ML-моделі (дані обробляються у текстовий промпт і перетворюються на згенероване 360° зображення)

Data set планет генерований у ComfyUI
Кастомна нода ComfyUI для отримання реальних даних (парсинг даних з новою знайденою планетою)і додатково білдер промптів для екзопланет

Так виглядає нова знайдена планета(або можна будь яку іншу описати так само)

Дані екзопланет для генерації ШІ-зображення (360° зображення)

ComfyUI воркфлоу для 360 генерації зображення

Приклад планети TRAPPIST-1

Прев’ю застосунку VisionOS, згенероване за допомогою ШІ Claude Code

Прев’ю застосунку VisionOS, згенероване за допомогою ШІ Claude Code (UI/UX VisionOS додатку)

Іконка була створена в сервісі Ideogram

ExoView назва додатку VisionOS

XCode Code generation

360° зображення згенеровані локально за допомогою ComfyUI
Модель для пошуку нових екзопланет отримана за допомогою Claude Code та ChatGPT (Python і Scikit-learn)
Іконка застосунку згенерована сервісом Ideogram
Код для VisionOS згенерований Claude Code (Visual Studio + GLM-4.7 LLM (chat.z.ai api)
Опис застосунку згенерований ChatGPT
Озвучення та фонова музика згенеровані ElevenLabs
Опис додатку згенерован у ChatGPT
UX/UI генерований у Figma
Ідея моя :D

Сам додаток тут: https://apps.apple.com/app/exoview/id6754521117

Розкриття потенціалу Unreal Engine 5. Реальне застосування (туторіал для дизайнерів)

Сергій — Thu, 03 Aug 2023 12:43:19 +0000

Вступ
Особливості Unreal Engine 5
Реальні застосування
Переваги використання Unreal Engine 5
Майбутнє Unreal Engine 5
Unreal Engine для тих, хто не знає, що це таке
Unreal Engine, якщо не для ігор
Unreal Engine для дизайнера UI/UX
Висновок

Вступ

Unreal Engine 5 є останньою версією популярного грального рушія, розробленого компанією Epic Games. Цей потужний інструмент революціонізував гральну індустрію і зараз використовується в різних сферах реального життя, включаючи архітектуру, кіно та віртуальну реальність. Завдяки своїм передовими графічними можливостями, інтуїтивним інтерфейсом та потужним набором функцій, Unreal Engine 5 змінює правила гри для творців у різних галузях. У цій презентації ми розглянемо основні особливості Unreal Engine 5 та як вони використовуються у реальних сценаріях.

Особливості Unreal Engine 5

Unreal Engine 5 має вражаючий перелік особливостей, що роблять його першим вибором для розробників і дизайнерів. Одним з його найбільш значущих досягнень є технологія Nanite, яка дозволяє відтворювати докладно пророблені моделі активів в реальному часі, надаючи їм кінематографічної якості. Це означає, що дизайнери можуть створювати неймовірно складні оточення, не жертвуючи продуктивністю.

Інші значущі особливості включають Lumen - динамічну систему глобальної підсвічуваності, яка забезпечує реалістичні ефекти освітлення, а також MetaHuman Creator - інструмент, який спрощує процес створення живих персонажів людей. За допомогою цих та багатьох інших особливостей користувачі можуть створювати захоплюючі враження, що розширюють можливості того, що є можливим.

Реальні застосування

Unreal Engine 5 використовується в широкому спектрі реальних застосувань, починаючи від відеоігор до архітектури. В гральній індустрії його використовують для створення дивовижно реалістичних оточень і персонажів, що переносять гравців в захоплюючі світи. В архітектурі він використовується для створення інтерактивних 3D- моделей будівель та просторів, що дозволяє дизайнерам візуалізувати свої творіння в реальному часі.

У кіно Unreal Engine 5 використовується для створення віртуальних декорацій та оточень, які можна безшовно інтегрувати з живими кадрами. Це має потенціал революціонізувати процес створення фільмів, оскільки воно дозволяє більшу гнучкість та творчість у процесі кіномистецтва. Завдяки своїй універсальності та потужності Unreal Engine 5 швидко стає важливим інструментом для творчих людей у багатьох галузях.

Переваги використання Unreal Engine 5

Переваги використання Unreal Engine 5 є численними. По- перше, воно дозволяє збільшити ефективність творчого процесу, оскільки дизайнери можуть бачити свої творіння в реальному часі і вносити зміни на льоту. Це економить час і ресурси і дозволяє проводити більше експериментів та ітерацій.
Крім того, Unreal Engine 5 є вигідним з фінансової точки зору, оскільки він усуває потребу у дорогих фізичних декораціях та реквізиті. Він також забезпечує кращий користувацький досвід, оскільки передові графічні можливості та реалістичні ефекти освітлення створюють більш захоплюючий і зацікавлюючий досвід для користувачів. Завдяки цим та багатьом іншим перевагам, не дивно, що Unreal Engine 5 швидко стає необхідним інструментом для творчих людей у різних галузях.

Майбутнє Unreal Engine 5

Майбутнє Unreal Engine 5 виглядає світлим. По мірі того, як технології продовжують розвиватися, так само розширюватимуться можливості цього потужного інструменту. Ми можемо очікувати ще більш реалістичну графіку, швидші часи рендерингу та більш інтуїтивні інтерфейси в найближчі роки.

Крім того, Unreal Engine 5 має потенціал впливати на різні галузі, крім геймінгу та кіноіндустрії. Він може використовуватися у таких сферах, як освіта, охорона здоров'я та інженерія, для створення захоплюючих тренувальних симуляцій та візуалізацій. Завдяки своїй універсальності та потужності, можливості Unreal Engine 5 безмежні.

Unreal Engine для тих, хто не знає, що це таке

Unreal Engine - це потужне гральне рушіє, за допомогою якого створюються дивовижно реалістичні відеоігри, архітектурні моделі та фільми. Це все в одному інструменті, який надає все необхідне для втілення вашої візії у життя, від проектування до розробки та розповсюдження. Навіть якщо ви не розробник або дизайнер, ви все одно можете скористатися функціями та можливостями Unreal Engine.

Наприклад, візуальна система скриптування Blueprint в Unreal Engine дозволяє непрограмістам створювати складні взаємодії та функціональність без написання жодного рядка коду. Це означає, що художники, письменники та інші творчі особистості можуть використовувати Unreal Engine для створення інтерактивних досвідів без необхідності мати технічну підготовку. Крім того, Unreal Engine Marketplace пропонує тисячі безкоштовних і платних ресурсів, включаючи 3D- моделі, текстури та анімацію, які можна легко імпортувати у ваш проект. Незалежно від того, чи ви досвідчений розробник або новачок у світі геймдизайну, Unreal Engine має щось для кожного.

Unreal Engine, якщо не для ігор

Можливості Unreal Engine виходять за межі геймінгу. Він може бути використаний для створення неймовірно реалістичних архітектурних моделей, фільмів та навіть віртуальних реальностей. Його передовий фізичний двигун та можливості рендерингу дозволяють створювати докладні та точні симуляції реальних середовищ, що робить його цінним інструментом для галузей, таких як архітектура та інженерія.

Крім того, система візуального скриптування Blueprint та ресурси з Marketplace Unreal Engine можуть бути використані не-ігровими творчими особистостями для втілення своїх ідей у життя. Від створення інтерактивних художніх інсталяцій до проектування захоплюючих освітніх досвідів, можливості з Unreal Engine безмежні.

Unreal Engine для дизайнера UI/UX

Unreal Engine не обмежується лише розробкою ігор, оскільки він має великий потенціал у сфері дизайну UI/UX. Завдяки передовому фізичному двигуну та можливостям рендерингу, він може забезпечити докладні та точні симуляції інтерфейсів користувача, що робить його ідеальним інструментом для дизайнерів, які бажають створити візуально захоплюючі та інтерактивні досвіди.

Крім того, система візуального скриптування Blueprint та ресурси з Marketplace Unreal Engine можуть бути використані дизайнерами UI/UX для створення настроюваних анімацій, переходів та взаємодій, які можуть покращити загальний досвід користувача. Від створення захоплюючих демонстрацій продуктів до проектування цікавого навчального контенту, Unreal Engine може допомогти дизайнерам втілити їх ідеї в життя способами, які раніше були неможливими.

Чому потрібен Unreal Engine, якщо у нас є 3ds Max і Blender?

Unreal Engine: відкрита автомобільна платформа та модель даних майбутнього

Чому це так складно? Насправді, це не так складно :-)

Взаємодія дотику, віртуальна реальність (VR), розширена реальність (AR), змішана реальність (XR)

Віртуальний планетарій Microsoft HoloLens 2

Всі можливості для коригування кольору та освітлення :-)

Буде багатофункціональний інструмент, як тільки володієш C++ :-)

Віртуальний конфігуратор

Висновок

Висновуючи, Unreal Engine 5 революціонізує творчі галузі в різних індустріях. Його передові особливості, реалістична графіка та інтуїтивний інтерфейс роблять його вибором номер один для дизайнерів та розробників. Незалежно від того, чи ви створюєте відеогру, проектуєте архітектурну модель або знімаєте фільм, Unreal Engine 5 надає необхідні інструменти, щоб втілити вашу візію у життя.

Ми радимо вам досліджувати далі Unreal Engine 5 і відкривати всі його можливості. З його багатьма перевагами та безмежним потенціалом, ми віримо, що Unreal Engine 5 - це майбутнє творчого дизайну та розробки.

Дякую за перегляд :-)
Сергій Кознов
Дизайнер
e-mail: koznov.sergey@gmail.com

UXPUB 🇺🇦 Дизайн-спільнота: Сергій