Розробник Penta Dank представив цікавий проєкт під назвою Lore Walk, створений для Hacktoberfest Open-Source AI Challenge. Основна ідея застосунку полягає в тому, щоб спонукати користувачів менше дивитися в екран смартфона під час прогулянок. Користувач робить фотографію об'єкта, що привернув увагу, а ШІ миттєво перетворює це зображення на фрагмент міфічної історії, який автори називають Lore Shard.
Технічно Lore Walk є прогресивним веб-застосунком (PWA), що працює повністю на стороні клієнта. Використовуючи бібліотеку Transformers.js v3, програма запускає відкриті ШІ-моделі безпосередньо в браузері. Залежно від потужності пристрою, застосунок використовує WebGPU або WASM для обробки зображень. Це дозволяє працювати без інтернет-з'єднання, що є критично важливим для прогулянок на природі, де сигнал може бути нестабільним.
Процес створення історії складається з кількох етапів. Спочатку модель vit-gpt2-image-captioning створює текстовий опис фото, а модель CLIP визначає категорію об'єкта. Після цього модель SmolLM2-360M генерує короткий опис у стилі фентезі. Якщо модель не справляється, система використовує шаблони, щоб гарантувати стабільність роботи. Усі дані зберігаються локально в пам'яті пристрою, забезпечуючи повну приватність користувача.
Однією з головних переваг Lore Walk є відсутність залежності від зовнішніх API. Оскільки всі моделі завантажуються на пристрій, розробнику не потрібно платити за запити до серверів, а користувачі не ризикують своїми даними. Фотографії ніколи не покидають телефон, що робить застосунок безпечним інструментом для фіксації особистих моментів. Це наочний приклад того, як локальний ШІ перемагає хмарні рішення у специфічних завданнях.
Дизайн застосунку виконаний у стилістиці старовинних книг з використанням насичених фіолетових та золотих кольорів. Користувач може експортувати свій Lore Codex у форматі Markdown або як зображення для поширення. Можливість заміни моделей через налаштування дозволяє адаптувати застосунок під старіші телефони або пристрої з більшим обсягом оперативної пам'яті, що робить проєкт максимально гнучким для спільноти.
Проєкт Lore Walk демонструє, що відкриті технології можуть бути не лише функціональними, а й емоційними. Замість того, щоб збирати дані для навчання корпоративних моделей, цей інструмент допомагає людині побачити магію у звичайних речах. Це справжній тріумф відкритого програмного забезпечення, де технологія служить творчості, а не навпаки, заохочуючи нас частіше виходити на вулицю та помічати навколишній світ.
🔗 Першоджерело: Читати оригінал