Як я підключив ChatGPT Vision до своїх Ray-Ban Meta і що з цього вийшло
Вже досить давно користуюся розумними окулярами Ray-Ban Meta — вони стали моїми надійними помічниками, коли я йду за покупками чи дивлюся шоу Bad Bunny на півчасі. Загалом, це класний гаджет, але є один момент: вони «прив’язані» до Meta AI.
Це не так вже й погано, адже Meta AI створено саме для цих окулярів і він здатен за допомогою камери відповісти на запитання про те, що ти бачиш навколо. Проте я частіше звертаюсь до ChatGPT, тож мені захотілось дізнатись, чи можна дати ChatGPT такий самий «зір».
Візія майбутнього: ChatGPT без екрану?
Цей невеличкий експеримент дає уявлення про те, куди може рухатися ChatGPT. OpenAI вже працює із колишнім дизайнером Apple Джоні Айвом над новим поколінням AI-пристроїв. Перший девайс обіцяють зробити портативним, без екрану, з камерами і сенсорами, які зможуть «відчувати» навколишній світ. А ще в планах — низка інших гаджетів.
Поки що неясно, чи стануть окуляри розумними помічниками від OpenAI, але тренд чітко простежується: ChatGPT скоро не потребуватиме, щоб ви діставали смартфон і відкривали додаток.
Використання моїх Ray-Ban Meta як сполучної ланки
Я не зламував окуляри і не міняв Meta AI на ChatGPT. Замість цього використав iPhone як посередника між камерою на окулярах і ChatGPT.
Як це працювало? Основна ідея — надати ChatGPT можливість бачити те, що бачу я. З двох складових: голосового управління і візії, із голосом все просто — мої Ray-Ban Meta підключаються до iPhone через Bluetooth і можуть транслювати звук з викликів, музики тощо. Тож я запускав ChatGPT на телефоні, а окуляри відтворювали його відповіді.
Камера показує все, що бачу я
Щоб передати зображення з окулярів, мене врятувала розробницька платформа Meta Wearables Device Access Toolkit, що дозволяє приймати кадри з камери окулярів через iPhone — не потрібно використовувати камеру самого телефону.
Отже схема виглядала так:
- Ray-Ban камера передає зображення
- iPhone отримує і відправляє фото з питанням ChatGPT
- ChatGPT обробляє й відповідає
- Окуляри відтворюють голосову відповідь
Цей процес не найшвидший і вимагає від iPhone неабияких зусиль «посипатися» між усіма ланками, але це працює. Варто уточнити, що я не встановлював ChatGPT безпосередньо на окуляри, і фраза «Hey Meta» не активація ChatGPT, але результат вражає і дуже нагадує справжній AI-помічник на вуменному дисплеї.
Порівняння двох AI: Meta AI проти ChatGPT
Звичайне використання ChatGPT на телефоні вимагає дій: дістати гаджет, відкрити додаток, сфокусуватись на об’єкті. Окуляри дозволяють просто дивитись — і AI бачить те саме, що й ти.
Ось три цікаві тести, що показали різницю між Meta AI і ChatGPT:
1. Тест у супермаркеті
Взяли дві схожі товари: Pringles і Cape Cod Potato Chips. Обидва помічники допомогли обрати, але ChatGPT відповів більш впевнено, а Meta AI видав відповіді із застереженням «якщо хочеш…». Для вибору важливо мати чітку пораду, тож ChatGPT виглядав кращим.
2. Тест «Що я бачу?»
Показав обом помічникам свого пухнастого рудого кота. ChatGPT назвав його ім’я — Джоллі, бо «пам’ятає» сотні попередніх запитів і знає мене краще. Meta AI такого не зміг, демонструючи обмеженість контекстуального розуміння.
3. Тест на читання тексту
Голос і стиль відповідей ChatGPT значно дружелюбніші, ніби спілкуєшся з живою людиною. Meta AI більш сухий і фактичний — швидко до діла, без зайвих слів. Хтось віддасть перевагу лаконічності, а хтось душевності. Для мене це друге важливіше навіть у звичайних задачах.
Що дає цей досвід?
- Meta AI — бездоганна інтеграція, все працює як один механізм: камера, мікрофони, динаміки й AI.
- ChatGPT через iPhone — це кілька кроків і складна настройка, можливі затримки й проблеми зі зв’язком.
- Meta AI — найкращий для швидких відповідей, але ChatGPT — більш дружній і «людяний» помічник.
Рівень взаємодії ChatGPT на окулярах дуже близький до справжнього майбутнього AI-пристроїв. Було б круто, якби одного дня можна було обрати AI, який хочеш використовувати на своїх окулярах — рішення не залежало б від бренду гаджета.
Зараз Ray-Ban Meta не дає такої свободи, але експеримент показав, що вибір AI — це наступний великий крок у світі розумних гаджетів.
