Як Gemini змінить iPhone

Останнім часом з'явилися чутки про те, що компанія Apple розробляє власний чатбот на базі штучного інтелекту під назвою Apple GPT, спрямований на імітацію функціональності ChatGPT від OpenAI. У цей період ринок заполонили продукти з ШІ.

В той час як від Apple надходили лише неоднозначні заяви, її генеральний директор Тім Кук пообіцяв інвесторам, що майбутній ШІ компанії відкриє нові перспективи до кінця року. Здавалося, що для реалізації цих амбіцій Apple може знадобитися підтримка Google або навіть OpenAI.

Згідно з інформацією від Bloomberg, Apple перебуває в процесі переговорів з Google про ліцензування штучного інтелекту Gemini для використання в iPhone, аналогічно до підходу Samsung для їх серії Galaxy S24. Терміни угоди ще не визначені, оскільки переговори тривають. Повідомляється, що Apple також веде діалог з OpenAI. Зауважимо, що базові технології OpenAI, такі як GPT-4 та Dall-E, вже використовуються в продуктах Microsoft, а також в різноманітних додатках та сервісах, включаючи ChatGPT Plus. Це розвиток подій в амбіціях Apple в сфері ШІ викликає як зацікавленість, так і занепокоєння.

Дослідження ШІ від Apple: огляд останніх розробок

В останні місяці 2023 року компанія Apple представила колекцію бібліотек моделей і фреймворків під умовною назвою MLX, розроблену для використання на власних чипах компанії. Цей крок має на меті надати комп'ютерам Mac можливості, порівнянні з функціоналом, який Qualcomm впроваджує через платформу Snapdragon X Elite, зокрема в області штучного інтелекту.

На початку року дослідницька група Apple опублікувала документ про інструмент ШІ з назвою Keyframer, призначений для створення анімаційного контенту. Основу цього інструменту становить модель GPT-4 від OpenAI, але з додаванням можливості обробки статичних зображень за допомогою векторної графіки.

Крім того, спеціалісти Apple оприлюднили наукову роботу, де описано інструмент ШІ, який спрощує процес редагування зображень, використовуючи прості словесні вказівки. Цей інструмент нагадує мультимедійний редактор із голосовим управлінням, що анонсовано в нових чіпах Snapdragon від Qualcomm.

Згідно зі звітом Bloomberg, Apple активно розширює свою команду, яка спеціалізується на дослідженні можливостей генеративного ШІ. Головною метою є зробити ці інструменти доступними для широкого кола розробників до 2024 року.

За інформацією, перші функції ШІ від Apple мають бути представлені в iOS 18, прем'єра якої запланована на червень. Проте, як повідомляє Bloomberg, нові функції будуть інтегровані в системи пристроїв компанії, а не залежатимуть від хмарних обчислень, як це зазвичай роблять генеративні моделі ШІ, подібні до ChatGPT, Gemini чи Perplexity.

У вересні The Information повідомило, що Apple працює над базовими моделями, які мають покращити функціонал Siri. Ця ініціатива може бути порівнянна з тим, як Google використовує модель Gemini для підвищення можливостей Google Assistant.

Функціональність Gemini на iPhone: нові можливості

Gemini надає користувачам iPhone широкий спектр функцій, що працюють як локально, так і при підключенні до інтернету. Використовуючи Gemini на пристрої, програма може узагальнювати розмови в застосунку Recorder навіть у відсутності мережевого з'єднання.

Користувачі клавіатури Gboard мають доступ до функції Smart Reply у таких застосунках, як WhatsApp, завдяки Gemini Nano. Ця функція аналізує тексти розмов та пропонує відповіді на основі контексту. До того ж, ШІ на пристрої підтримує автономні переклади, які вже доступні на телефонах Samsung Galaxy S24 з підтримкою Gemini.

Ось деякі з основних можливостей, які Gemini пропонує користувачам iPhone:

1. Природний діалог з Gemini. Подібно до взаємодії з Google Assistant або ChatGPT, користувачі можуть спілкуватися з Gemini звичайною мовою для отримання допомоги у написанні текстів, генерації ідей тощо.
2. Розширення Workspace. Активувавши цю функцію, користувачі можуть швидко узагальнювати інформацію у листах чи файлах, використовуючи різні формати представлення, такі як списки, діаграми та таблиці.
3. Генерація зображень з текстових підказок. Функція, подібна до Dall-E від OpenAI, дозволяє створювати зображення, використовуючи текстові команди.
4. Інновації у використанні камери. Завдяки Gemini користувачі можуть навести камеру на сцену і запитати детальну інформацію про об'єкти в кадрі.
5. Розуміння вмісту екрана. Командуючи "Hey Google", Gemini може виконувати завдання, пов'язані з контентом на екрані, наприклад, узагальнювати статті, які користувач переглядає.
6. Планування поїздок з Google Maps та Google Flights. Gemini дозволяє користувачам планувати подорожі та створювати індивідуальні маршрути з використанням цих застосунків.

Перспективи угоди між Apple та Google у сфері штучного інтелекту

Раніше Google співпрацювала з Samsung для інтеграції моделі штучного інтелекту Gemini Nano в флагманські телефони Samsung. Така співпраця не обмежувалася лише верхнім сегментом ринку; MediaTek оголосила, що її чіпсети середнього класу Dimensity 8300 тепер оптимізовано для роботи з Gemini поряд з флагманським Dimensity 9300.

Таку співпрацю можливо втілити і для продуктів Apple. Якщо пряме ліцензування не вдасться, існує альтернатива через додатки. Стратегія, яку обере Apple в разі реалізації угоди, залишається невизначеною.

Основне питання полягає в тому, як така угода може вплинути на взаємодію користувачів з iPhone і, можливо, на Siri. Необхідно багато покращень для Siri, щоб вона могла конкурувати з Google Assistant.

Поки що невідомо, як Gemini і Google Assistant будуть співіснувати на одному пристрої. Встановлення Gemini на Android телефон замінює Google Assistant, хоча й не повністю.

Нині Google Assistant продовжує виконувати багато повсякденних завдань на телефонах користувачів, таких як встановлення будильників, відправлення повідомлень, управління "розумним домом" та планування в календарі. Також Google Assistant залишається основним ШІ для навігації, голосового введення та використання в Android Auto.

Google Assistant продовжує бути ключовим помічником у смартдисплеях та годинниках Wear OS. З огляду на міцну інтеграцію програмного забезпечення та апаратної частини в екосистемі Apple, особливо між iPhone та Apple Watch, можливе розділення функціонала між Gemini, Google Assistant та Siri може заплутати користувачів.

Як альтернатива, Apple може налагодити тісну співпрацю з Google для створення ексклюзивної інтеграції Gemini з функціями Apple, такими як Siri, Mail та інші. Проте з огляду на нинішню політику зберігання даних Gemini, великої інтеграції на рівні системи очікувати не варто.

Потенційні ризики використання Gemini в продуктах Apple

Нещодавно Apple намагалася наздогнати інші компанії у сфері штучного інтелекту, але угода з Gemini може перешкодити розробці власного ШІ в рамках проєкту “Аякс” Apple. Це може призвести до того, що потенціал Apple у сфері ШІ буде використано лише частково, оскільки основні завдання штучного інтелекту в iPhone будуть виконуватися за допомогою Gemini.

Gemini вже виявив деякі помилки, які викликали суперечки серед користувачів, зокрема неточності у відтворенні кольору шкіри, етнічної приналежності та історичної вірогідності. Ці інциденти спонукали Google призупинити деякі функції Gemini, що підкреслює ризики, пов'язані з інтеграцією недосконалої технології в продукти Apple.

Крім того, Gemini втягнулася в полеміку через свої невдалі коментарі щодо політичних фігур, що викликало невдоволення і розгляд питань щодо регулювання штучного інтелекту. Це може стати проблемою для Apple, яка обережно ставиться до державного регулювання.

Ліцензування Gemini для великої кількості пристроїв Apple у всьому світі становить суттєвий ризик, особливо враховуючи попередження Google про потенційні помилки, які може зробити Gemini. Це вимагає додаткових перевірок і може ускладнити взаємодію користувачів з новими функціями Apple.