Я отправил Pixel Screenshots 1800 скриншотов и задал им вопросы

Как технический энтузиаст, который уже много лет использует различные устройства Android, я должен сказать, что приложение Google Pixel Screenshots — это многообещающий шаг вперед в использовании возможностей искусственного интеллекта для улучшения пользовательского опыта. Хотя в настоящее время он предлагает хорошие возможности, есть несколько областей, где его можно значительно улучшить, чтобы лучше обслуживать таких пользователей, как я, которые часто делают снимки экрана.

Серия Google Pixel 9 выделяется во многих аспектах, но особенно выделяется инновационным использованием искусственного интеллекта на устройстве, позволяющим повысить эффективность использования смартфона. Таким образом, Google представил новое приложение под названием Pixel Screenshots, которое преобразует случайные снимки экрана из временных и незначительных снимков в доступные для поиска и полезные контекстные карточки, предлагающие действия.

В течение последних нескольких недель я полагался на Pixel 9 Pro XL в качестве своего основного телефона, и позвольте мне сказать вам, что он значительно улучшил мою обработку снимков экрана благодаря обработке более 1800 из них (на самом деле обрабатываются только 300). ; подробнее об этом позже). Честно говоря, я искренне впечатлен. Тем не менее, есть области, в которых Google мог бы улучшить пользовательский опыт, и, безусловно, есть потенциал для дальнейшего улучшения.

Итак, что же такое приложение Pixel Screenshots?

Приложение Pixel Screenshots представляет собой практическое решение вопроса: «Может ли быть какая-то польза от множества снимков экрана, которые я делаю ежегодно?»

Это приложение, эксклюзивное для устройств Pixel, которое использует встроенную в устройство технологию Gemini Nano для мультимодальной функциональности. Представьте себе это как инструмент, который обрабатывает каждый снимок экрана с помощью оптического распознавания символов (OCR), создавая базу данных содержащейся в них информации. Затем вы можете взаимодействовать с этими скриншотами, задавая вопросы, связанные с их содержанием, и получать немедленные ответы. С помощью этого приложения вы можете сделать снимок экрана, сохранить его и мгновенно получить доступ к его данным, когда это необходимо.

Что на самом деле делает приложение Pixel Screenshots?

Google утверждает, что приложение Pixel Screenshots имеет три основные функции: сохранение, систематизация и вызов.

Сохранить — новая память для ваших скриншотов.

В последней серии Pixel 9 снимок экрана автоматически сохраняется в локальной памяти вашего устройства, как и в других высокопроизводительных телефонах Android.

Очарование начинается здесь: снимок экрана напрямую вводится в приложение Pixel Screenshots. Это запускает немедленный анализ изображения, в ходе которого определяются такие детали, как адреса, цены, номера телефонов и дополнительные сведения, а также информация о приложении или веб-сайте, с которого был сделан снимок экрана.

Приложение «Снимки экрана» использует искусственный интеллект для создания заголовков и сводок захваченных данных. Он идет еще дальше, предлагая дополнительные действия, такие как планирование событий в Календаре Google или установка напоминаний. Я был рад обнаружить, что ИИ может разумно предлагать подходящее время для напоминаний, как, например, в приведенном примере напоминания о Черной пятнице. Теперь мне больше не нужно вручную вводить дату и время при настройке напоминаний; просто сделайте снимок экрана и создайте напоминание, готово.

Организация — вручную объединяйте и собирайте похожие снимки экрана.

Приложение Pixel Screenshots предоставляет индивидуальную среду для создания различных коллекций скриншотов. Если вам когда-либо хотелось создать различные папки для ваших снимков экрана, поддерживать порядок в приложении-галерее и обеспечивать легкий доступ в будущем, это как раз то, что вам нужно! Я нашел его особенно полезным при просмотре одежды и аксессуаров, но при постоянном использовании он превращается в мощный инструмент для организации рекомендаций онлайн-книг или интригующих технических продуктов.

Если вы увлекаетесь домашним декором, путешествиями, кулинарными приключениями или какими-либо другими интересами, эти подборки действуют так же, как персонализированная версия Pinterest в вашем местном сообществе. Более того, у вас есть возможность комментировать каждую коллекцию личными заметками, повышая ее запоминаемость и значимость.

Напомним — находите что угодно и когда угодно.

Отличительной особенностью приложения Pixel Screenshots является его способность делать данные со снимков экрана доступными для поиска. Вы можете вводить вопросы в диалоговом режиме в строку поиска приложения, и приложение «Снимки экрана» получит ответ из обработанных им снимков экрана вместе с исходным снимком экрана для контекста. Это позволяет вам быстро просмотреть полную информацию, связанную с полученным вами ответом.

По словам Google, со временем вы сможете использовать приложение Gemini на своем смартфоне для поиска ранее сохраненных снимков экрана. Однако на моем устройстве эта функция на данный момент не активирована (или, возможно, я использую ее неправильно, и мне не удалось заставить ее работать).

Опыт пиксельных снимков экрана: изменение способа создания снимков экрана

Приложение Pixel Screenshots решает для меня ключевую дилемму, добавляя к снимкам экрана долгосрочную цель, выходящую за рамки немедленного обмена.

Приложение Pixel Screenshots спасает ваши снимки экрана от недолговечной судьбы и придает им реальную ценность в долгосрочной перспективе.

Вместо того, чтобы бездумно делать бесчисленные скриншоты различных вещей, от развлекательных мемов до разговоров в чате, рекомендаций по продуктам или случайных фрагментов, которые могут пригодиться позже, я тот, кто рефлекторно нажимает кнопки уменьшения громкости и питания, часто без особой предусмотрительности.

Хотя использование таких приложений, как Google Files и Google Photos, помогает поддерживать порядок, я собрал впечатляющие 1800 снимков экрана. Однако они были перенаправлены в приложение Pixel Screenshots на моем Pixel 9 Pro XL, которое может ежедневно обрабатывать только ограниченное количество изображений для обработки. В результате мне удалось обработать около 300 изображений, но на этом дело просто остановилось. Я надеюсь, что вся моя коллекция со временем будет обработана, но на данный момент я не могу найти способ вручную предложить приложению проанализировать оставшиеся скриншоты в моей обширной библиотеке. Мне бы очень хотелось, чтобы была возможность быстрой кнопки «Обработать все».

Из 1800 скриншотов, которые я загрузил в приложение, было обработано только 300. Остальные, кажется, застряли в забытой стране дросселей.

Первоначально я столкнулся с серьезной проблемой при работе с пиксельными скриншотами, тем более что моя коллекция довольно обширна. Возможно, вам будет сложно импортировать всю коллекцию в приложение без проблем, или, возможно, вы предпочитаете делать это партиями. Однако последующие снимки экрана должны быть проще, поскольку приложение автоматически обрабатывает новые снимки, когда ваш телефон находится в режиме ожидания, что сводит к минимуму регулирование при обычном ежедневном использовании.

Скриншоты скоро могут заменить ваши быстрые заметки

Для этих 300 изображений приложение Pixel Screenshots дало мне ощущение объективности. За несколько недель использования Pixel 9 Pro XL я начал делать снимки экрана с дополнительной информацией, зная, что смогу правильно найти ее позже. В каком-то смысле это немного лениво, но очень практично. Не нужно добавлять страницы в закладки, делать заметки, сохранять изображения и т. д. Просто поверьте, что приложение «Снимки экрана» сделает это за меня.

Просматривая Reddit в поисках отзывов о ближайшем кинотеатре, я сделал скриншот определенного поста вместе с комментариями. Данные не были достаточно ценными, чтобы создать подробную запись в моем приложении для заметок, но они также не были незначительными, поэтому я решил не игнорировать их полностью.

Как исследователь, когда мне недавно нужно было описать кому-то конкретное воспоминание о кинотеатре, я обратился за помощью к своему приложению «Снимки экрана». Он быстро предоставил краткое описание и точный скриншот, который я искал, что в противном случае потребовало бы от меня потратить несколько минут на просмотр различных скриншотов или еще один поиск в Google, чтобы найти точную публикацию на Reddit.

Когда я хотел поделиться вкусами булочек с мороженым, которые я недавно видел в своем приложении для доставки еды, мне не нужно было копаться в нескольких экранах или искать конкретную запись о продукте. Вместо этого я просто попросил Pixel Screenshots предоставить мне нужный снимок экрана, и он быстро предоставил его без каких-либо проблем. Этот метод также работал без проблем, когда я хотел отправить сохраненные мной оповещения о муссонах.

Во всех остальных случаях, когда я использовал это приложение, я ценил, что большинство моих изображений были помещены в контекст, что позволяло мне легко искать и собирать похожие снимки. Это сделало просмотр многочисленных скриншотов легкой задачей и значительно облегчило поиск того, что я сохранил ранее.

Вам еще предстоит проверить информацию на предмет галлюцинаций.

ИИ не всегда может быть точным, поскольку приложение «Снимки экрана» иногда выдает не совсем правильные ответы. Несмотря на впечатляющие возможности создания снимков экрана и их эффективной классификации, в создаваемых сводках могут время от времени возникать ошибки. У Google есть уведомление о таких неточностях, поэтому рекомендуется принять его к сведению при использовании этого приложения.

Как и во всех других случаях использования ИИ, «Скриншоты» могут страдать от галлюцинаций.

На одном из изображений, которые я исследовал, обнаружилось несоответствие в цене на рулет с мороженым. Указанная цифра (10 долларов США) не соответствует какой-либо информации, видимой на изображении, а также не соответствует валюте, используемой в контексте.

Я отправил Pixel Screenshots 1800 скриншотов и задал им вопросы — вот что я узнал

Когда я начал чаще использовать приложение Pixel Screenshots, я обнаружил, что сильно полагаюсь на него при поиске своих снимков экрана. Однако я также заметил снижение доверия к его способности точно извлекать данные из этих скриншотов.

Через пару недель я начал использовать надежный поиск Pixel Screenshots больше, чем его галлюцинирующие ответы ИИ.

Пропуск процесса проверки информации кажется излишним, когда я могу просто найти соответствующий скриншот и быстро отсканировать детали. Следовательно, я начал игнорировать сводку AI, подобно тому, как я часто обхожу ее во время обычного поиска в Google.

Что могло бы улучшить приложение Pixel Screenshots

Понятно, что приложение Pixel Screenshots довольно новое и только начинает проявлять свой потенциал. Несмотря на то, что сейчас он предлагает достойный пользовательский опыт, есть много возможностей для его дальнейшего расширения и улучшения.

Вместо этого позвольте мне выразить это так: здорово, что я могу делать снимки экрана с помощью этого приложения, но иногда я предпочитаю систематизировать старые снимки, заархивировав их. Хотя основная функция приложения — быстрое создание снимков экрана и их забывание, было бы полезно иметь ручной контроль над архивированием этих старых снимков. Поскольку Google уже предлагает базовые возможности редактирования изображений в «Снимках экрана», функция архивирования или очистки идеально соответствует его возможностям.

Кроме того, важно устранить некоторые недочеты в приложении. Во-первых, процесс выбора нескольких снимков экрана может быть трудоемким, поскольку нет возможности перетаскивания для массового выбора. Кроме того, навигация по снимкам экрана происходит медленно, поскольку отсутствует полоса прокрутки и временная шкала, позволяющая пользователям легче находить определенные снимки экрана. Это придает приложению ощущение огромного, бесконечного моря скриншотов.

Мне бы хотелось увидеть умную организацию снимков экрана, подобную Google Photos, по источнику или типу приложения.

Было бы здорово, если бы Pixel Screenshots могла автоматически классифицировать скриншоты. Простой метод классификации может быть основан на используемом приложении, группируя таким образом снимки экрана из таких приложений, как WhatsApp, Instagram, Chrome и т. д. Кроме того, он может использовать часть интеллекта Google Photos для создания интеллектуальных категорий, таких как списки покупок, планы поездок, предстоящие события, рекомендации по книгам или еде и многое другое.

Обсуждая Google Photos, оказывается, что перенести старые скриншоты в приложение непросто. Если ваши скриншоты были перемещены в процессе установки Android, то поздравляем! Однако в противном случае вы окажетесь в затруднительном положении. Мне удалось переместить свои старые скриншоты в папку «Изображения», а именно в раздел «Снимки экрана», но, как упоминалось ранее, я столкнулся с трудностями при их обработке до истечения крайнего срока проверки.

Как технически подкованный человек, мне бы хотелось, чтобы в систему добавили одну функцию — это возможность вручную запускать обработку ИИ для моих ожидающих снимков экрана. В настоящее время, несмотря на возможность принудительной обработки каждого снимка экрана по отдельности, другого способа обойти ограниченную вычислительную мощность, похоже, не существует. Если вы планируете импортировать большое количество старых скриншотов, я не могу гарантировать, что все они будут обработаны оперативно (некоторые из моих все еще находятся в очереди даже после нескольких недель использования).

Приложение Pixel Screenshots будет чувствовать себя как дома в качестве премиальной функции Google Photos.

Хотя я ценю обработку на устройстве, которая является изюминкой приложения Pixel Screenshots, мне также хотелось бы, чтобы эта функциональность была перенесена в Google Photos в качестве дополнительной функции. Я бы не возражал, если бы Google открыл обработку снимков экрана для всех пользователей Android, а не только для владельцев Pixel, но оставил бы ее заблокированной для них за платным доступом Google One (как и другие премиальные функции Google Photos). Такой шаг добавил бы универсальности этой функции, поскольку все снимки экрана, резервные копии которых я уже сохранил в Google Photos, можно было бы четко проиндексировать, классифицировать и мгновенно сделать доступными для поиска. Годы снимков экрана больше не будут привязаны к смартфону, создавая персонализированную базу знаний искусственного интеллекта.

Приложение Pixel Screenshots — хорошее начало, и я ценю использование искусственного интеллекта на устройстве.

Вы можете считать пиксельные скриншоты довольно нишевым вариантом использования ИИ, но для меня это имеет смысл. Обычному пользователю требуется не так много генерации текста и изображений, и Pixel обеспечивает это с помощью Pixel Studio и Gemini. Такие приложения, как Pixel Weather и Pixel Screenshots, предоставляют Google дополнительные возможности для тренировки возможностей искусственного интеллекта на устройствах, и я с оптимизмом смотрю на их будущее. Это хороший и полезный ИИ, и он мне нравится.

Смотрите также

2024-09-11 18:49