Ключевые выводы
- Live Text распознает слова на фотографиях и изображениях и превращает их в обычный текст.
- iOS 15 и macOS Monterey запекают Live Text на самом глубоком уровне.
- Теперь нет разницы между текстом и изображениями текста.
Live Text превращает текст на фотографиях, снимках экрана или даже с вашей прямой камеры в доступный для поиска, копирования и редактирования текст.
В iOS 15, iPadOS 15 и macOS Monterey Live Text присутствует везде: на снимках экрана, в библиотеке фотографий и даже в областях ввода текста. Что он делает, так это распознает слова в любом изображении, а затем превращает их в обычный текст. Оттуда вы можете выбрать его, скопировать, поделиться им, найти его и даже перевести. Live Text также приносит на вечеринку «детекторы данных» Apple, так что вы можете, например, нажать на номер телефона на фотографии вывески магазина, а затем позвонить по нему с помощью приложения для телефона.
Если вы когда-нибудь нажимали на слово в мягкой обложке, чтобы узнать его значение, долго нажимали на ссылку, напечатанную в журнале, чтобы увидеть предварительный просмотр в Интернете, или нажимали на название места, чтобы увидеть его на карте, тогда вам понравится Live Text. Это делает реальный мир доступным для поиска, редактирования и более удобным для использования.
Это просто работает
В новых операционных системах Mac, iPad и iPhone Live Text уже есть. Специального режима нет. Apple добавила живой текст везде, где это имеет смысл. Каждый раз, когда вы делаете снимок экрана, появляется новая кнопка, которая позволяет выделить весь текст на изображении, и это самое сложное, что когда-либо было.
Это делает реальный мир доступным для поиска, редактирования и более удобным для использования.
В большинстве случаев текст на фотографии - это просто текст. Допустим, вы сфотографировали этикетку продукта в магазине, чтобы не забыть проверить ее позже. Если вы смотрите на это изображение в приложении «Фотографии», просто проведите пальцем по любому тексту, чтобы выбрать его. Просто теперь все изображения текста также автоматически становятся текстом. Оттуда вы можете поделиться им, скопировать его, использовать новую встроенную функцию перевода, позвонить по номеру, открыть ссылку, увидеть адрес на карте и многое другое.
Искать что угодно
При первой установке iOS 15 она будет сканировать и обрабатывать вашу библиотеку фотографий, распознавая любой найденный текст. Это имеет одно очень важное значение: если вы ищете что-то в Spotlight (общесистемном инструменте поиска), то он будет включать результаты из текста на ваших фотографиях.
Например, вы можете найти квитанции, которые вы сфотографировали много лет назад, просто выполнив поиск по тексту, который может быть на квитанции. Вы пытаетесь вспомнить, где вы ели это восхитительное блюдо из риса в отпуске на Коста-Брава? Если вы сфотографировали меню, то без труда его найдете.
Или как насчет создания книги рецептов, даже не пытаясь? Каждый раз, когда вы видите рецепт в журнале или в книге рецептов, просто сделайте снимок, и вы сможете найти его в любое время.
Live Text коренным образом меняет ваше взаимодействие с миром. Внезапно каждое слово на любом листе бумаги, любой витрине, снимке экрана или дорожном знаке становится таким же полезным, как и текст в приложении для заметок.
В вычислительной технике уже есть кусочки этого. Приложение Google Translate уже давно может переводить текст с помощью камеры, а iOS некоторое время может сканировать и распознавать документы в приложении Notes. Но теперь, когда Apple внедрила Live Text в свои устройства, больше нет различий между типами текста. Все то же самое. Даже те скриншоты текста, которые люди публикуют в Твиттере, теперь так же полезны, как если бы они сделали это правильно.
AR Lite
Live Text - еще один пример того, как Apple погружается в дополненную реальность. Мы видели, как Apple использует дополненную реальность: от слишком длинных демонстраций в различных основных докладах на протяжении многих лет до аккуратных моделей новых продуктов с дополненной реальностью, которые позволяют вам увидеть, как новый iMac будет выглядеть на вашем столе. Apple также добавила множество аудио-функций AR, читая сообщения и предупреждения или давая вам указания через AirPods.
Live Text коренным образом меняет ваше взаимодействие с миром.
Ни для кого не секрет, что все это является практикой для будущего продукта Apple для очков AR, и Live Text, вероятно, будет большой частью этого. Мало того, что ваши очки смогут читать знаки вокруг вас, чтобы лучше осознавать, они также смогут искать информацию, когда вы ее читаете.
Но пока мы все извлекаем выгоду из экспериментов Apple с дополненной реальностью. Живой текст просто фантастика. Я использую его всего пару дней, и это уже кажется естественным. Мне не терпится увидеть, что с ним сделают разработчики приложений.
