Распознавание изображений

Современные модели распознают изображения: читают текст на снимке, узнают предметы, животных и растения, разбирают графики. Приложите снимок к разговору, и описывать словами то, что на нём, больше не нужно.

Попробуйте прямо сейчас. Сфотографируйте что угодно на столе, отправьте в свой чат и спросите, что это такое. Умеет это не каждый сервис, и одна проверка покажет, умеет ли ваш.

Что отправляют снимком

Снимок годится везде, где вы иначе переписывали бы чужой текст или подбирали слова для описания.

Табличка на технике

Сфотографируйте шильдик кондиционера и попросите выписать с него марку, номер модели, мощность, год и страну выпуска. Если в сервисе включён поиск в интернете, по номеру модели он найдёт и инструкцию.

Чек и счёт

Снимок превращается в таблицу расходов. Отправьте его и попросите выписать позиции с суммами.

Бумажный отчёт с таблицей

Набирать его руками больше не нужно. Модель вернёт содержимое в том виде, который вы попросите.

Деталь без названия

Деталь, название которой вы не знаете, можно показать. Если модель её узнает, вы получите название, а с ним проще искать замену.

Узнаёт она не всякую деталь. Модели хуже распознают то, что редко встречалось в данных для их обучения. Деталь от редкого или узкоспециального оборудования модель скорее не опознает или назовёт неверно.

Пробовать всё равно стоит. Название, которое предложила модель, сверьте по каталогу или с продавцом, прежде чем заказывать деталь.

Упаковка товара в магазине

Сфотографируйте состав или характеристики и спросите, что из этого важно для вашего случая.

Симптомы и лекарства без рецепта

Опишите модели свои симптомы и спросите, какие средства без рецепта при них применяют и чем они различаются. С этого можно начать, когда недомогание не кажется вам серьёзным.

Совет модели не заменяет консультацию специалиста, как и ответ на юридический вопрос. OpenAI в правилах использования относит медицинские и юридические советы, подобранные под конкретного человека, к тем, что требуют участия лицензированного специалиста.

Снимок дополняет описание симптомов. Сфотографируйте упаковку или полку в аптеке. Спросите, что в средстве действующее, подходит ли оно при ваших симптомах и с чем его не сочетают.

С таким ответом вы подходите к прилавку с готовыми вопросами.

За прилавком стоит фармацевт, и вопросы адресуются ему. Этого требует сама упаковка: в американской этикетке Drug Facts есть раздел Warnings, куда вынесено, когда с выбором идут к специалисту.

FDA пишет прямо: прочитали этикетку, остались вопросы — спросите врача, фармацевта или другого медицинского работника.

Окно с ошибкой на экране

Пересказывать его своими словами не нужно. Вы показываете само окно, и разбор идёт по тому, что в нём написано.

Растение, насекомое, птица

Растение, лист, насекомое или птицу модель определит по снимку. Это пригодится и в работе, и за её пределами: агроному, закупщику, человеку на даче.

Дорожная ситуация

Снимок повреждений или расстановки машин помогает описать случай, когда нужно составить обращение.

Где ответу нельзя доверять на слово

Ядовитая змея, гриб, незнакомая ягода — здесь ошибка стоит здоровья. Модель назовёт вид и может ошибиться, поэтому ответ годится как подсказка для поиска, а не как основание трогать руками.

То же с медициной. Снимки вроде КТ и МРТ модель читать не предназначена, и диагноз по фотографии от неё не получают.

Цифры, имена и даты, снятые с картинки, сверяйте глазами. Anthropic прямо просит проверять прочитанное с изображений там, где цена ошибки высока.

Как снимать

Снимайте прямо и подходите ближе. Нечёткий, повёрнутый или слишком мелкий кадр модель разбирает с ошибками.

Скажите, что сделать со снимком. Приложенное изображение задачи не ставит: попросите выписать позиции, назвать вид, сравнить с другим снимком.

В какой аккаунт какие снимки

Разделение аккаунтов из главы «Личный и рабочий доступ» тоже действует. В личный отправляйте снимки из своей жизни: растение с дачи, чек из магазина, деталь от домашней техники. Рабочие документы, экраны рабочих систем и оборудование компании в личный аккаунт не идут.

В корпоративном аккаунте правило обратное: туда идут рабочие снимки. Где у вашей компании проходит граница допустимого, решает она сама. Спросите у руководителя или у тех, кто отвечает за безопасность, что можно фотографировать и отправлять.