Распознавание изображений
Современные модели распознают изображения: читают текст на снимке, узнают предметы, животных и растения, разбирают графики. Приложите снимок к разговору, и описывать словами то, что на нём, больше не нужно.
Попробуйте прямо сейчас. Сфотографируйте что угодно на столе, отправьте в свой чат и спросите, что это такое. Умеет это не каждый сервис, и одна проверка покажет, умеет ли ваш.
Что отправляют снимком
Снимок годится везде, где вы иначе переписывали бы чужой текст или подбирали слова для описания.
Табличка на технике
Сфотографируйте шильдик кондиционера и попросите выписать с него марку, номер модели, мощность, год и страну выпуска. Если в сервисе включён поиск в интернете, по номеру модели он найдёт и инструкцию.
Чек и счёт
Снимок превращается в таблицу расходов. Отправьте его и попросите выписать позиции с суммами.
Бумажный отчёт с таблицей
Набирать его руками больше не нужно. Модель вернёт содержимое в том виде, который вы попросите.
Деталь без названия
Деталь, название которой вы не знаете, можно показать. Если модель её узнает, вы получите название, а с ним проще искать замену.
Узнаёт она не всякую деталь. Модели хуже распознают то, что редко встречалось в данных для их обучения. Деталь от редкого или узкоспециального оборудования модель скорее не опознает или назовёт неверно.
Пробовать всё равно стоит. Название, которое предложила модель, сверьте по каталогу или с продавцом, прежде чем заказывать деталь.
Упаковка товара в магазине
Сфотографируйте состав или характеристики и спросите, что из этого важно для вашего случая.
Симптомы и лекарства без рецепта
Опишите модели свои симптомы и спросите, какие средства без рецепта при них применяют и чем они различаются. С этого можно начать, когда недомогание не кажется вам серьёзным.
Совет модели не заменяет консультацию специалиста, как и ответ на юридический вопрос. OpenAI в правилах использования относит медицинские и юридические советы, подобранные под конкретного человека, к тем, что требуют участия лицензированного специалиста.
Снимок дополняет описание симптомов. Сфотографируйте упаковку или полку в аптеке. Спросите, что в средстве действующее, подходит ли оно при ваших симптомах и с чем его не сочетают.
С таким ответом вы подходите к прилавку с готовыми вопросами.
За прилавком стоит фармацевт, и вопросы адресуются ему. Этого требует сама упаковка: в американской этикетке Drug Facts есть раздел Warnings, куда вынесено, когда с выбором идут к специалисту.
FDA пишет прямо: прочитали этикетку, остались вопросы — спросите врача, фармацевта или другого медицинского работника.
Окно с ошибкой на экране
Пересказывать его своими словами не нужно. Вы показываете само окно, и разбор идёт по тому, что в нём написано.
Растение, насекомое, птица
Растение, лист, насекомое или птицу модель определит по снимку. Это пригодится и в работе, и за её пределами: агроному, закупщику, человеку на даче.
Дорожная ситуация
Снимок повреждений или расстановки машин помогает описать случай, когда нужно составить обращение.
Где ответу нельзя доверять на слово
Ядовитая змея, гриб, незнакомая ягода — здесь ошибка стоит здоровья. Модель назовёт вид и может ошибиться, поэтому ответ годится как подсказка для поиска, а не как основание трогать руками.
То же с медициной. Снимки вроде КТ и МРТ модель читать не предназначена, и диагноз по фотографии от неё не получают.
Цифры, имена и даты, снятые с картинки, сверяйте глазами. Anthropic прямо просит проверять прочитанное с изображений там, где цена ошибки высока.
Как снимать
Снимайте прямо и подходите ближе. Нечёткий, повёрнутый или слишком мелкий кадр модель разбирает с ошибками.
Скажите, что сделать со снимком. Приложенное изображение задачи не ставит: попросите выписать позиции, назвать вид, сравнить с другим снимком.
В какой аккаунт какие снимки
Разделение аккаунтов из главы «Личный и рабочий доступ» тоже действует. В личный отправляйте снимки из своей жизни: растение с дачи, чек из магазина, деталь от домашней техники. Рабочие документы, экраны рабочих систем и оборудование компании в личный аккаунт не идут.
В корпоративном аккаунте правило обратное: туда идут рабочие снимки. Где у вашей компании проходит граница допустимого, решает она сама. Спросите у руководителя или у тех, кто отвечает за безопасность, что можно фотографировать и отправлять.