Выберите инструмент и оцените, как всё прошло

Чему вы научитесь

• Как описать свою задачу, прежде чем смотреть на инструменты
• Как составить короткий список из двух-трёх инструментов и честно их попробовать
• Что записать о стоимости, ограничениях и конфиденциальности, прежде чем полагаться на инструмент
• Как пересмотреть свой выбор после недели реального использования

Идея

Легко выбрать инструмент потому, что он популярен или о нём кто-то упомянул. Полезнее начать со своей задачи. Напишите одно-два предложения: что нужно делать, как часто и как выглядит хороший результат. «Кратко пересказывать длинные PDF для моей дипломной работы несколько раз в неделю, со ссылками на страницы» — это задача, которую можно проверить. «Помощь в учёбе» — нет.

Затем составьте короткий список из двух-трёх инструментов. В каталоге инструментов можно искать по задаче, страница сравнения показывает различия рядом, а раздел Помочь с выбором задаёт несколько вопросов и предлагает варианты. Двух-трёх достаточно. Если взять больше, у вас не хватит времени как следует попробовать каждый.

Потом попробуйте одну и ту же задачу в каждом инструменте, с одним и тем же промптом и одним и тем же материалом. Возьмите что-то реальное, но не конфиденциальное. По ходу записывайте, насколько хорош был каждый ответ, сколько пришлось исправлять и что мешало.

Посмотрите и на практические детали. Функции часто зависят от тарифа, то есть бесплатного или платного уровня, которым вы пользуетесь, а иногда и от региона. Записывайте лимиты использования, в которые вы упираетесь, и прочитайте настройки конфиденциальности инструмента — параметры, которые определяют, хранятся ли ваши чаты и используются ли они для обучения. Эти детали меняются, поэтому проверяйте их на страницах самого инструмента и записывайте дату проверки. Эти термины объясняются в уроке Продукты, модели и тарифы. И наконец, через неделю подведите итог. Инструмент, который казался удачным в первый день, к пятому может оказаться неудобным.

Пример

Джун — учитель, ему нужна помощь с еженедельными письмами родителям. Сначала он записывает задачу: «Составлять по моим заметкам короткое еженедельное письмо родителям, простым языком, меньше 200 слов». С помощью каталога инструментов и страницы сравнения он выбирает два инструмента и запускает в обоих один и тот же промпт с одними и теми же заметками, из которых убраны имена учеников:

Преврати эти заметки в еженедельное письмо для родителей. Простым языком, меньше 200 слов,
тепло, но кратко. Не добавляй событий, которых нет в заметках.

Заметки:
[заметки за эту неделю, без имён учеников]

Черновик инструмента А ближе к его тону. Инструмент Б добавляет школьную экскурсию, которой не было в заметках. Для каждого инструмента он записывает, каким тарифом пользовался и что сказано в настройках конфиденциальности о хранении чатов. Он выбирает инструмент А и после недели реального использования пишет короткий отзыв:

Задача: еженедельное письмо родителям. Инструмент: А.
Сработало: тон и объём. Пришлось исправить: две неверные даты.
Лимиты: не упирался. Настройки конфиденциальности: проверены в 1-й день.
Решение: пока оставить, снова пересмотреть через месяц.

Попробуйте сами

1. Запишите свою задачу одним-двумя предложениями: что, как часто и как выглядит хороший результат.
2. Выберите два-три инструмента с помощью каталога инструментов, страницы сравнения или раздела «Помогите выбрать».
3. Запустите один и тот же промпт с одним и тем же неконфиденциальным материалом в каждом инструменте.
4. Для каждого инструмента запишите качество ответа, сколько пришлось исправлять, каким тарифом вы пользовались, в какие лимиты упёрлись и что сказано в настройках конфиденциальности.
5. Пользуйтесь выбранным инструментом неделю, а затем напишите короткий отзыв, как у Джуна.

В итоге у вас должно быть короткое сравнение двух-трёх инструментов и отзыв о выбранном после недели использования.

Скопируйте этот шаблон

Я хочу выбрать ИИ-инструмент для такой задачи: [задача в одном-двух предложениях].
Я буду выполнять её примерно [как часто]. Хороший результат — это: [как выглядит хороший результат].
Чего мне нужно избегать: [например, передачи имён учеников, расходов сверх моего бюджета].

Помоги мне спланировать честную проверку:
1. Напиши один тестовый промпт, который я смогу запустить в каждом инструменте, используя только неконфиденциальный пример материала.
2. Перечисли 4–6 критериев, по которым мне стоит оценивать каждый ответ.
3. Перечисли практические вопросы, которые мне нужно проверить на страницах каждого инструмента: тариф и цена, лимиты использования, настройки конфиденциальности и хранение данных.

Не рекомендуй конкретные инструменты и не утверждай о них факты. Отметь всё, в чём ты не уверен.

Просьба отмечать сомнительные места не делает ответ ИИ верным. Продолжайте проверять то, что важно.

Проверьте результат

• Проверяли ли вы каждый инструмент на одном и том же промпте и материале?
• Оценивали ли вы результаты по записанной задаче, а не по первому впечатлению?
• Проверили ли вы тариф, лимиты и настройки конфиденциальности на страницах каждого инструмента и записали ли дату?
• Не было ли в тестовом материале личных или корпоративных данных?
• Сказано ли в вашем отзыве после недели, что сработало, что пришлось исправлять и что вы решили?

Частые ошибки

• Выбирать до того, как сформулирована задача. В итоге вы оцениваете инструменты по тому, что вам не нужно. Сначала запишите задачу.
• Проверять слишком много инструментов. Каждый вы успеете только бегло просмотреть. Для честной проверки достаточно двух-трёх.
• Сравнивать на разных промптах. Тогда вы проверяете свои промпты, а не инструменты. Входные данные должны быть одинаковыми.
• Не обращать внимания на тарифы и настройки конфиденциальности. Понравившаяся функция может требовать другого тарифа, а настройки по умолчанию могут сохранять ваши чаты. Проверьте это, прежде чем полагаться на инструмент.
• Никогда не пересматривать выбор. Привычки держатся, даже когда инструмент не помогает. Поставьте напоминание пересмотреть выбор через неделю.