Перейти к содержимому
AIupick

Руководство: исследователи · задач: 6

ИИ для исследований: находите статьи, читайте быстрее, проверяйте каждое утверждение

Теперь ИИ может за минуты найти литературу, отобрать её и кратко изложить. Сложная часть осталась прежней: понять, что на самом деле говорят данные, насколько они надёжны и сможете ли вы обосновать каждый шаг перед рецензентом. Каждая задача ниже оставляет след, который можно проверить.

  2. 02

    Отбирайте тысячи аннотаций так, чтобы это можно было обосновать

    Вручную отбор нескольких тысяч аннотаций занимает недели, а отбор силами одного ИИ трудно обосновать перед рецензентом. Сначала сформулируйте критерии, поручите ИИ отбор по ним, проверьте его решения на выборке и опишите, как вы проверяли.

    Пример

    2300 аннотаций о физических упражнениях и депрессии. После отбора ИИ остаётся 140 статей для чтения полностью. На случайных 100, которые вы отобрали и сами, ваши решения в основном совпадают; каждое расхождение — это «неясно», и все такие аннотации вы читаете.

    Как это сделать

    1. 1Запишите критерии включения и исключения до начала поиска и сохраните дату.
    2. 2В Elicit выберите Systematic Review, введите вопрос на странице «Setup», затем соберите и отберите статьи.
    3. 3Отберите сами случайную выборку из 50–100 аннотаций и сравните свои решения с решениями ИИ.
    4. 4В разделе методов укажите критерии, инструмент, размер выборки и то, как часто ваши решения совпадали.

    Встроенная функция

    Промпт для копирования

    Отбери аннотации ниже по этим критериям.
Включать: [популяция, вмешательство, дизайн, годы]. Исключать: [критерии].
Для каждой аннотации: «включить», «исключить» или «неясно»; критерий, который определил решение; и предложение из аннотации, на котором оно основано. Если в аннотации этого не сказано, отвечай «неясно».

    Где всё может пойти не так

    • Критерии, написанные после того, как вы увидели результаты, подстраиваются под найденное. Зафиксируйте их заранее.
    • «Неясно» — допустимый ответ. Каждую аннотацию с таким ответом прочитайте сами.
  3. 03

    Спросите у стопки PDF, в чём они расходятся

    Полезные вопросы ко множеству статей — о различиях: в чём они расходятся, чем отличаются методы, что никто не измерял. Задавайте именно их, требуя цитату и страницу для каждого утверждения, и спрашивайте, на что источники не отвечают.

    Пример

    Двенадцать статей об экранном времени и сне подростков. Они расходятся, потому что одни измеряли всё экранное время, а другие — только время у экрана после 21:00. Это различие с цитатой от каждой стороны — тот самый абзац, которого не хватало вашему обзору.

    Как это сделать

    1. 1Добавьте PDF в блокнот в Gemini Notebook или используйте Chat with PDF в SciSpace, чтобы работать с одной статьёй за раз.
    2. 2Задайте вопросы для сравнения из промпта на этой странице.
    3. 3Для каждого утверждения, которое будете использовать, откройте процитированный фрагмент.
    4. 4Создайте Mind Map, чтобы увидеть темы по всему набору и заметить, чего не хватает.

    Встроенная функция

    Промпт для копирования

    По всем этим источникам: в чём они расходятся и почему (разные популяции, методы, показатели или годы)?
Для каждого пункта процитируй фрагмент и укажи источник и страницу.
Затем перечисли вопросы, на которые эти источники не отвечают.

    Где всё может пойти не так

    • Ответ, смешивающий две статьи, может приписать результат одной статьи другой. Цитата показывает, где что.
    • «В источниках этого нет» — полезный ответ. Насторожитесь, если ИИ никогда так не отвечает.
  4. 04

    Расшифровывайте интервью и используйте ИИ как второго кодировщика

    ИИ быстро расшифровывает и предлагает коды, но придуманная им кодовая книга слишком гладко ложится на данные. Сначала закодируйте выборку сами, затем поручите ИИ применить вашу кодовую книгу и посмотрите, где ваши решения расходятся.

    Пример

    Двадцать интервью с медсёстрами о ночных сменах. Три вы кодируете вручную и составляете кодовую книгу из восьми кодов; ИИ применяет её к остальным 17. В единственном интервью, которое закодировали и вы, и ИИ, вы расходитесь в шести фрагментах — это показывает, что два кода пересекаются и им нужны более чёткие определения.

    Как это сделать

    1. 1Убедитесь, что одобрение этического комитета и формы согласия допускают использование инструмента, и удалите имена перед загрузкой.
    2. 2Сделайте расшифровку, затем сверьте с записью и исправьте каждый фрагмент, который будете цитировать.
    3. 3Закодируйте два-три интервью сами и составьте кодовую книгу.
    4. 4Поручите ИИ применить вашу кодовую книгу к остальным с помощью промпта на этой странице и сравните его кодирование со своим на одном интервью.

    Промпт для копирования

    Примени эту кодовую книгу к интервью ниже: [коды с определениями].
Для каждого фрагмента: код, обоснование в одну строку и номера строк.
Отдельно перечисли фрагменты, которые не подходят ни под один код, и фрагменты, подходящие под два кода. Не создавай новых кодов.

    Где всё может пойти не так

    • В расшифровках пропадают паузы и запинки, а имена и специальные термины распознаются неверно. Проверяйте каждую цитату, которую публикуете.
    • Когда коды расплывчаты, согласованность выглядит высокой. Читайте расхождения, а не процент.
  5. 05

    Проведите первый анализ так, чтобы его можно было повторить

    Анализ, который нельзя повторить, — это байка. Просите код, а не ответы, и запишите запланированный анализ до того, как увидите результаты, чтобы ИИ не перебирал тесты, пока что-нибудь не окажется значимым.

    Пример

    Запланировано заранее: t-тест для сравнения экзаменационных баллов при двух методах обучения. Код сообщает о 412 строках, в девяти из которых нет баллов, затем выдаёт результат теста с размером эффекта и интервалом. Когда ИИ предлагает «ещё проверить по полу», вы записываете это как отдельный, разведочный вопрос.

    Как это сделать

    1. 1Прежде чем открыть данные, запишите вопрос и запланированный анализ.
    2. 2С помощью промпта на этой странице попросите код, который делает именно это, и запустите его сами.
    3. 3Проверяйте число строк после каждого шага.
    4. 4Узнавайте допущения каждого теста и проверяйте их, прежде чем сообщать результат.

    Промпт для копирования

    Напиши код на [R или Python], который загружает [файл], сообщает число строк и столбцов, пропущенные значения и выбросы, затем выполняет [запланированный анализ] для [вопрос].
Прокомментируй каждый шаг. Не выполняй никаких других тестов. Укажи размер эффекта с доверительным интервалом, а не только p-значение.

    Где всё может пойти не так

    • Спросите «есть ли что-нибудь значимое?», и ИИ что-нибудь найдёт. Придерживайтесь плана.
    • Код, который запускается, — ещё не верный код. Проверьте один результат вручную или на известном примере.
  6. 06

    Следите за новыми статьями, не повторяя поиск

    Пока вы пишете, выходят новые работы. Вместо того чтобы повторять поиск каждый месяц, настройте еженедельный автоматический поиск, который ищет за вас и сообщает только о новом.

    Пример

    Автоматический поиск по теме «языковые модели в клинической документации, рандомизированные или контролируемые исследования». Почти каждую неделю он находит несколько новых статей; ту, что действительно важна, вы добавляете в список для чтения с одной строкой о том, почему.

    Как это сделать

    1. 1В Elicit откройте Routines и опишите, за чем следить, словами ваших критериев включения.
    2. 2Выберите еженедельное расписание.
    3. 3Каждую неделю просматривайте отчёт и добавляйте подходящие статьи в список для чтения с одной строкой о том, почему.
    4. 4Раз в несколько месяцев повторяйте основной поиск сами: автоматический поиск может пропустить статьи с новыми терминами.

    Встроенная функция

    Промпт для копирования

    Каждую неделю ищи новые статьи по теме [тема], которые [критерии]. Сообщай только о статьях, опубликованных после предыдущего запуска: ссылка, вывод в одном предложении, дизайн и размер выборки.

    Где всё может пойти не так

    • Автоматический поиск повторяет ваши слепые пятна. Время от времени меняйте формулировки.
    • Еженедельный список, который никто не читает, — это шум. Делайте его настолько коротким, чтобы его можно было прочитать за пять минут.

Правила: исследователи

  • Прежде чем загружать данные участников, убедитесь, что одобрение этического комитета и соглашения о данных допускают использование этого инструмента.
  • Если чаты по умолчанию используются для обучения моделей, отключите это, прежде чем загружать неопубликованную работу.
  • Цитируйте статьи, которые вы прочитали, и никогда — их пересказ от ИИ.
  • Сообщайте, как вы использовали ИИ, если этого требует журнал или грантодатель.

Подробнее

Esc
↑ ↓ — перемещениеEnter — открыть