1 of 42

Исследование�на автопилоте

Алена Скалон

UX-аналитик

2 of 42

Алена Скалон

2

UX-аналитик в Yandex Cloud

UX-исследователь в M-A-X и Фабрике Юзабилити

PhD по экспериментальной психологии

О спикере

LinkedIn:�Alena Skalon

3 of 42

Что такое ИИ–агент

3

  1. ИИ-чат в базовом виде:�вы задаете вопрос, он генерирует ответ
  2. ИИ-агент:�не только рассуждает, но и выполняет последовательность действий

В рамках этого доклада:

4 of 42

Концептуальная модель

4

Думаю, �что агенты отлично подойдут для типовых,�а не

эксплораторных задач

Лучше всего�он помогает�в структурированных�и повторяющихся задачах

Полезная�работа с агентом начинается�с понимания�его границ

ИИ�в исследованиях легко переоценить�или недооценить

01

02

03

04

5 of 42

Концептуальная�модель

    • Чтобы качественно проверить результат ИИ, нужно самому достаточно хорошо понимать задачу� При избыточной опоре на ИИ�это понимание может постепенно ослабевать�
    • Там, где нужны интерпретация�и выбор направления,�сначала думайте сами,�потом подключайте агента�
    • ИИ не снимает с исследователя ответственность за смысл,�нюансы и финальную�интерпретацию

6 of 42

Концептуальная�модель

    • Чтобы качественно проверить результат ИИ, нужно самому достаточно хорошо понимать задачу� При избыточной опоре на ИИ�это понимание может постепенно ослабевать
    • Там, где нужны интерпретация�и выбор направления,�сначала думайте сами,�потом подключайте агента�
    • ИИ не снимает с исследователя ответственность за смысл,�нюансы и финальную�интерпретацию

7 of 42

Концептуальная�модель

    • Чтобы качественно проверить результат ИИ, нужно самому достаточно хорошо понимать задачу� При избыточной опоре на ИИ�это понимание может постепенно ослабевать�
    • Там, где нужны интерпретация�и выбор направления,�сначала думайте сами,�потом подключайте агента�
    • ИИ не снимает с исследователя ответственность за смысл,�нюансы и финальную�интерпретацию

8 of 42

01

Что именно вы будете�оптимизировать: какой процесс,�из каких этапов он состоит?

02

Содержание каждого этапа:�как передать ИИ всю нужную информацию?

03

Как учесть технические особенности работы ИИ?

Реализация

9 of 42

Реализация

01

Что именно вы будете�оптимизировать: какой процесс,�из каких этапов он состоит?

02

Содержание каждого этапа:�как передать ИИ всю нужную информацию?

03

Как учесть технические особенности работы ИИ?

10 of 42

Процесс

10

  1. Осмысление задачи/брифа, сбор контекста
  2. Описание целевое аудитории
  3. Рекрут
  4. Формулировка гипотез
  5. Составление сценария интервью
  6. Проведение интервью
  7. Анализ интервью
  8. Синтез результатов/написание отчёта

11 of 42

Процесс

11

  1. Осмысление задачи/брифа, сбор контекста
  2. Описание целевое аудитории
  3. Рекрут
  4. Формулировка гипотез
  5. Составление сценария интервью
  6. Проведение интервью
  7. Анализ интервью
  8. Синтез результатов/написание отчёта

12 of 42

Процесс

12

01

Составление сценария�интервью на основе гипотез

02

Проведение интервью

Мы работаем с аудио,�ИИ не видит о чем была речь в конкретный момент

Можно добавить эту информацию в транскрипт�чтобы он точно понимал на какой странице�было что-то сказано

Можно проговаривать прямо во время интервью

13 of 42

Процесс

13

01

Анализ интервью

Транскрибация интервью�(Алиса Про, Any2Text, MyMeet)

Анализ каждой темы (агент)

02

Синтез результатов/�написание отчета

Агент + вручную

14 of 42

01

Что именно вы будете�оптимизировать: какой процесс,�из каких этапов он состоит?

02

Содержание каждого этапа:�как передать ИИ всю нужную информацию?

03

Как учесть технические особенности работы ИИ?

Реализация

15 of 42

Анализ:�что сработало�плохо

16 of 42

Анализ:�что сработало�плохо

Что будет, если отдать�ИИ все транскрипты?

Будет плохой ИИ

  • теряет часть деталей�(ограничение�внимания/контекста)
  • начинает склеивать�мысли и додумывать
  • путает, у кого что было

17 of 42

Анализ:�что сработало�хорошо

  • Но это не плохой ИИ
  • А плохая архитектура�пайплайна
  • Вместо одного промпта – �несколько шагов с опорой�на извлечение фактов:
    • Разметка каждого транскрипта�(вручную или агент)
    • Уменьшаем количество текста�в транскрипте (агент)
    • Сбор файлов по темам (агент)
    • Анализ каждой темы (агент)

18 of 42

Анализ:�что сработало�хорошо

  • Но это не плохой ИИ
  • А плохая архитектура�пайплайна
  • Вместо одного промпта – �несколько шагов с опорой�на извлечение фактов:
    • Разметка каждого транскрипта�(вручную или агент)
    • Уменьшаем количество текста�в транскрипте (агент)
    • Сбор файлов по темам (агент)
    • Анализ каждой темы (агент)

19 of 42

Инструменты

Как создать агента?

20 of 42

21 of 42

22 of 42

23 of 42

24 of 42

э

25 of 42

26 of 42

27 of 42

28 of 42

29 of 42

30 of 42

Где взять API – ключ?

30

Использовать российские ИИ

Использовать зарубежные ИИ

Российские платформы�для доступа к зарубежным ИИ

31 of 42

’’deepseek-v32/latest’’

‘’https://ai.api.cloud.Yandex.net/v1’’

32 of 42

33 of 42

34 of 42

35 of 42

Пайплайн

  1. Transcript condenser�сокращает количество слов
  2. Topic collater проходит�по всем транскриптам �и собирает все, что сказали�разные респонденты�по одной теме в один документ
  3. Topic analyser готовит�выводы с цитатами�и под ваш стиль

36 of 42

37 of 42

Ключевое�в инструкциях

37

Ссылка�sourcecraft.dev/skalonalena/�ux-agent-prompts

  • Они написаны на английском
  • Задан контекст отрасли
  • Прописано отсутствие фантазирования
  • Прописаны правила�для привлечения человека
  • Прописано на какие именно�файлы нужно опираться�(в т.ч. tone of voice sample)
  • Для анализа – использование�полнотекстовых подкрепляющих цитат

38 of 42

01

Что именно вы будете оптимизировать:�какой процесс, из каких этапов он состоит?

02

Содержание каждого этапа:�как передать ИИ всю нужную информацию?

03

Как учесть технические�особенности работы ИИ?

Реализация

39 of 42

Технические особенности

Токенизация

39

03

Русский язык�требует в 1.5 – 2.5 раза�больше токенов, �чем английский язык

01

Токенизация – это способ, которым модель�режет текст на кусочки,�с которыми она работает

02

Влияет на стоимость, контекст, качество

40 of 42

Технические особенности

Токенизация

40

03

Главный принцип:�вместо одного длинного�чата лучше использовать серию коротких

01

Контекст тратится�не только на ваш промпт,�но и на системные инструкции, инструменты�и историю переписки

  • Каждый новый чат начинается не совсем�с нуля: часть окна контекста уже занята служебной логикой

02

Сразу указывайте агенту нужный файл или папку�через @�не заставляйте�его искать по всему�проекту

41 of 42

      • Полная автоматизация
      • Интеграция с внутренними инструментами, работа с дополнительным контекстом�проекта, доступ к базе знаний
      • Инструменты позволяющие�делать все одним промптомClaude code с 1 млн контекстного окна

Будущее

Настоящее

42 of 42

Ссылка на вакансии�https://clck.ru/3TCvcb

А еще мы�нанимаем�в команду