Таблицы и данные: разбор, выводы и проверка цифр

Что нейросеть делает с таблицами хорошо, где ошибается в арифметике и почему просить формулу надёжнее, чем просить ответ.

После этого урока

Сможете получать из таблицы выводы, которым можно доверять, потому что будете знать, как проверить каждую цифру.

Таблицы — особый случай. Модель хорошо видит в них закономерности и плохо считает по ним точные числа. Разберёмся, как пользоваться первым и не попасться на втором.

Что получается хорошо

Заметить закономерность: что растёт, что падает, что выбивается из ряда.
Сгруппировать: свести разрозненные строки в категории.
Объяснить, что означает столбец с непонятным названием.
Предложить, какие вопросы стоит задать этим данным.
Написать формулу для вашей таблицы.

Что получается плохо

Точный счёт по многим строкам. Языковая модель по природе не считает, а предсказывает — и на длинной таблице это вылезает.

Современные сервисы это обходят: под капотом запускают настоящие вычисления. Но не всегда и не везде, а выглядит ответ одинаково уверенно в обоих случаях.

Главное правило работы с цифрами

Просите не ответ, а способ его получить. «Напиши формулу, которая это посчитает» надёжнее, чем «посчитай». Формулу вы вставите в таблицу и получите цифру, за которую отвечает программа, а не предсказание.

Промпт для работы с таблицей

В приложенной таблице: 1. Опиши, что в ней за данные и что означает каждый столбец. 2. Назови 5 закономерностей, которые в ней видны. 3. Укажи строки, которые выбиваются из общей картины, и предположи почему. 4. Перечисли, каких данных не хватает, чтобы сделать надёжные выводы. Если приводишь числа — показывай, как они получены. Если считал сам, а не вычислением, отметь это отдельно.

Четвёртый пункт — защита от красивых выводов на недостаточных данных.

Формулы вместо счёта

Отдельный сильный сценарий: описать задачу словами и получить формулу для своей таблицы.

«В таблице столбец A — дата, B — сумма, C — менеджер. Напиши формулу, которая посчитает сумму по менеджеру Иванову за октябрь. Объясни, что делает каждая часть».

Просьба объяснить части — не любопытство: по объяснению видно, правильно ли модель поняла вашу таблицу, до того как вы вставите формулу и получите неверное число.

Сценарий: текст в данные

Обратная задача из третьего курса, но теперь с файлами: приложить переписку, отзывы или заметки и получить таблицу. Правило то же — «нет данных» вместо догадки и счётчик пустых ячеек в конце.

Осторожно с выводами

Модель охотно объясняет любую закономерность правдоподобной причиной. «Продажи упали в июле из-за сезонного спада» звучит убедительно и может не иметь отношения к вашему случаю.

Полезный приём — попросить несколько объяснений и способ различить их: «дай три возможные причины и скажи, какие данные помогут понять, какая из них верна».

Что проверять обязательно

Все итоговые числа — на калькуляторе или формулой в таблице.
Проценты: их модель путает чаще всего, особенно «на сколько процентов вырос».
Количество строк: совпадает ли с тем, что в файле.
Выводы: не приняла ли модель совпадение за причину.

Практика

Проверьте, считает ли ваш сервис по-настоящему.

Возьмите таблицу, где вы знаете правильный итог.
Попросите посчитать сумму или среднее и сравните с известным ответом.
Спросите прямо: «ты посчитал сам или выполнил вычисление?»
Затем попросите формулу для той же задачи и вставьте её в таблицу.
Сравните три результата: свой, ответ модели и формулу.

Типичные ошибки

Просить посчитать вместо того, чтобы просить формулу
За формулу отвечает программа, за ответ модели — предсказание. Выглядят они одинаково уверенно.
Принимать объяснение закономерности за установленную причину
Модель объяснит любое совпадение правдоподобно. Просите несколько версий и способ их различить.
Не проверять проценты
Самая частая арифметическая ошибка — особенно в вопросах «на сколько процентов изменилось».

Проверьте себя

Ответы нигде не сохраняются — отвечайте спокойно и пробуйте сколько нужно.

1. Что надёжнее попросить у модели при работе с таблицей?
2. Модель объяснила падение продаж сезонным спадом. Что с этим делать?

Коротко

Хорошо: закономерности, группировка, выбросы, формулы. Плохо: точный счёт по многим строкам.
Просите способ получить число, а не само число.
Просьба объяснить части формулы показывает, правильно ли модель поняла таблицу.
Любое объяснение закономерности — гипотеза, пока не сказано, чем её проверить.