Рубрика

AI: Х...О - Проверяю AI на бизнес-задачах

Беру реальные бизнес-задачи и проверяю, насколько AI способен довести их до готового результата. Сравниваю модели и сервисы, фиксирую ошибки, ручные доработки и ограничения. Не оцениваю красоту ответа - проверяю выполненную работу.

  1. 8 мин

    Я спросил Ask Studio, сколько видео на моём YouTube-канале. Ответ оказался неверным

    Ask Studio ошибся на простом проверяемом факте - количестве видео на моём канале. Разбираю, почему после этого я не готов доверять более сложным ИИ-рекомендациям без проверки исходных данных.

  2. 7 мин

    ИИ-менеджер по продажам понял мои слова, но не понял задачу: разбор диалога с Билайн

    Я несколько раз сформулировал, что мне нужно. Собеседник почти идеально повторил требования, но продолжил свой сценарий. Для меня это хороший тест ИИ-менеджеров: важно не как они говорят, а доводят ли работу до результата.

  3. 17 мин

    Нейросеть, которая пишет как человек: почему анализа старых постов оказалось недостаточно

    Сервис изучил 48 моих постов и обещал писать в моём стиле. На реальной фактуре он начал придумывать события и цифры. Разбираю, почему авторский текст - это не только стиль.

  4. 11 мин

    7 нейросетей вместо РОПа: таблицу дали текстом, но выводы всё равно пришлось проверять

    Я убрал из эксперимента распознавание картинки и передал нейросетям готовую текстовую таблицу. Чтение данных стало точнее. Но теперь лучше проявилась другая проблема: где заканчиваются цифры и начинается уверенная интерпретация модели.