Почему LLM ощущаются такими тупыми? Каждый раз, когда выходит новая модель, мы все радуемся тому, какие новые возможности она нам открывает. Мы кидаем в нее промпты из разряда «сделай красиво» и получаем действительно красивый результат.🤔 Но, уже через пару недель, накатывает ощущение, что модель сильно «отупела» с момента релиза. Она уже не так хорошо тебя понимает, результат ее работы уже не такой красивый и вообще это все злые OpenAI/Anthropic/Google крутят там крутилку «интеллекта»🤷♂️ А реальность на самом деле сильно проще. Дело не в моделях — дело в нас.С каждой новой моделью наш внутренний ползунок минимальных ожиданий сдвигается. Если раньше мы ожидали что модель должна как минимум посто написать связанный текст, то сегодня мы ждем от нее рабочий код, готовые эссе, и картинки уровня мировых фотографов.Когда появляется новая модель, наш ползунок все еще настроен на предыдущую. И любой результат который превосходит наши ожидания становится для нас чем-то «вау». Но спустя пару недель, мы адаптируем внутреннее ощущение под новые реалии. Наши базовые запросы становятся выше. И вот тут мы начинаем замечать «косяки» и неточности новой модели.Но это не модель стала тупее, это у нас выросли требования к ней.Это кстати не только с моделями работает. С людьми мы ведем себя точно так же. Тот самый цветочно-букетный период в отношениях ровно про это же.Но модели, в отличие от людей, можно объективно протестировать и сравнить сухие цифры. Для этого можно использовать мой PRISM и прогнать один и тот же промпт через разные модели, чтобы можно было наглядно сравнить их результат. 👌Как закончить этот пост я не понимаю, поэтому просто призову вас кидать ваши любимые мемы в коменты 😅Свята место | 10МДК | ВЕБМастер | YHub
