Промпт оказался важнее модели: эксперимент с генерацией сопроводительных писем
Разработчик приложения для написания сопроводительных писем провёл серию экспериментов и выяснил, что качество промпта влияет на результат сильнее, чем мощность модели. Локальные модели с 4B параметров на хорошем промпте показали 100% отправляемость, сравнимую с облачными гигантами.
Разработчик создал приложение для генерации сопроводительных писем к вакансиям с использованием локальной модели (через Ollama) или облачного API и решил проверить, насколько качество текста зависит от модели. Он провел слепую оценку с другом, который искал работу в IT. Первый запуск с тремя моделями (qwen2.5:3b, qwen2.5:7b, llama-3.3-70b) показал пригодность к отправке лишь на 20–30%, при этом
Показать ещё ↓
Источник: Habr — хаб ИИ —
оригинал