LLM как эксперт

Удобство использования является ключевым фактором эффективности рекомендательных систем. Однако анализ пользовательских интерфейсов — это трудоемкий процесс, требующий специальных знаний. Недавние достижения в области многомодальных больших языковых моделей (LLM) открывают многообещающие возможности для автоматизации таких оценок. В этой работе мы исследуем потенциал многомодальных LLM для оценки удобства использования интерфейсов рекомендательных систем, рассматривая в качестве примеров различные общедоступные системы. Мы делаем скриншоты пользовательских интерфейсов с нескольких таких рекомендательных платформ, чтобы охватить как сценарии выявления предпочтений, так и сценарии представления рекомендаций. LLM получает задание проанализировать эти интерфейсы с учетом различных критериев удобства использования и предоставить пояснительную обратную связь. Наша оценка демонстрирует, как LLM могут поддерживать эвристические оценки удобства использования в масштабе для улучшения пользовательского опыта. - Towards LLM-Based Usability Analysis for Recommender User Interfaces

См. также другие публикации, посвященные LLM