Краткое содержание

arXiv:2306.06031v2 Тип объявления: replace-cross Аннотация: Большие языковые модели (LLM) продемонстрировали потенциал революционизировать задачи обработки естественного языка в различных областях, вызвав большой интерес в сфере финансов. Доступ к высококачественным финансовым данным является первой проблемой для финансовых LLM (FinLLM). В то время как проприетарные модели, такие как BloombergGPT, воспользовались своим уникальным накоплением данных, такой привилегированный доступ обуславливает необходимость в открытой альтернативе для демократизации финансовых данных интернет-масштаба. В данной статье мы представляем большую языковую модель с открытым исходным кодом, FinGPT, для финансового сектора. В отличие от проприетарных моделей, FinGPT использует подход, ориентированный на данные, предоставляя исследователям и практикам доступные и прозрачные ресурсы для разработки их собственных FinLLM. Мы подчеркиваем важность автоматизированного конвейера обработки данных и технологии легковесной адаптации низкого ранга (low-rank adaptation) при построении FinGPT. Кроме того, мы демонстрируем несколько потенциальных приложений в качестве первых шагов.