Компания также опубликовала сравнение с Jev:
|
Тест |
SubQ Snap |
Jev |
|---|---|---|
|
Decision Index 0.2.1 |
61,7 |
57,9 |
|
Nimble, средняя точность по 13 наборам |
82,9% |
76,0% |
|
Decision LCR, работа с несколькими документами |
74,0% |
48,0% |
В Decision LCR использовались документы общим объёмом 72K–115K токенов. Snap получал весь контекст в одном запросе, а для Jev его разбивали на чанки. Тест адаптирован под выбор из вариантов, поэтому эти оценки нельзя напрямую сравнивать с результатами исходного AA-LCR, где проверяются письменные ответы. Это результаты Subquadratic; независимой проверки Snap в анонсе не приведено.
Snap доступен в публичной предварительной версии через консоль SubQ. Цена составляет $0,05 за миллион входных токенов, выход бесплатный: запрос на 100K токенов обойдётся в $0,005. Первым 10 тысячам пользователей компания обещает по 100 млн бесплатных токенов. Доступ ограничен вычислительными мощностями, после заполнения доступных мест новых пользователей могут направлять в очередь ожидания.
Если новость понравилась, приглашаю в канал AI for Devs. Каждый день публикую похожие материалы: новые модели, агенты, практические кейсы и новости из мира AI.
