Clairic — экспериментальная модель Cloudflare, которая извлекает из текста и изображений структурированные данные: например, даты, числа и списки. Вместо обычного текстового ответа она возвращает значения в заранее заданных форматах. Cloudflare сообщает о более быстрых и дешёвых результатах в своих демонстрациях, но этих примеров недостаточно, чтобы заключить, что Clairic в целом точнее или эффективнее больших языковых моделей (LLM).
3
4
14
Что делает Clairic
Clairic — первая модель извлечения данных в концепции «System One», доступная в предварительной версии на платформе Workers AI под именем @cf/cloudflare/clairic. По описанию Cloudflare, она может извлекать, вычислять, оценивать и прогнозировать значения на основе неструктурированных данных. Стоимость — $0,10 за миллион входных токенов. Поскольку модель не генерирует выходные токены, плата за них не начисляется.
3
7
18
Запрос состоит из исходных данных — текста и, при необходимости, до четырёх изображений — и списка именованных полей с указанием типа нужного ответа. Clairic возвращает значения для этих полей за один проход, а не формирует ответ слово за словом.
16
20
Среди поддерживаемых типов — текстовые фрагменты, числа, даты и время, длительность, списки, оценки и прогнозы. Для текстовых фрагментов можно получить позиции символов в исходнике, а прогноз может охватывать до 64 будущих шагов.
1
20
Как модель показывает неопределённость
Для скалярных ответов предусмотрены показатель уверенности и p_null — вероятность того, что исходные данные не позволяют определить ответ. В результатах также могут быть поля value и guess: если нужного значения нет во входных данных, value может быть null, а не выглядеть как достоверный факт.
2
9
18
Для оценок и прогнозов модель возвращает медиану и 80-процентный интервал — от p10 до p90. Это оценка неопределённости, а не обещание, что фактическое значение обязательно попадёт в указанный диапазон. Cloudflare советует использовать показатели уверенности, p_null и интервалы, чтобы решать, какие задачи автоматизировать, а какие отправлять на проверку.
2
Что показывают тесты Cloudflare
В примере с претензией на повреждённый товар Clairic извлекает сведения из обращения, модель Cloudflare Clef выбирает вариант решения — например, возврат денег или ремонт, — а GLM-5.3 составляет ответ клиенту. По опубликованным данным, извлечение с помощью Clairic заняло 0,46 секунды, а выбор решения через Clef — 0,22 секунды. Весь конвейер из нескольких моделей отработал за 19,3 секунды. В версии, где на каждом этапе использовалась GLM-5.3, обработка заняла 61,7 секунды.
4
15
Расходы в этом примере составили $6 032 на миллион претензий для смешанного конвейера против $11 740 для варианта только с GLM-5.3 — экономия 49%.
15 Это показатели одного сценария, а не ожидаемая экономия для любого приложения.
Cloudflare также проверила прогнозирование числа пассажиров на контрольно-пропускных пунктах аэропортов США на следующий день: тест продолжался 21 день. Средняя сообщённая ошибка составила 3,3%, а фактическое значение в 17 случаях из 21 оказалось внутри 80-процентного интервала модели.
6
9 Это небольшая демонстрация на одном временном ряду, а не подтверждение надёжности прогнозов для любых данных и условий.
Ограничения, о которых стоит помнить
Cloudflare описывает прогнозирование Clairic как базовое. Прогнозы на ближайший шаг опираются на недавние тенденции, а более дальние могут сглаживаться в сторону среднего значения. Модель также не предугадывает события, которых нет в исходном ряду данных, например праздники.
1
17
Есть ограничения и у вычислений. Простые расчёты в один-два шага — например, суммы, разницы, конвертации и арифметика с датами — документация называет надёжными. Но длинные цепочки взаимозависимых вычислений и подсчёты по множеству строк таблицы пока ненадёжны. Рекомендация Cloudflare: извлечь исходные значения с помощью Clairic, а расчёты выполнить в коде.
1
17
Пока аргументы в пользу производительности основаны на примерах для конкретных задач, а не на широком сравнительном тесте, который доказывал бы, что Clairic всегда точнее, быстрее или дешевле. Эти преимущества стоит проверять на собственных данных, а не считать универсальной гарантией.
4
14
15
Что означает «System One» — и при чём здесь Jev
Cloudflare использует термин «System One», чтобы описать быстрые специализированные модели — в противоположность моделям, которые тратят время на создание развёрнутого ответа.
5 PPC Land пишет, что идея System One ранее появилась у компании TypeSafe вместе с моделью Jev. Это позволяет говорить о предшествующем упоминании концепции, но доступные источники не подтверждают прямую техническую связь между Jev и Clairic. Они также не подтверждают конкретное объяснение происхождения названия Clairic через идеи Даниэля Канемана.
13
Cloudflare также планирует выпустить открытые веса модели, однако дата релиза в доступных источниках не указана.
7
12