HeadlinesBriefing favicon HeadlinesBriefing.com

Jev и Arrow: типизированные решения ИИ

Hacker News •
×

Jev — новая модель Type Safe AI для преобразования естественного языка и состояния приложения в типизированные решения. Вы предоставляете контекст и определяете возможные ответы; Jev возвращает выборы, оценки и вероятности в формате JSON. В рамках более широких усилий по упрощению использования выходных данных ИИ в коде, Jev использует новую архитектуру, параллельный сэмплер и обучение с подкреплением для калиброванных решений, избегая генерации токен за токеном для выигрыша в скорости и стоимости.

Документы Type Safe выделяют такие паттерны, как спекулятивный фан-аут, маршрутизация с порогом уверенности, составная оценка и маршрутизация намерений, обеспечивая вероятностные рабочие процессы. В посте исследуется интеграция Jev с Apache Arrow, который ускоряет конвейеры данных, избегая преобразований JSON. Схема Arrow представляет ответы Jev: типы Choice, Noul и Score, каждый с определенными полями, такими как вероятности и уверенность.

Типы расширения Arrow прикрепляют семантическое значение, используя структуры и списки фиксированного размера для эффективности. Choice хранит байтовый индекс в общих метках; Score включает легенду. Этот дизайн использует производительность Arrow для структурированных данных, потенциально улучшая конвейеры решений Jev.

Ключевые сущности: Компании: Type Safe AI

Часто задаваемый вопрос: Как Jev интегрируется с Apache Arrow?

Ответы Jev можно моделировать как столбцы Arrow с использованием типов расширения. Типы Choice, Noul и Score сопоставляются со структурами и числами с плавающей запятой, с метаданными для меток и легенд, обеспечивая эффективную обработку структурированных данных.

Часто задаваемый вопрос Q: Как Jev интегрируется с Apache Arrow?

Часто задаваемый вопрос A: Ответы Jev можно моделировать как столбцы Arrow с использованием типов расширения. Типы Choice, Noul и Score сопоставляются со структурами и числами с плавающей запятой, с метаданными для меток и легенд, обеспечивая эффективную обработку структурированных данных.