Jev AI: Революцията на моделите на System One за автоматизирани решения

  • Jev AI е модел, специализиран във връщането на въведени решения и вероятности, вместо да генерира разговорен текст.
  • Базира се на концепцията на System 1 за изпълнение на бързи изпитания, драстично намалявайки латентността и разходите в сравнение с традиционните LLM.
  • Той имплементира три основни примитива (Choice, Score и Noul), които позволяват изкуственият интелект да бъде интегриран директно в програмната логика, без да е необходимо да се анализират отговорите.

3D визуализация на обработка на структурирани данни с взаимосвързани възли в тъмна технологична среда.

Вероятно сте свикнали да мислите за изкуствения интелект като за чатбот, който пише стихове вместо вас или обобщава имейли, но има нова тенденция, която напълно заобикаля думите. TypeSafe AI пусна Jev , инструмент, който разчупва стереотипите, защото не пише нито едно изречение; неговата мисия е да предоставя технически и вероятностни решения, които всяка компютърна програма може да обработи мигновено без никакви затруднения.

Представете си, че имате система, която обработва хиляди заявки, и не ви е нужен изкуствен интелект, за да ви обясни защо даден билет е спешен; просто ви е нужно той да каже „спешно: да“. Jev се позиционира точно там, в тази празнина между твърд код и бавни езикови модели, предлагайки това, което те наричат ​​модели на Система Едно , вдъхновени от психологията на Даниел Канеман за бързо, интуитивно мислене.

Как да следите производителността с New Relic
Свързана статия:
Какво е New Relic и как да го използвате за наблюдение на производителността

Какво точно е Jev AI?

Техническа диаграма на двоичните изчисления и квантовите състояния, представяща фундаменталната логика на изкуствения интелект.

За разлика от гиганти като GPT или Claude, които освобождават токени един по един, за да изградят параграф, Jev работи като интелигентно извикване на функция . Предавате му състояние (което може да бъде JSON, текст или списък) и набор от предварително дефинирани въпроси, а моделът връща структурирани стойности. Това означава, че няма грешки в типа или проблеми с форматирането, тъй като отговорът е обвързан с предварително избраните от вас опции.

Архитектурата зад този модел използва специфичен метод на обучение, наречен Reinforcement Learning for Calibrated Decisions (RLCD) . Целта тук не е изкуственият интелект да бъде харесван или убедителен, а по-скоро вероятностите му да бъдат честни и калибрирани. Ако Джев каже, че е 90% уверен в даден отговор, тази цифра трябва да отразява действителната точност – нещо изключително важно, когато искате софтуерът да действа автономно, без човек да е длъжен да преглежда всяка стъпка.

Трите основни инструмента: примитивите

Професионална изометрична визуализация на дърво за решения с данни с възли от матирано стъкло и ярки пътища.

За да се опростят нещата и да се постигне ефикасност, API-то на Джев е базирано на три типа въпроси, които му позволяват да покрие почти всяка нужда от класификация:

  • Избор: Позволява ви да изберете една опция от група до 255 възможности. Дава ви не само печелившата опция, но и карта на вероятностите на всички опции и оценка за доверие. Включва опция „друга“, за да се предотврати налагането на неправилен отговор от модела.
  • Резултат: Оценявайте нещо по градуирана скала (от 2 до 10 нива). Интересното е, че връща десетични стойности (като 1.4), което ви позволява да уловите... нюансите между категориите което цяло число би игнорирало.
  • Noul (булева оценка): Това е опростената версия на „да“ или „не“, връщаща вероятност между 0 и 1.

Най-мощната функция е, че Джев може да отговори на всички тези въпроси в една, паралелна стъпка . Ако трябва да знаете категорията на съобщението, нивото на гняв на клиента и дали иска възстановяване на сумата, Джев ви дава и трите отговора едновременно, така че добавянето на още въпроси едва влияе на времето за отговор.

Производителност, разходи и дребният шрифт

Абстрактно представяне на високоскоростен поток от данни през цифров конвейер, символизиращ ниска латентност.

Като се имат предвид числата, TypeSafe AI може да се похвали с изумителна скорост, като латентността варира от 70 до 500 милисекунди . В сравнение с Frontier LLM, на които може да им отнеме секунди, за да изготвят отговор, Jev е абсурдно бърз. Освен това, цената е ключово предимство: струва едва $0,042 на милион входни токени , а изходните данни са напълно безплатни, тъй като не генерират нов текст.

Тези цифри обаче трябва да се приемат с резерва. Много от бенчмарк тестовете са извършени от самия екип на TypeSafe, което може да внесе известна пристрастност. Въпреки това, обещанието за нулеви грешки в схемата е осезаемо: математически е невъзможно Jev да върне формат, който не сте дефинирали, което елиминира необходимостта от сложни валидации в кода.

Къде блести изкуственият интелект на Джев и къде се проваля?

Абстрактна архитектура на API шлюз с взаимосвързани геометрични блокове в модерен тъмен стил на интерфейса.

Jev е кралят, когато трябва да вземате повтарящи се, мащабни решения върху неструктурирани данни. Той е идеален за насочване на потенциални клиенти , модериране на съдържание, техническа поддръжка или дори за създаване на предпазни мерки за наблюдение на резултатите от други, по-големи модели с изкуствен интелект. Също така е много полезен в уеб навигацията, където може да реши върху кой елемент да се кликне на страница, без да е необходимо описание на екрана.

Не се опитвайте обаче да го използвате за всичко. Jev не е подходящ за чат, програмиране или обяснение на разсъжденията си. Има ясни ограничения по отношение на математиката и броенето на символи и не обработва добре дати или шестнадесетични стойности. Освен това му липсват познания за света; знае само какво въвеждате в състоянието на заявката. Ако имате нужда от сложни разсъждения или креативно генериране, трябва да се придържате към модел на System 2 като Claude или GPT.

Интеграция в екосистемата за развитие

За програмистите интеграцията е доста лесна. Съществуват официални SDK за JavaScript, TypeScript и Python , а макар че няма такъв за PHP, е достатъчна само една обикновена POST заявка. Освен това, Jev вече е наличен в AI Gateway на Vercel, което значително опростява управлението на ключове и фактурирането, ако вече използвате тази среда.

Много умен модел за използване на Jev е създаването на каскада от решения . Първо, Jev филтрира и класифицира заявката евтино и бързо; след това детерминистичен код обработва по-простите случаи и само в случаите, когато Jev показва ниска степен на доверие, заявката се ескалира към скъп модел на разсъждение или човешки оператор. Това оптимизира бюджета и намалява общата латентност на системата.

Този инструмент предефинира връзката между изкуствения интелект и софтуера, като превръща интелигентността в инфраструктурен компонент, а не в посредник. Чрез елиминиране на генерирането на текст и фокусиране върху вероятностното калибриране, Jev позволява на машините да вземат бързи и надеждни решения с незначителни разходи, отваряйки вратата към автоматизации, които преди това бяха непосилно скъпи или бавни.


Добавяне като предпочитан източник в Google