New APIОтворен изворен връзки към моделите на LLM, който обединява повече от един провайдър с API и маршрутизатор, както и система за счетовете и анализи.

Нови API са отворен коден ЛМЛ (Large Language Model) gateway, който предлага унифициран интерфейс за свързване със множество предоставячи на AI модели, включително OpenAI, Anthropic Claude, и Google Gemini-style API-та. Той функционира come централен управляващ слой, който позволява на тимовете да рутват изискванията със съответните предоставячи, да контролират достъпа и да следят употребата от едно място. Проектът е насочен към програмисти, тимове по платформа и организиране, които изкарват AI-API-та на големи размери и искат единен вход в мрежата, а не да интегрират отделно всеки услуга. Като излага OpenAI-компатибилни точки за връзка, то позволява съществуващи приложения и SDK-ове да работят с много backends без преискачване на клещи на клиентското кода. Новият API създава за себе си основен етап в рамките на операционните задължения като токен-based квоти, счетове и управление на кредити, аудитиране на заявките и аналитика на използване. Тези функции го прави подходящ за изграждане на вътрешни платформи за AI или продаване/мециране достъп до множество потребители или екипи. Като отворено уреден продукт за самодопълнение, това уреди дава на операторите контрол над разпространението и протичащия от съответния поток данни, което може да е важно за управлението на разходите и спазването на нормативните изисквания. То се използва съответно на същото място, както другите врати на API, агрегатори като LiteLLM и One API, от които то се разработва. Като при повечето самозадържани системи за въвеждане, въвеждането на Нова API изисква конfigurация на инфраструктурата и обща поддържане, а разнообразието на поддръжка на доставчиците и стабилността се дължи на обществените приноси.