it's free*.ai

Jan

O Jan é um aplicativo de desktop open source em formato ChatGPT que roda 100% offline. O servidor local fica em localhost:1337/v1, compatível com OpenAI, então editores conversam com ele do mesmo jeito que com o LM Studio.

O Jan é um aplicativo de desktop open source em formato ChatGPT que roda 100% offline. O servidor local fica em localhost:1337/v1, compatível com OpenAI, então editores conversam com ele do mesmo jeito que com o LM Studio.

Baixe, escolha um modelo, converse. Sem conta. O ponto é a interface, não um engine novo — por baixo são pesos locais na sua máquina.

Contexto máximo
Whatever your RAM allows
Nível gratuito
Ilimitado e privado
Requisito
Nada — sem conta

Endpoint

URL basehttp://localhost:1337/v1
Limite de taxaNone — it is your machine

Exemplos de código

npm install openai
import OpenAI from 'openai'

const client = new OpenAI({
  baseURL: 'http://localhost:1337/v1',
  apiKey: 'not-needed'
})

const response = await client.chat.completions.create({
  model: 'llama3.3-70b',
  messages: [{ role: 'user', content: 'Explain closures in one paragraph.' }]
})

console.log(response.choices[0].message.content)

Modelos que você obtém de graça2