Token.js - Kết nối hơn 200 LLM chỉ với một SDK
(github.com/token-js)- Gọi hơn 200 LLM từ 10 nhà cung cấp bằng định dạng OpenAI
- AI21, Anthropic, AWS Bedrock, Cohere, Gemini, Groq, Mistral, OpenAI, Perplexity, OpenRouter
- Hỗ trợ tools, đầu ra JSON, đầu vào hình ảnh, streaming, v.v.
- Hoạt động hoàn toàn ở phía client mà không cần máy chủ proxy
3 bình luận
Có vẻ khá giống với những gì AI SDK cung cấp.
Muốn có gói Python ghê.
Python có https://github.com/BerriAI/litellm