Atomic Chat
通过 Mastra 的模型路由器访问 5 个 Atomic Chat 模型。系统会自动使用 ATOMIC_CHAT_API_KEY 环境变量完成身份验证。
更多信息请参阅Atomic Chat 文档。
.env
ATOMIC_CHAT_API_KEY=your-api-key
src/mastra/agents/my-agent.ts
import { Agent } from '@mastra/core/agent'
const agent = new Agent({
id: 'my-agent',
name: 'My Agent',
instructions: 'You are a helpful assistant',
model: 'atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF',
})
// Generate a response
const response = await agent.generate('Hello!')
// Stream a response
const stream = await agent.stream('Tell me a story')
for await (const chunk of stream) {
console.log(chunk)
}
信息
Mastra 使用兼容 OpenAI 的 /chat/completions endpoint。部分 Provider 特有功能可能不可用,详情请参阅Atomic Chat 文档。
模型模型的直接链接
| Model | Context | Tools | Reasoning | Image | Audio | Video | Input $/1M | Output $/1M |
|---|---|---|---|---|---|---|---|---|
atomic-chat/gemma-4-E4B-it-IQ4_XS | 33K | — | — | |||||
atomic-chat/gemma-4-E4B-it-MLX-4bit | 33K | — | — | |||||
atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF | 131K | — | — | |||||
atomic-chat/Qwen3_5-9B-MLX-4bit | 33K | — | — | |||||
atomic-chat/Qwen3_5-9B-Q4_K_M | 33K | — | — |
高级配置高级配置的直接链接
自定义请求头自定义请求头的直接链接
src/mastra/agents/my-agent.ts
const agent = new Agent({
id: 'custom-agent',
name: 'custom-agent',
model: {
url: 'http://127.0.0.1:1337/v1',
id: 'atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF',
apiKey: process.env.ATOMIC_CHAT_API_KEY,
headers: {
'X-Custom-Header': 'value',
},
},
})
动态选择模型动态选择模型的直接链接
src/mastra/agents/my-agent.ts
const agent = new Agent({
id: 'dynamic-agent',
name: 'Dynamic Agent',
model: ({ requestContext }) => {
const useAdvanced = requestContext.task === 'complex'
return useAdvanced
? 'atomic-chat/gemma-4-E4B-it-MLX-4bit'
: 'atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF'
},
})