원자 채팅
Mastra의 Model 라우터를 통해 5개의 Atomic Chat Model에 액세스하세요. 인증은 다음을 사용하여 자동으로 처리됩니다.ATOMIC_CHAT_API_KEY environment variable.
자세한 내용은 다음에서 확인하세요.Atomic Chat documentation.
.env
ATOMIC_CHAT_API_KEY=your-api-key
src/mastra/agents/my-agent.ts
import { Agent } from "@mastra/core/agent";
const agent = new Agent({
id: "my-agent",
name: "My Agent",
instructions: "You are a helpful assistant",
model: "atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF"
});
// Generate a response
const response = await agent.generate("Hello!");
// Stream a response
const stream = await agent.stream("Tell me a story");
for await (const chunk of stream) {
console.log(chunk);
}
정보
Mastra는 OpenAI 호환 /chat/completions 엔드포인트를 사용합니다. 일부 Provider별 기능은 사용하지 못할 수 있습니다. 자세한 내용은 Atomic Chat 문서를 참조하세요.
ModelModel에 대한 직접 링크
| Model | Context | Tools | Reasoning | Image | Audio | Video | Input $/1M | Output $/1M |
|---|---|---|---|---|---|---|---|---|
atomic-chat/gemma-4-E4B-it-IQ4_XS | 33K | — | — | |||||
atomic-chat/gemma-4-E4B-it-MLX-4bit | 33K | — | — | |||||
atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF | 131K | — | — | |||||
atomic-chat/Qwen3_5-9B-MLX-4bit | 33K | — | — | |||||
atomic-chat/Qwen3_5-9B-Q4_K_M | 33K | — | — |
고급 구성고급 구성에 대한 직접 링크
맞춤 헤더맞춤 헤더에 대한 직접 링크
src/mastra/agents/my-agent.ts
const agent = new Agent({
id: "custom-agent",
name: "custom-agent",
model: {
url: "http://127.0.0.1:1337/v1",
id: "atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF",
apiKey: process.env.ATOMIC_CHAT_API_KEY,
headers: {
"X-Custom-Header": "value"
}
}
});
동적 Model 선택동적 Model 선택에 대한 직접 링크
src/mastra/agents/my-agent.ts
const agent = new Agent({
id: "dynamic-agent",
name: "Dynamic Agent",
model: ({ requestContext }) => {
const useAdvanced = requestContext.task === "complex";
return useAdvanced
? "atomic-chat/gemma-4-E4B-it-MLX-4bit"
: "atomic-chat/Meta-Llama-3_1-8B-Instruct-GGUF";
}
});