Pular para o conteúdo

AWS Bedrock

Visao Geral

O AWS Bedrock e um servico gerenciado que fornece acesso a modelos fundacionais da Amazon, Anthropic, Meta, Mistral e outros atraves de uma API unificada. O Floopy suporta Bedrock via configuracao de base URL customizada, permitindo rotear requisicoes pelo seu proprio endpoint do Bedrock.

Configuracao

O Bedrock requer uma base URL customizada porque cada conta AWS tem um endpoint unico baseado na regiao e ID da conta.

  1. Va para Settings > Providers no dashboard.
  2. Clique em Add provider e selecione AWS Bedrock.
  3. Insira a URL do seu endpoint Bedrock (ex.: https://bedrock-runtime.us-east-1.amazonaws.com).
  4. Cole suas credenciais AWS e clique em Save.

Modelos Suportados

Os modelos disponiveis dependem do acesso a modelos Bedrock da sua conta AWS. Modelos comuns incluem:

ModeloProviderNotas
anthropic.claude-3-5-sonnet-20241022-v2:0AnthropicClaude 3.5 Sonnet via Bedrock
meta.llama3-3-70b-instruct-v1:0MetaLlama 3.3 70B via Bedrock
mistral.mistral-large-2411-v1:0MistralMistral Large via Bedrock
amazon.nova-pro-v1:0AmazonAmazon Nova Pro

Uso

import OpenAI from "openai";
const client = new OpenAI({
baseURL: "https://api.floopy.ai/v1",
apiKey: process.env.FLOOPY_API_KEY,
});
const response = await client.chat.completions.create({
model: "anthropic.claude-3-5-sonnet-20241022-v2:0",
messages: [{ role: "user", content: "Explique computacao quantica." }],
});

Recursos Especificos

  • Base URL customizada — Seu endpoint Bedrock e configurado por organizacao nas configuracoes de provider.
  • Acesso multi-provider — Acesse modelos da Anthropic, Meta, Mistral, Amazon e outros atraves de uma unica configuracao Bedrock.
  • Integracao AWS — Aproveite roles IAM, VPC endpoints e controles de conformidade existentes.
  • Selecao de regiao — Escolha a regiao AWS mais proxima da sua infraestrutura para menor latencia.