Ir para o conteúdo

Infraestrutura e preços na mesa de operações

Tudo o que publicamos em Infraestrutura e preços, lido da mesa de operações: o que muda para uma empresa B2B de 10 a 200 pessoas.

  1. Destaque

    AWS Batch ganha cotas compartilhadas de GPU no SageMaker

    O AWS Batch ganhou um recurso de agendamento chamado quota management. Administradores dividem a capacidade de GPU em quota shares por time ou projeto, e a capacidade ociosa pode ser emprestada a outros shares automaticamente. A preempção retoma o que foi emprestado e roda primeiro os jobs de maior prioridade do SageMaker Training, sem coordenação manual.

    O que muda na operação — Isso só importa se a sua empresa treina ou faz fine-tuning de modelos em GPUs que várias pessoas ou projetos dividem. Se um time de 10 a 200 pessoas se encaixa nesse perfil, as quota shares substituem as threads no Slack sobre quem está com as GPUs: dê um share a cada projeto, marque quais podem emprestar ou tomar emprestado e deixe o agendador recuperar a capacidade. Se você só consome modelos hospedados por API, não há nada a mudar. A fonte não informa preço nem disponibilidade por região, então consulte o guia do usuário do AWS Batch antes de planejar em cima disso.

  1. Modelos Claude passam a rodar dentro da Índia via Amazon Bedrock

    Para uma empresa B2B de 10 a 200 pessoas que atende clientes na Índia, ou presa a contratos que exigem processamento de dados dentro do país, isso remove um obstáculo real para usar Claude em automação de suporte ou vendas: antes, rotear pelo Bedrock podia significar que prompts e saídas saíam da Índia. Agora é possível selecionar o perfil de inferência IN no console ou na API e obter os mesmos modelos com inferência confinada a ap-south-1 e ap-south-2. Faturamento, cotas e logs do CloudWatch/CloudTrail permanecem vinculados à região de origem, então o monitoramento e o controle de custos não se fragmentam entre geografias. Equipes construindo um bot de suporte ou assistente de vendas baseado em Claude para uma entidade indiana agora podem fazer isso sem uma solução alternativa de compliance ou trocar de fornecedor de modelo.

  1. Grok 4.6 chega à Amazon Bedrock com guardrails

    Para uma empresa de 10 a 200 pessoas rodando agentes de vendas ou suporte na AWS Bedrock, isso é uma decisão real de arquitetura, não apenas mais um modelo para testar. Guardrails, registro de invocações e cache de prompt agora funcionam no endpoint bedrock-runtime, que é o indicado quando se precisa de um limite de política em torno de um agente não supervisionado e de uma trilha de auditoria do que ele de fato fez. Mas saída estruturada em JSON e uso de ferramentas no lado do servidor continuam restritos ao bedrock-mantle, então um workflow que depende de saída com schema rígido precisa escolher esse endpoint em vez do outro. O preço adiciona mais uma alavanca: rotear pelo perfil Global de inferência entre regiões, mais barato, em vez do perfil Geo restrito aos EUA, ou cair para o nível de serviço Flex pela metade da tarifa padrão em trabalhos de lote não urgentes, muda a economia unitária de um agente mais do que a escolha do modelo em si.

  1. AWS reformula Bedrock AgentCore para cortar custo ocioso

    Se seus agentes de suporte ou vendas rodam no Bedrock AgentCore, isso muda dois números que realmente importam: a fatura da AWS e o tempo de espera do cliente quando um agente ocioso volta a funcionar. Antes, um agente de longa duração ou com picos de uso continuava pagando pelo pico de memória durante toda a sessão, e os cold starts pioravam conforme a imagem do container ou a concorrência cresciam — um problema real para agentes que ficam parados a maior parte do dia e disparam em horário comercial. O novo runtime cobra mais próximo do uso real e mantém o cold start estável em cerca de 2 segundos independente do tamanho da imagem, então times que rodam vários agentes (um triador de suporte, um bot de qualificação de leads, um assistente interno de operações) podem deixá-los escalados a zero entre requisições sem a antiga penalidade de latência quando um cliente ou representante os aciona a frio. É uma mudança de infraestrutura, não uma nova capacidade, mas reduz o custo operacional exatamente do padrão que a maioria das empresas de 10 a 200 pessoas usa: vários agentes especializados que ficam ociosos na maior parte do tempo.

  1. Bedrock ganha cache de prompts e barateia suporte com IA

    Se o seu chatbot de suporte, assistente interno de conhecimento ou copiloto de vendas roda no Bedrock e envia o mesmo prompt de sistema ou a mesma documentação de produto a cada requisição — o que a maioria das ferramentas com recuperação aumentada faz —, isso reduz o custo por consulta e acelera o tempo de resposta sem qualquer mudança no modelo em si. Times que operam automação de suporte em alto volume (centenas ou milhares de tickets por dia) devem verificar se o cache é aplicado automaticamente ou configurá-lo explicitamente, já que a AWS destaca que o recurso funciona melhor quando uma parte grande do prompt — como um trecho de base de conhecimento ou definições de ferramentas — permanece idêntica entre chamadas. Para uma empresa de 10 a 200 pessoas que já paga por token em fluxos de suporte ou vendas com IA no Bedrock, isso é uma alavanca de custo direta que vale a pena checar já neste trimestre, não uma consideração para o futuro.

  1. SageMaker ganha roteamento para reduzir latência de LLMs

    A maioria das empresas B2B de 10 a 200 pessoas usa uma API hospedada como OpenAI ou Anthropic, e essa mudança não as afeta diretamente. Mas se a automação de operações ou suporte roda um modelo auto-hospedado ou ajustado (fine-tuned) atrás do SageMaker — comum ao lidar com dados sensíveis de clientes, históricos de tickets ou scripts de vendas proprietários que precisam permanecer na própria VPC — essa atualização de roteamento representa uma redução gratuita de latência e custo. Bots de suporte e ferramentas de assistência a agentes que reutilizam o mesmo prompt de sistema em milhares de tickets por dia terão resposta mais rápida no primeiro token e menor gasto com GPU apenas ao migrar para a nova estratégia de roteamento, sem qualquer mudança nos prompts ou na lógica da aplicação.

  1. AWS ensina a cortar custo de token em RAG no Bedrock

    Se o bot de suporte, o assistente de vendas ou a busca de conhecimento interno da sua empresa roda em um pipeline de retrieval-augmented generation via Bedrock (ou arquitetura semelhante), a conta de tokens cresce proporcionalmente à quantidade de contexto irrelevante empilhado em cada prompt — documentos longos, texto padrão e trechos quase duplicados recuperados 'por garantia'. A compressão sensível à consulta resolve isso filtrando os trechos recuperados contra a pergunta real antes que cheguem ao modelo, e é exatamente essa alavanca que determina se o assistente de IA de uma equipe de suporte de 20 pessoas custa R$1.000 ou R$10.000 por mês em escala. Times que já rodam RAG em produção devem tratar isso como item concreto de redução de custo, não como upgrade futuro — não exige troca de modelo, apenas a inserção de uma etapa de compressão no pipeline existente de recuperação para geração.

  1. AWS lança roteamento entre regiões para o GPT-5.6 no Bedrock

    Se o seu chatbot de suporte, agente de qualificação de leads ou automação de operações chama o GPT-5.6 via Amazon Bedrock, isso elimina uma dor operacional real: picos de demanda em uma única região que causam respostas atrasadas ou perdidas em horários de pico. Em vez de escrever e manter sua própria lógica de retry e failover entre regiões, o Bedrock agora cuida desse roteamento, o que significa menos alertas de madrugada quando um fluxo de IA voltado ao cliente começa a sofrer throttling. Equipes com operações enxutas (10 a 200 pessoas) raramente têm tempo de engenharia sobrando para construir infraestrutura de resiliência por conta própria, então este é um caso em que o provedor de nuvem absorve essa complexidade — um ganho direto, ainda que modesto, para a disponibilidade de qualquer pipeline de vendas ou suporte baseado em IA construído sobre o Bedrock.

  1. Modelo Nemotron da NVIDIA, rápido e barato, chega ao SageMaker da AWS

    Se o time de operações ou engenharia da sua empresa já roda na AWS, isso importa menos como uma notícia de "novo modelo de IA" e mais como uma questão de compras e latência: o deploy com um clique dentro do SageMaker JumpStart reduz a sobrecarga de integração para adicionar um modelo rápido e mais barato a chatbots de vendas, triagem de suporte ou automação de fluxos internos. Para uma empresa de 10 a 200 pessoas, isso é a diferença entre um sprint de engenharia de duas semanas e uma tarde testando se um modelo mais leve dá conta do roteamento de tickets ou da qualificação de leads o suficiente para substituir um modelo mais caro. A ressalva: essa é uma conveniência específica da AWS, não uma mudança universal de capacidade — se sua empresa não está na AWS, ou ainda não tem infraestrutura para testar trocas de modelo em A/B com segurança, não há nada a fazer aqui hoje além de anotar que a opção existe.

Próximo passo

Autodiagnóstico em 15 minutos

Quinze minutos, sem e-mail. Sai um mapa de para onde o trabalho vai e a ordem do que vale automatizar primeiro.

Fazer o autodiagnóstico em 15 minutos

Começa na hora, no navegador.

Preço
Grátis
Duração
15 minutos

A lista ordenada de candidatos fica com você de qualquer jeito.