QUI · 15 OUT 2026 ÚLTIMA: Pesquisadores mostram falhas em guardrails de DALL·E 3 e outros São Paulo · PT-BR
IANoticias
Inteligência artificial, decodificada
No radar
Pesquisa · IA

Pesquisadores mostram falhas em guardrails de DALL·E 3 e outros

Pesquisadores de segurança alertam que conteúdo sexual explícito gerado por IA sem consentimento segue se espalhando sem controle, com compartilhamento em mensagens diretas e armazenamento em nuvens privadas, o que dificulta detecção e denúncia. Um estudo coautorado pela Google com usuários da internet nos Estados Unidos, Austrália e Reino Unido, publicado em julho, aponta que o ponto de intervenção mais crítico está na origem das ferramentas usadas para criar as imagens falsas.

Em testes recentes, pesquisadores do White Circle afirmam que guardrails de geradores de imagens de texto de Google e OpenAI podem estar falhando à medida que os modelos ficam mais capazes. Um preprint divulgado no mês passado descreve vulnerabilidades em DALL·E 3, Nano Banana 2 e GPT-Image-2, com a equipe dizendo que, usando ferramentas disponíveis publicamente e chamadas via API, conseguiu gerar conteúdo explícito cerca de 13% das vezes.

Ars Technica (AI) · 14/10 · 11:00 · Ler matéria completa ↗ · Abrir no portal · ·
IA

Pesquisa aponta aumento de carga de trabalho para usuários avançados em IA no Brasil

O Wellhub revelou o Panorama do Bem-Estar Corporativo 2027 e indica que a adoção de inteligência artificial pode aumentar a carga de trabalho para quem já domina a tecnologia. No Brasil, 37% dos trabalhadores “avançados em IA” relatam que o uso da ferramenta elevou o volume de tarefas, ante 13% entre quem está nos primeiros estágios de adoção. O levantamento também mostra que, no recorte brasileiro, oito em cada dez usuários avançados orientam outras pessoas sobre as ferramentas.

Os dados ainda apontam diferenças nos relatos de esgotamento: 23% dos profissionais mais avançados dizem ter sintomas de burnout diariamente, contra 11% dos iniciantes. A pesquisa destaca que políticas claras e bem comunicadas sobre IA se associam a maior resiliência, e que 75% dos usuários avançados citam recursos de bem-estar como apoio para se adaptar ao ambiente impulsionado pela tecnologia. O estudo foi conduzido entre 12 e 19 de junho de 2026 com mais de 5 mil profissionais em dez países.

IA

Friend 2 com IA da Avi Schiffmann usa modelos da OpenAI e ganha “hivemind”

O pendant Friend 2, chatbot em formato de pingente sempre “listening”, chegou em julho custando US$ 249 e usa os “latest language models” da OpenAI. O dispositivo responde a comandos e também pode falar sem ser provocado, com um recurso de “silenciar” que exige toques no aparelho.

A Avi Schiffmann, criadora do Friend, afirmou que a próxima atualização vai tornar os chatbots mais “agentically” e mudar a personalização: em vez de personalidades únicas por usuário, todos conversariam com a mesma entidade, compartilhando contexto entre usuários. A proposta aponta para um “hivemind” do Friend, com mudanças que devem afetar como o sistema se comporta e como a privacidade é tratada.

6 resultados para software testing

Segunda · 07 set 2026-09-07 1 matéria
Eng · Dev com IA Destaque Testes e avaliação de agentes de IA: do demo à produção
Engenharia · Software com IA

Testes e avaliação de agentes de IA: do demo à produção

Zhou Yu, cofundador da Arklex AI e professor na Columbia University, defende que a maioria dos agentes de IA ainda fica presa em demos e não entrega valor real em produção. Ele apresenta uma abordagem baseada em simulações para testar e melhorar agentes, com foco em como levar modelos para ambientes que executam tarefas de verdade.

O conteúdo destaca exemplos de agentes conversacionais e voice agents, citando shopping agents como Sparky (Walmart) e Rufus (Amazon), além de um fluxo de atendimento por voz para recomendação e solicitação de cartão. A proposta é usar simulações para avaliar o comportamento desses agentes com ferramentas e ações, reduzindo a distância entre demonstrações e uso prático.

#InteligenciaArtificial · #IA · #AgentesDeIA · #TestesDeSoftware · #AvaliacaoDeModelos · #Simulacao · #LLM

InfoQ 11:00
Abrir Ler matéria ↗ ✓ Postado no IG
Quinta · 20 ago 2026-08-20 1 matéria
Eng · Dev com IA Destaque Synthesized lança Test Data Agent para testar agentes de IA com dados realistas
Engenharia · Software com IA

Synthesized lança Test Data Agent para testar agentes de IA com dados realistas

A Synthesized anunciou o Test Data Agent, uma infraestrutura para criar dados de teste realistas e condições de sistema usadas na avaliação de agentes de IA antes da implantação em produção. O produto entrou em disponibilidade limitada para clientes existentes e parceiros do ecossistema, com disponibilidade geral prevista para o terceiro trimestre de 2026. A empresa também está testando a tecnologia com parceiros de design de um banco global de nível 1.

O Test Data Agent foi pensado para funcionar junto a frameworks de desenvolvimento, avaliação, testes e orquestração de agentes, sem focar apenas em pontuar a saída do modelo. Ele prepara dados, relações de negócio, permissões e estados de aplicações para verificar se o agente consegue concluir processos corporativos corretamente, incluindo cenários normais, exceções, falhas e adversariais, com possibilidade de gerar dados sintéticos e preservar regras e integridade referencial.

#InteligenciaArtificial · #AgentesDeIA · #TestesDeSoftware · #DadosDeTeste · #MLOps · #QA

Developer Tech News 09:00
Quarta · 12 ago 2026-08-12 1 matéria
IA Blacksmith levanta US$ 45 mi e valuation salta para US$ 550 mi
Pesquisa · IA

Blacksmith levanta US$ 45 mi e valuation salta para US$ 550 mi

A Blacksmith, startup de testes e validação de código para ambientes de produção, levantou uma nova rodada de US$ 45 milhões para aproveitar a aceleração trazida por ferramentas de IA na programação. A Series B, liderada pela Peak XV Partners, avaliou a empresa em US$ 550 milhões, quase 10 vezes mais do que a valuation de US$ 60 milhões atribuída na sua Series A, há menos de um ano.

Fundada em 2024, a Blacksmith ajuda empresas a construir, testar e verificar software antes do deploy e já atende mais de 5.000 clientes, incluindo Mercury, Supabase, Clerk, Ashby e Expensify. Com a expansão da plataforma e o uso de um agente de IA para corrigir checagens de código que falham, a empresa mira reduzir o gargalo de validação e planeja ampliar o conjunto de ferramentas para escrever, validar e integrar software mais rapidamente.

#InteligenciaArtificial · #IA · #SoftwareTesting · #AgentesDeIA · #DevTools · #CI_CD

TechCrunch (AI) 11:00
Sexta · 07 ago 2026-08-07 1 matéria
IA Destaque OpenAI trava Astra após testes: risco de “nível crítico” em cibersegurança
Pesquisa · IA

OpenAI trava Astra após testes: risco de “nível crítico” em cibersegurança

A OpenAI decidiu reduzir o ritmo de trabalho no modelo Astra e não lançar a versão ainda, após testes internos indicarem que ele pode ter atingido um limite de cibersegurança “crítico” — algo que nenhum modelo anterior da empresa teria alcançado. Segundo a companhia, não dá para descartar “capacidades cibernéticas críticas” e, por isso, foram pausadas atividades internas que não atendem requisitos de segurança mais rígidos, enquanto a equipe amplia testes e aperta controles.

No Preparedness Framework, “crítico” envolve a capacidade de identificar e desenvolver ações funcionais de zero-day em sistemas reais e endurecidos, ou executar ataques end-to-end inéditos após receber apenas uma meta de alto nível. Para devs, o alerta é que habilidades que tornam agentes de coding mais úteis podem ser usadas contra o próprio software; por isso, a OpenAI testa Astra em ambientes isolados, com supervisão para interromper comportamentos inseguros e pode exigir verificação e justificativa de uso para acesso às capacidades mais fortes.

#OpenAI · #Astra · #cibersegurança · #agentes de IA · #zero-day · #AI safety · #secure development

The New Stack 20:56
Quinta · 06 ago 2026-08-06 2 matérias
IA Destaque Nova Orleans testa IA para triagem de chamadas do 911
Pesquisa · IA

Nova Orleans testa IA para triagem de chamadas do 911

Nova Orleans (EUA) está testando um sistema de IA para triagem de chamadas de emergência do 911, em vez de atender apenas com despachantes humanos. O Orleans Parish Communication District (OPCD) afirma que a ferramenta, da Carbyne, foi criada para reduzir o volume de ligações que chegam diariamente — mais de mil chamadas de emergência por dia.

Na prática, a IA faz perguntas para entender o tipo de ocorrência e encaminha o contato: se for sobre o mesmo incidente, pode fornecer informações e atualizações; se não for, a ligação é transferida para um atendente humano. A cidade já havia implementado IA em abril para chamadas 311 (não emergenciais), e agora avalia o uso no 911 com foco em direcionar e organizar a demanda, mantendo supervisão humana. A iniciativa importa porque pode melhorar a eficiência e o tempo de resposta durante picos de chamadas, mas também levanta riscos como vieses nos dados, falhas de reconhecimento de fala (por sotaques, dialetos e variações de voz) e necessidade de monitoramento, cibersegurança e regras claras. Para o setor tech, o caso reforça a tendência de agentes de IA entrando na linha de frente de serviços críticos, exigindo validação contínua e governança.

#InteligenciaArtificial · #911 · #triagem · #Carbyne · #governancaDeIA · #reconhecimentoDeFala · #servicosCriticos

Hacker News 00:37
Eng · Dev com IA Destaque Chega de “testes de IA”: a validação precisa virar engenharia
Engenharia · Software com IA

Chega de “testes de IA”: a validação precisa virar engenharia

Um artigo do SD Times defende que “AI testing” não descreve corretamente o trabalho necessário para sistemas baseados em IA. O texto argumenta que testes tradicionais assumem saídas determinísticas para as mesmas entradas, mas modelos e sistemas com recuperação (como RAG) podem variar respostas por mudanças no contexto e no conhecimento disponível. Como exemplo, o autor cita um assistente bancário que aprova reembolsos na terça-feira mesmo com a mesma suíte passando na segunda, porque a base recuperada muda sem alteração de código.

A proposta é tratar o tema como “AI Validation Engineering”, uma disciplina separada de QA determinístico, focada em consistência, grounding em fatos, calibração de confiança, detecção de drift e monitoramento de falhas que testes verdes não capturam. Para times dev, isso significa criar processos, métricas e papéis específicos para validar comportamento probabilístico e, no futuro, também ações de agentes autorizados — reduzindo surpresas em produção.

#AI validation · #quality engineering · #MLOps · #LLM · #RAG · #observability · #software testing

SD Times 19:54