高级/中级质量工程分析师
Senior/Mid-level Quality Engineering Analyst
关于 Blip
Blip 是巴西最大的对话智能和消息传递公司，在巴西、墨西哥和西班牙设有创新和运营中心，推动全球超过 4000 客户的业务运行。我们专注于可扩展的解决方案，整合数据、人工智能和端到端上下文，协调完整的对话旅程，将孤立的互动转变为战略决策，使命是确保每次接触都成为持续的学习和效率，为业务提供最终的基础设施，创造产生结果的对话。
关于团队
Software Quality Assurance Analyst 是 Professional Services 团队的一员，直接负责企业客户由 LLMs 支持的对话流程的质量保证和认证。该团队与工程师和设计师合作，协调复杂的测试场景，验证 AI 生成的回答的准确性以及集成的稳定性，以确保每个智能接触在技术上表现出色，并为合作伙伴企业带来实际成果。
职责
- 分析 LLMs 的行为，设计测试场景，以确保 AI 回答的准确性、一致性和安全性。
- 执行对话流程和 API 的功能测试和自动化测试，确保交付给客户的稳定性。
- 构建生成式模型的验证流程，减少幻觉并确保符合业务上下文。
- 映射集成异常并报告详细问题，与工程师合作加快修复和改进。
- 评估 AI 旅程的可用性和响应时间，以支持用户持续且无摩擦的体验。
- 资格
- 具有在复杂软件流程中创建和执行功能测试、探索性测试和回归测试的实际经验。
- 具有使用市场上的测试自动化框架（如 Cypress 或 Robot Framework）进行持续集成的实际经验。
- 能够将 AI 和 LLMs 的预期行为转化为严格的测试脚本，以确保安全和精确的交互。
- 具有使用 Postman 等工具对 RESTful API 进行测试的经验，验证集成和数据流量。
- 熟练使用生成式 AI 和现代工具，如 GitHub Copilot，以优化脚本创建和自动化工作流。
查看英文原文
Sobre a Blip
A Blip é a maior empresa de inteligência conversacional e mensageria do Brasil, com hubs de inovação e operação no Brasil, México e Espanha, impulsionando a operação de mais de 4.000 clientes em escala global. Com foco em soluções escaláveis, nós integramos dados, IA e contexto de ponta a ponta para orquestrar jornadas conversacionais completas, substituindo interações isoladas por decisões estratégicas, com a missão de garantir que cada contato vire aprendizado contínuo e eficiência para o negócio, entregando a infraestrutura definitiva para criar conversas que geram resultado.
Sobre o time
Software Quality Assurance Analyst integra o time de Professional Services, atuando diretamente na garantia de qualidade e homologação de fluxos conversacionais potencializados por LLMs para nossos clientes enterprise. O time colabora com engenheiros e designers para orquestrar cenários de testes complexos, validando a precisão das respostas geradas por IA e a estabilidade das integrações, com o objetivo de assegurar que cada contato inteligente funcione com excelência técnica e gere resultados concretos para as empresas parceiras.
Responsabilidades
- Analisar comportamentos de LLMs para desenhar cenários de testes que garantam a precisão, coerência e segurança das respostas da IA.
- Executar testes funcionais e automatizados em fluxos conversacionais e APIs, assegurando a estabilidade das entregas para clientes.
- Estruturar rotinas de validação de modelos generativos, mitigando alucinações e garantindo a aderência aos contextos de negócio.
- Mapear anomalias de integração e relatar problemas detalhados, colaborando com engenheiros para agilizar correções e melhorias.
- Avaliar a usabilidade e o tempo de resposta das jornadas com IA para sustentar uma experiência contínua e sem atritos ao usuário.
Qualificações
- Experiência prática operando na criação e execução de testes funcionais, exploratórios e de regressão em fluxos complexos de software.
- Vivência prática com automação de testes utilizando frameworks de mercado como Cypress ou Robot Framework para esteiras contínuas.
- Capacidade de traduzir o comportamento esperado de IA e LLMs em roteiros de teste rigorosos para garantir interações seguras e precisas.
- Experiência operando testes em APIs RESTful com ferramentas como Postman, validando integrações e tráfego de dados.
- Fluência no uso de IA generativa e ferramentas modernas, como GitHub Copilot, para otimizar a criação de scripts e acelerar diagnósticos.
- Capacidade prática de interagir com ambientes em nuvem e consultar dados em bancos de dados relacionais e não relacionais.
- Experiência operando em cenários ágeis, mantendo a interlocução estratégica e o alinhamento técnico com múltiplos stakeholders.
Originally posted on Himalayas