# Pipelines de teste self-healing Suítes de teste tradicionais quebram quando a UI muda. Testes self-healing usam a memória do Synapse para aprender com falhas passadas e se adaptar — reduzindo testes flaky e a carga de manutenção. ## Conceito ``` ┌─────────┐ fails ┌──────────┐ store ┌──────────┐ │ Test │ ───────▶ │ Synapse │ ───────▶ │ Memories │ │ Run │ │ Memory │ │ (failures)│ └─────────┘ └──────────┘ └──────────┘ ▲ │ │ recall │ │ before next run │ └─────────────────────┘ ``` 1. O teste roda 2. Se falhar, armazene a falha (o que deu errado, por quê, como corrigir) 3. Próxima execução: recupere falhas relevantes antes de executar 4. Aplique correções conhecidas automaticamente ## Implementação ### Passo 1: wrapper de teste Envolva cada teste com recall/store de memória: ```python import requests from datetime import datetime URL = "https://synapse.schaefer.zone" MIND_KEY = "mk_..." def self_healing_test(test_name, test_fn): """Decorator: wrap a test with self-healing memory.""" def wrapper(): # 1. Recall past failures for this test past_failures = requests.get( f"{URL}/memory/search?q={test_name}+failure", headers={"Authorization": f"Bearer {MIND_KEY}"} ).json() # 2. Run test with failure context try: test_fn(known_failures=past_failures) except Exception as e: # 3. Store the failure store_failure(test_name, e, traceback.format_exc()) raise return wrapper def store_failure(test_name, error, traceback_str): requests.post(f"{URL}/memory", headers={"Authorization": f"Bearer {MIND_KEY}", "Content-Type": "application/json"}, json={ "category": "mistake", "key": f"test_failure_{test_name}_{datetime.now().isoformat()}", "content": f"Test: {test_name}\nError: {error}\nTrace:\n{traceback_str}", "tags": ["test", "failure", test_name], "priority": "high" }) ``` ### Passo 2: lógica de teste adaptativa Dentro do teste, verifique falhas conhecidas e aplique correções: ```python @self_healing_test def test_login_page(browser, known_failures=None): browser.goto("https://app.com/login") # Check if we've seen this page change before if known_failures and known_failures.get("results"): for failure in known_failures["results"]: if "button moved" in failure["content"].lower(): # Use accessibility label instead of coordinates browser.click(by_label="Login button") return # Default: use coordinates browser.click(x=150, y=400) ``` ### Passo 3: estratégias de recuperação Armazene estratégias de recuperação como memórias: ```python def store_recovery(failure_type, strategy): requests.post(f"{URL}/memory", headers={"Authorization": f"Bearer {MIND_KEY}", "Content-Type": "application/json"}, json={ "category": "skill", "key": f"recovery_{failure_type}", "content": strategy, "tags": ["test", "recovery", failure_type], "priority": "high" }) # Store recoveries for common failures store_recovery("element_not_found", "When element not found by ID, try by CSS class, then by XPath, " "then by accessibility label. Take screenshot for debugging.") store_recovery("timeout", "Increase timeout to 30s. If still fails, check if page is loading " "dynamically — wait for specific element instead of fixed time.") store_recovery("stale_element", "Re-find element before each interaction. Don't cache element references " "across page transitions.") ``` ### Passo 4: integração com CI ```yaml # .gitlab-ci.yml test:self-healing: script: - export SYNAPSE_MIND_KEY=$SYNAPSE_TEST_MIND_KEY - pytest tests/ --self-healing after_script: # Summarize new failures - python scripts/synapse_failure_summary.py ``` ### Passo 5: dashboard de análise de falhas ```python # Get all test failures from the last week r = requests.get( f"{URL}/memory/search?q=test+failure", headers={"Authorization": f"Bearer {MIND_KEY}"} ) # Group by test name failures = {} for mem in r.json().get("results", []): test_name = extract_test_name(mem["content"]) failures.setdefault(test_name, []).append(mem) # Report for test, fails in sorted(failures.items(), key=lambda x: -len(x[1])): print(f"{test}: {len(fails)} failures") ``` ## Melhores práticas > [!TIP] > - **Armazene tracebacks** — eles contêm a linha exata que falhou > - **Tagueie por nome de teste** — permite filtragem rápida > - **Use categoria `mistake`** — separa de memórias regulares > - **Defina prioridade `high`** — falhas nunca devem ser esquecidas > - **Limpeza periódica** — exclua memórias de problemas resolvidos > - **Não armazene dados sensíveis** — credenciais, PII ## Padrões comuns de falha para armazenar | Tipo de falha | O que armazenar | |---------------|-----------------| | Elemento não encontrado | Seletor tentado, estado da página, screenshot | | Timeout | Tempo de espera, o que estava sendo esperado | | Asserção falhou | Valor esperado vs. atual | | Erro de rede | URL, código de status, corpo da resposta | | Permissão negada | Permissão necessária, papel do usuário atual | ## Próximos passos - [Testes automatizados de iOS](/docs/guides/automated-testing-ios) - [Melhores práticas de memória](/docs/guides/memory-best-practices) - [Cookbook de recuperação de erros](/docs/llm-cookbook/error-recovery)