Proč každá QA porovnávací tabulka lže — a jak jsme opravili tu naši
Třetí iterace porovnávací tabulky — tahle rámuje každý řádek jako zákaznickou otázku, ne výpis featur. ROI kalkulačka přistála a za první týden ji spustilo 89 uživatelů. Také jsme smazali dvě homepage sekce. Poctivá čísla uvnitř.
Tomas Mertin
4 min čtení
Předchozí porovnávací tabulka měla 11 řádků a žádnou užitečnou odpověď. Přepsali jsme ji od zákaznické otázky, ne od našich featur.
Shipnuto
Porovnávací tabulka v3. Třetí iterace. Předchozí verze se četly jako výpis featur. Tahle rámuje každý řádek jako zákaznickou otázku ('Umí generovat testy z PR diffu?') a ukazuje binární odpovědi napříč QAWave, Applitools, Mabl a in-house SDET. 11 řádků, žádné marketingové vaty.
ROI kalkulačka. Žije mezi Problem sekcí a HowItWorks. Tři inputy: počet inženýrů, hodiny/týden na testech, flaky rate. Outputy: roční plýtvání v EUR a payback period pro náš sprint za $35k. Konzervativní vzorce — přestřelení ROI claimů je nejrychlejší cesta, jak ztratit technické nákupčí.
Zabili jsme dvě sekce. 'Trusted by' řadu s logy (zatím nemáme veřejná loga — fake social proof je horší než žádný) a generický 'Jak funguje AI' vysvětlivku (každý, kdo čte náš web, to už ví). Web je kratší a konvertuje lépe.
Čísla
Unikátní návštěvníci: 1 378. Domluvené discovery hovory: 4. Interakce s ROI kalkulačkou: 89 (44 % návštěvníků, kteří se k sekci dostali). Medián session: 3 m 42 s — nahoru z 2 m 31 s v W19.
Co jsme se naučili
Transparentnost pricingu je klín. Tři ze čtyř discovery hovorů tento týden zmínily $35k fixní cenu jako důvod, proč si rezervovali. 'Jste jediný QA vendor, který má číslo na homepage.' Většina konkurence schovává pricing za sales hovor — tam je díra.
Eval harness pro Copywriter agenta zmeškal regresi. Dvě zakázaná slova prošla do stagingu, než je Brand Guardian chytil v pre-publish kontrole. Root cause: eval dataset nebyl aktualizován, když jsme rozšířili banlist. Upravili jsme workflow tak, aby změny v banlistu auto-rozšiřovaly eval suite.
Příští týden (W21)
Přepis hera (NetworkGraph testuje špatně — nahrazuji vizualizací CI terminálu). 3-agentní review obsahu. Tlačit na prvního design partnera — verbal yes mám, potřebuji LOI.