что нельзя тестировать

Ethics guardrails

Запретные зоны экспериментов: страх, зависимость, приватность, уязвимые темы и ложные обещания.

Некоторые тесты нельзя запускать даже если они могут поднять конверсию.

forbidden claim scan

Каждый вариант проходит forbidden claims list.

Нельзя тестировать запрещённое как 'временный вариант'.

privacy boundary

Event payload не хранит личный вопрос, имя третьего лица или полный текст свитка.

Analytics не должна становиться чужим дневником.

dependency risk

Тест не поощряет повторять расклад из страха.

Retention через тревогу запрещён.

Записать гипотезу

Формула: если мы изменим X для аудитории Y, то метрика Z изменится, потому что исчезнет конкретное трение.

  • Есть один главный изменяемый элемент.
  • Есть одна primary metric и одна guardrail metric.
  • Есть заранее записанное решение после теста.

Запустить тихо

Начинайте с малой доли трафика или одного сегмента, особенно если тест касается оплаты, email, доверия или новичков.

  • Тест можно выключить без deploy-хаоса.
  • События пишутся без личных вопросов и текстов свитков.
  • Поддержка знает, что изменилось.

Прочитать результат

Не объявляйте победителя по одному дню. Смотрите device split, источник трафика, жалобы, возвраты и качество поведения после оплаты.

  • Результат сравнен с baseline.
  • Guardrail не ухудшился.
  • Итог записан в experiment log.

карточки эксперимента

  • Do not test urgency copy about fate, love, health, court, immigration, or money.
  • Do not test hiding free options or disclaimers.
  • Do not test reading third-party secrets as a premium feature.

правила отката

  • Any privacy or forbidden-claim issue stops the test immediately.
  • If support says users feel pressured, pause and rewrite before continuing.

выход

  • Ethics approval note before launch.
  • Updated forbidden claims entry if a new risk phrase is discovered.

красные флаги

  • Variant B sounds more profitable because it is scarier.
  • The test hides boundaries to make the product feel more powerful.
  • A vulnerable user could read the page as instruction, diagnosis, or guarantee.

связанные двери