Háblame de un diseño que no funcionó una vez lanzado.

Elige un fracaso real con una métrica clara o una señal de usuario, explica qué creías en ese momento y por qué esa creencia era razonable, y luego muestra qué demostró la evidencia. Describe el arreglo y qué cambió en tu proceso después. Evita los halagos disfrazados: 'tuvo demasiado éxito' no es un fracaso y los entrevistadores ya lo han oído.

Rediseñamos un panel de filtros en la página de búsqueda de un marketplace. En pruebas era más limpio y más rápido, y le gustaba a todo el mundo, incluido yo. Lo lanzamos a todos a la vez, que fue el error de verdad. En una semana, el uso de búsquedas guardadas cayó alrededor de un tercio. Lo que se nos escapó fue que los usuarios avanzados, quizá un 8% de la base pero una parte mucho mayor de las transacciones, se habían memorizado las posiciones antiguas y usaban ese panel decenas de veces al día. Nuestras sesiones de usabilidad fueron todas con usuarios nuevos, porque eran más fáciles de reclutar, así que habíamos optimizado para la comprensión inicial y penalizado en silencio a quien más lo usaba. Lo arreglamos restaurando los atajos de teclado y dejando que la gente fijara sus filtros frecuentes, y los números se recuperaron en unas tres semanas. Dos cosas cambiaron para siempre después de aquello. Ahora recluto por frecuencia de uso, no solo por segmento, y no lanzo el rediseño de una superficie de alta frecuencia a todo el mundo a la vez sin un despliegue escalonado.