Sobre las Pruebas A/B en Forge

logo.png

Saludos Reinas y Reyes,

En los últimos tiempos, hemos recibido comentarios sobre las Pruebas A/B y cómo las realizamos. En particular, comentarios sobre las Pruebas A/B de Forge Plus y la actualización de los Desafíos Diarios. Por lo tanto, pensamos que sería útil para vosotros tener más información sobre nuestro enfoque con las Pruebas A/B y por qué son parte integral del desarrollo de Forge of Empires.

Comencemos con una definición de una Prueba A/B. Una Prueba A/B es una prueba estándar de la industria que los desarrolladores suelen utilizar para monitorizar la reacción del jugador a una funcionalidad. Con tales pruebas, se seleccionan aleatoriamente dos o más grupos. Consisten en un grupo de prueba (grupo 'A'), que tendrá acceso a una característica, y un grupo de control (grupo 'B'), que no lo tendrá. A través de esta comparación, los desarrolladores pueden ver directamente el cambio en el comportamiento del jugador y evaluar el impacto de la función probada. Hacemos esto a través de opiniones tanto cuantitativas como cualitativas. Y debemos considerar ambos, pero tened en cuenta que los comentarios del foro son solo una parte de las muchas áreas de las que recibimos comentarios.

Tomemos como ejemplo la reciente actualización del Desafío diario. Con ambos grupos en mente, podemos comparar muchos aspectos (incluida la participación diaria, la retención de usuarios con la función, las eras en las que están las personas que participan, etc.). Eso nos ayuda a establecer si este cambio fue beneficioso y atractivo para nuestros jugadores como una nueva incorporación. Si los resultados no muestran una tendencia positiva, podemos profundizar más y verificar si hubo algún problema. Al final, podemos intervenir y ajustar la nueva funcionalidad o eliminarla por completo.

Es por eso que las Pruebas A/B son esenciales para nosotros. Nos permiten acceder a datos más significativos basados en un entorno de prueba en vivo. Con estos datos, podemos refinar nuestras funciones e identificar posibles problemas.

Además, estrenar una nueva funcionalidad para un grupo más reducido de jugadores nos permite monitorizar los comentarios de manera más efectiva y evitar la posible frustración que podría ocurrir si lanzáramos nuevas características para toda la población del juego de inmediato.

Forge of Empires es, por supuesto, un gran juego. Cuenta con el apoyo de cientos de miles de jugadores en muchos mundos. Pero eso también significa que muchas cosas pueden salir mal. Las pruebas A/B son una necesidad absoluta si se desea mitigar el riesgo potencial de revelar una nueva funcionalidad a una audiencia tan grande. Las consecuencias de lanzar una funcionalidad no probada lo suficientemente pueden causar interacciones negativas con el juego, tanto para nosotros como para vosotros.

También es importante enfatizar que las Pruebas A/B no son selectivas. Ningún jugador o jugadora mantendrá ningún tipo de ventaja a largo plazo ni será preseleccionado para el grupo de prueba. Habréis notado que hay algunas características en las que no podemos realizar una Prueba A/B porque las ventajas serían demasiado grandes para ser justas, y queremos mantener la equidad en el juego. La selección para las pruebas es puramente aleatoria, y la equidad no es la única razón para ello; también se debe a que un elemento aleatorio es parte integral de la calidad de los resultados de la prueba.

Esperamos que esto aclare por qué las Pruebas A/B son clave para nuestra estrategia de desarrollo y seguirán siendo un elemento fijo en futuras actualizaciones.


Atentamente
Vuestro Equipo de Forge of Empires España
 
Arriba