Tras varios días buscando voluntarios para realizar las pruebas conseguí realizar las pruebas con 10 voluntarios. De este modo, tenemos un total de 20 pruebas realizadas entre las dos ideas de diseño que se habían propuesto. A continuación se verá con más detalle esta información.
3.5.1
Resultado
Antes de comenzar con las pruebas sobre los dos diseños de bajo nivel tanto de web como de móvil, se decidió realizar una pequeña entrevista a cada usuario. De los voluntarios que realizaron las pruebas un 40% eran mujeres y el 60% restante eran hombre. Al darse en la universidad la mayoría de los encuestados rondan una edad entre los 18 a los 27 años, pero también logramos realizar pruebas con usuarios de otras edades como se ve a continuación en la gráfica.
Ilustración 35 - Gráfica edad Pruebas
Ante la pregunta del uso medio de los dispositivos móviles como de los ordenadores se obtuvieron resultados muy similares. En ambos casos los voluntarios con edades más jóvenes eran propensos a invertir más horas. En algunos casos contestaban que llegaban a usar el teléfono hasta 5 horas al día. Si hacemos la media de todas las respuestas se obtiene que el dispositivo móvil es usado con más frecuencia frente el ordenador. Los resultados que se obtuvieron fueron 04:30 horas de media para el móvil y 3:45 horas de media para el ordenador.
Este resultado del uso de los terminales, también se ha visto muy relacionado con el interés del usuario en la tecnología y el uso que suele darle. Se puede observar que casi un 50% de los usuarios emplean la tecnología como una herramienta, siendo solo un 40% muestra interés por ella. Se tiene en cuenta que el escenario de pruebas en ocasiones fue la universidad de informática, puede ser un motivo por el cual solo tenemos un 10% de usuarios que no se sienten atraídos por la tecnología.
Ilustración 36 - Gráfica genero Pruebas
En las preguntas relacionadas con el tema del transporte, obtuvimos un resultado donde el 90% de voluntarios tenían un permiso de conducir, dejando solo un 10% sin licencias para conducir. Al mismo tiempo, del total de usuarios solo un 60% poseían un coche propio que usaban casi a diario para viajar.
En el ámbito de preferencias de cada usuario al compartir vehículo tuvimos por general una grata respuesta de los encuestados, donde la mayoría estaban dispuestos a compartir. En algunos casos especificaban que solo lo harían con conocidos o asegurándose de que la otra persona fuera de fiar. Del mismo modo tuvimos respuestas similares relacionadas con la pregunta de la distancia a la que estaban dispuestos a desplazarse para recoger a otra persona. Si calculamos la media de distancia que estaban dispuestos a desplazarse obtenemos un total de 1200 metros, dándose situaciones donde la respuesta fue 0 metros o la condición de que fueran un conocido a la persona que recogen.
Por último tras realizar la encuesta de como planeaban sus viajes obtuvimos una respuesta muy balanceada. En términos generales un 60% decía de planear sus viajes y tan solo un 40% coincidía en que los buscaban al momento. Se tiene que aclarar que este resultado es para viajes más de diario, para viajes largos la mayoría de usuarios lo solían planear, pero también suelen escoger otros medios de transporte como el tren o avión.
De este modo se han recopilado todas las preguntas relacionadas con cada voluntario y destacado en este documento cuales de ellas han resultado más relevante y de peso para la decisión final del trabajo.
3.5.2
Estadísticas
Los resultados obtenidos en las pruebas de cada diseño, los vamos a recopilarlos en cuatro factores. Esto tiene como objetivo analizarlos con mayor detalle y poder obtener una conclusión final más aceptada.
En primer lugar vamos a centrarnos en la efectividad de los cuatro modelos diseñados, donde mostramos el número de errores por tarea realizada. En las siguientes gráficas se ven reflejados estos datos, donde podemos observar como en ambos casos el número de errores es mayor en el diseño web.
En el diseño A para web calculamos un total de 0.5 errores/tarea frente al diseño del móvil que solo tiene 0.44 errores/tarea.
Ilustración 37 - Errores por persona Diseño A
En el diseño B para web calculamos un total de 0.46 errores/tarea frente al diseño del móvil que solo tiene 0.42 errores/tarea.
Ilustración 38 - Errores por tarea Diseño B
Teniendo en cuenta estos resultados, podemos llegar a la conclusión que en esta primera comparativa el diseño B es mucho más eficiente que el diseño A. Al mismo tiempo podemos observar que los diseños móviles tienden a tener menos errores.
Tras analizar la efectividad, el siguiente paso será valorar la eficiencia de cada uno de nuestros modelos. Para calcularla vamos a tener en cuenta el número de acciones que conlleva cada tarea en los distintos modelos. En las siguientes gráficas se ven reflejados estos datos, donde tenemos en cuenta que se dejaba liberta al usuario a la hora de hacer algunas tareas. Para evitar incoherencias, se ha filtrado este tipo de acciones.
En el diseño A para web calculamos una media total de 6.02 acciones/tarea frente al diseño del móvil con una media de 5.84 errores/tarea.
Ilustración 39 - Acciones por persona y tarea Diseño A
En el diseño B para web calculamos una media total de 5.7 acciones/tarea frente al diseño del móvil con una media de 5.74 errores/tarea. En este caso la media es mejor en la web por muy poco.
Ilustración 40 - Acciones por persona y tarea Diseño B
Otra de las cuestionarios que vamos a valorar es la satisfacción SUS. Para evaluar los cuestionarios hemos dado dos puntos a las respuestas “Completamente de
acuerdo/desacuerdo”, y un punto a las respuestas “De acuerdo/desacuerdo”. De este modo tuvimos el resultado que muestra la siguiente tabla con todos los modelos.
Cuestionario de Satisfacción SUS modelos A y B Media Web A Media Móvil A Media Web B Media Móvil B
Me gustaría usar el sistema
frecuentemente. 12 13 13 14
El sistema es innecesariamente complejo. 9 9 9 10
El sistema ha sido fácil de usar. 14 14 14 15
Necesitaría ayuda de personal técnico
para poder. 12 13 12 13
Las funciones del sistema están bien
integradas. 16 16 16 16
Hay mucha inconsistencia en el sistema. 12 13 13 14
La mayoría de las personas podían
aprender rápidamente a usar el sistema. 12 12 13 13
El sistema es muy incómodo de usar. 13 14 13 15
Me sentí muy seguro usando el sistema. 14 14 14 14
Tuve que aprender muchas cosas antes de
poder usar el sistema. 13 15 13 14
Total 127 133 130 138
Tabla 10 – Cuestionario de Satisfacción SUS modelos A y B
Como se puede ver en el resultado total de puntos de cada uno de los diseños, los diseños móviles son más afines de tener una mejor puntuación, aunque es por poco. Al mismo tiempo entre los diseños A y B, la mayoría de usuarios les ha gustado más la segunda opción ofrecida en las pruebas.
Otro de los campos que vamos a considerar como importante para la decisión final del diseño, será la evaluación personal de los usuarios. Se les pedía a los usuarios que valoraran las diferentes versiones del 1 al 10.
Para el modelo A obtuvimos los siguientes resultados: Web: Media de 7.6 y desviación de 0.52
Móvil: Media de 8 y desviación de 0.67
Para el modelo B obtuvimos los siguientes resultados: Web: Media de 7.8 y desviación de 0.91
Móvil: Media de 8.1 y desviación de 1.1
Con estas valoraciones podemos llegar a la conclusión que los modelos que más han gustado son aquellos basados en los dispositivos móviles. Al mismo tiempo podemos destacar que el modelo B es el que tiene una mejor puntuación.
Para finalizar con la valoración, se pidió a los usuarios que opinaran sobre la aplicación y ofrecieran mejoras o sugerencias para añadirlas. De este modo pudimos saber que algunos de los usuarios daban más prioridad a la valoración del servicio o la puntuación en general a la hora de seleccionar alguna opción. También recibimos algunas sugerencias como añadir más opciones en la valoración, crear un botón rápido que se active en mitad del viaje o poder ver de una forma más sencilla viajes que la gente sube.
Teniendo en cuenta todo esto vamos a generar el nuevo diseño intentando fusionar los puntos fuertes de cada concepto y añadiendo las sugerencias de los usuarios. Tenemos que destacar que según los resultados, el diseño que más peso tendrá será el B.