CHAPTER 4: DATA ANALYSIS AND FINDINGS
4.4 Interview Responses
Como resumen de los experimentos realizados se ofrecen las Figuras 3.6, 3.7 y 3.8 que contienen gráficas que describen el comportamiento de las muestras T02.inp, T06.inp y T19.inp respectivamente, en los 4 experimentos desarrollados bajo un grado de confianza del 95%, donde, en el Experimento 1, las muestras tiene un valor tope en la calidad dada por la influencia del códec sin tomar en cuenta las pérdidas de canal, en el Experimento 2 estos valores caen debido a que se introducen las pérdidas de canal y no se recupera ningún paquete, en el Experimento 3 se comienza a utilizar la técnica de Piggybacking utilizando grado 2, se comienzan a recuperar paquetes y los resultados del MOS mejoran y finalmente en el
Experimento 4, aplicando la técnica de Piggybacking con grado 3, se recupera una mayor
cantidad de paquetes y se obtiene los mismos valores del MOS que en el Experimento 1, en el que las pérdidas de canal no estaban presentes, se logra así, utilizando la técnica de
Piggybacking de paquetes con grado 3, eliminar el impacto de las pérdidas introducidas por
el canal, hasta un 8% de probabilidad de perdida de paquetes en los resultados registrados, también fue probado que la efectividad de la utilización de la técnica con grado 3 es factible incluso con una probabilidad de perdida de paquetes de hasta un 22%.
Las gráficas brindan el comportamiento del MOS según el número de los experimentos y el modo de codificación de las muestras (modo 0, 5 y 7) para una probabilidad de perdida de paquetes de un 8%, se elige esta probabilidad para ser representada en las figuras porque es la que más afecta el MOS y se ve más claramente la efectividad de la técnica.
Figura 3.7: Resultados del MOS de la muestra T06.INP
En el Experimento 4 donde se realiza un agrupamiento de 3 paquetes (grado 3 de
Piggybacking), cada uno de 20 ms, la demora introducida seria de 60 ms, en el caso que se
desee recuperar un paquete que se ha perdido en las 2 tramas anteriores, esta demora introducida no constituye un problema en la calidad ya que está en un rango aceptable. En la
Figura 3.9 se ve el comportamiento de la calidad en el Modelo E, tomando en cuenta el factor
R, según aumenta le demora; hasta los 180 ms la calidad no se ve afectada, que desciende muy suavemente hasta los 200 ms donde hay un codo en la curva y la calidad empieza a descender abruptamente, donde también se puede apreciar que una demora de 60 ms no afecta la calidad.
Figura 3.6: Gráfica que describe el comportamiento de la satisfacción en el Modelo E (factor R) en dependencia de la demora en LTE
CONCLUSIONES Y RECOMENDACIONES
Conclusiones
Como conclusiones de este trabajo se tienen:
1. Dentro de los modelos para la estimación de la QoE del servicio de voz, PESQ es un modelo útil para medir el impacto del uso de la técnica de Piggybacking de paquetes, donde la métrica representativa para ver la actuación de la técnica es la pérdida de paquetes. PESQ es un modelo que es ampliamente utilizado según la bibliografía internacional consultada.
2. Los resultados de MOS obtenidos a partir del modelo PESQ resultan más bajos que lo esperado. Otros estudios han experimentado un comportamiento similar que parece ser provocado porque WB-PESQ subestima la calidad proporcionada por códecs híbridos, tales como el códec G.722.2. Sin embargo, este hecho no afecta de forma notable los experimentos realizados en esta investigación porque los resultados dependen de medidas relativas.
3. Para describir las ráfagas de pérdidas se ha usado el modelo de Markov de 2 estados. Si se compara con otros modelos este modelo presenta el beneficio de un balance positivo entre la sencillez y precisión.
4. Los resultados experimentales muestran que en todos los casos, aumentar el grado de
Piggybacking reduce la probabilidad de pérdidas del flujo de paquetes de media en el
receptor. Sin embargo, para probabilidades de pérdidas de hasta un 22%, un grado tres reduce las pérdidas hasta cerca del 0% y no se obtiene un beneficio apreciable al aumentar el grado a partir de este punto.
5. Si se compara la técnica de Piggybacking con la técnica de Intercalado, se puede decir que la primera tiene la ventaja de no retrasar el flujo de media en el emisor, aunque
necesita de un aumento de la demora de reproducción en el receptor con el objetivo de aprovechar las copias del paquete original. Además, la técnica de Piggybacking necesita de una mayor razón de transmisión. En el caso del intercalado, es necesario retrasar los paquetes tanto en el emisor como en el receptor pero no se modifica la razón de transmisión.
Recomendaciones
Con el objetivo de dar seguimiento al presente trabajo se proponen las siguientes recomendaciones:
1. Realizar una comparación mediante el Modelo E de la técnica Piggybacking frente a otras técnicas tales como el Intercalado, para probar la efectividad de la técnica y las ventajas que ofrece frente a otras técnicas de diversidad temporal.
2. Mejorar los modelos de Matlab para optimizar la recolección de los resultados, a través de una interfaz gráfica de usuario que recoja todas las funciones.
3. En la Figura 3.7 se aprecia que para los Experimentos 2 y 3 los valores de MOS obtenidos para el modo 0 superan a los correspondientes al modo 5, probablemente estos resultados estén determinados por características particulares de la muestra de audio utilizada, determinar la razón real de este comportamiento requiere de nuevos experimentos.
REFERENCIAS BIBLIOGRÁFICAS
1. UIT, U.-T.S.d.N.d.l.T.d.l., Recomendacion UIT-T P.862 Evaluación de la calidad
vocal por percepción: Un método objetivo para la evaluación de la calidad vocal de extremo a extremo de redes telefónicas de banda estrecha y códecs vocales., U.I.D.
TELECOMUNICACIONES, Editor. 2001.
2. Veloso, O.L., Evaluación del Impacto del Intercalado de Paquetes en Servicios de
Voz, in Facultad de Ingeniería Eléctrica, Departamento de Telecomunicaciones y Electrónica. 2016, Universidad Central “Marta Abreu” de Las Villas: Santa Clara.
3. Delgado, P.M.A., Impacto de los mecanismos de handover en la calidad percibida
por usuarios de servicios de voz en LTE, in Departamento de Telecomunicaciones y Electrónica. 2015, Universidad Central "Marta Abreu" de Las Villas: Santa Clara. p.
50.
4. Ramos, P.d.l.C., Contribucion a los modelos y metodologias para la estimacion de la
calidad percibida por los usuarios (QoE) a partir de parametros de calidad red\servicio (QoS) en servicios convergentes multimedia (Triple-Play), in Dpto Ingenieria de Sistemas Telematicos. 2012, Escuela Tecnica Superior de Ingenieros
de Telecomunicacion Universidad Politecnica de Madrid: España, Madrid. p. 473. 5. Agboma, F. and A. Liotta, QoE-aware QoS management, in Proceedings of
MoMM2008. 2008: Linz, Austria.
6. Liotou, E., et al. Quality of experience management in mobile cellular networks: key
issues and design challenges. Communications Magazine, IEEE, 2015. 53, 145-153.
7. Möller, S. and A. Raake, Quality of Experience: Advanced Concepts, Applications
and Methods. 2014: Springer International Publishing.
8. Mellouk, A. and A. Cuadra-Sanchez, Quality of Experience Engineering for
Customer Added Value Services: From Evaluation to Monitoring. 2014: Wiley.
9. Fiedler, M., T. Hossfeld, and P. Tran-Gia, A generic quantitative relationship
between quality of experience and quality of service. IEEE Network, 2010. 24(2): p.
36-41.
10. Urrea, S.M., Estudio experimental de calidad de servicio de voz sobre IP:
comparativa subjetiva versus objetiva, in Tecnologías de la información y las comunicaciones. 2012, ESCUELA TÉCNICA SUPERIOR DE INGENIERÍA DE
TELECOMUNICACIÓN UNIVERSIDAD POLITÉCNICA DE CARTAGENA. p. 81.
11. ITU-T, The E-model: a computational model for use in transmission planning.
Recommendation ITU-T G.107. 2015: Geneva, Switzerland. p. 30.
12. Varela, M. and J.-P. Laulajainen. QOE-driven mobility management—Integrating the
users' quality perception into network—Level decision making. in Quality of Multimedia Experience (QoMEX), 2011 Third International Workshop on. 2011.
IEEE.
13. The POLQA Coalition: OPTICOM GmbH, E., Germany; SwissQual AG, Solothurn, Switzerland; TNO Telecom, Delft, The Netherlands., POLQA Perceptual Objective Listening Quality Analysis. 2011.
14. Andrew Hines, A.K., Jan Skoglund, ViSQOL: The Virtual Speech Quality Objective
Listener, in International Workshop on Acoustic Signal Enhancement 2012. 2012.
15. Andrew Hines, J.S., Anil C Kokaram, Naomi Harte ViSQOL: an objective speech
quality model. EURASIP Journal on Audio, Speech, and Music Processing, 2015.
16. Soloducha, M. and A. Raake. Speech quality of VoIP: bursty packet loss revisited. in
Speech Communication; 11. ITG Symposium. 2014.
17. Marco Aguilar Junca, P.A.R.C., Telefono Software IP basado en SIP e
implementacion de PESQ, in Facultad de Ingenieria, Carrera de Ingenieria Electronica. 2005, Pontificia Universidad Javeriana: Bogota D.C. p. 193.
18. Joskowicz, I.J., VOZ, VIDEO Y TELEFONIA SOBRE IP. 2009, Montevideo, URUGUAY: Comunicaciones Corporativas Unificadas.
19. ITU, I.-T.S.d.N.d.l.T.d.l., Recomendacion ITU-T P.862.2: Ampliación a banda ancha
de la Recomendación P.862 para evaluar las redes de telefonía de banda ancha y los códecs vocales., U.I.d. Telecomunicaciones, Editor. 2005.
20. Mehta, S.P., Comparative Study of Techniques to minimize packet loss in VoIP, in
21st Computer Science Seminar. 2005.
21. Möller, S., et al., Impairment factor framework for wide-band speech codecs. Audio, Speech, and Language Processing, IEEE Transactions on, 2006. 14(6): p. 1969-1976. 22. Botta, A. and A. Pescapé, IP packet interleaving for UDP bursty losses. The Journal
of Systems and Software, 2015: p. 177-191.
23. Jiang, W. and H. Schulzrinne, Comparison and Optimization of Packet Loss Repair
Methods on VoIP Perceived Quality under Bursty Loss. 2002.
24. Veloso, O.L., Evaluación del Impacto del Intercalado de Paquetes en Servicios de
Voz, in Departamento de Telecomunicaciones y Electrónica. 2016, Universidad
Central “Marta Abreu” de Las Villas: Santa Clara, Villa Clara, Cuba. p. 69.
25. Yeo, W.H., B. Sat, and B.W. Wah, New Piggybacking Algorithm In VoIP Using
Enhanced G.722.2 Codec With Larger Frames. 2009.
26. Liu, F., et al., Dimensioning the packet loss burstiness over wireless channels: a novel
metric, its analysis and application. Wireless Communications and Mobile
27. Nagano, T. and A. Ito, Packet loss concealment of voice-over IP packet using
redundant parameter transmission under severe loss conditions. Journal of
Information Hiding and Multimedia Signal Processing, 2014. 5(2): p. 286-295. 28. Han, D., et al. RPT: Re-architecting loss protection for content-aware networks. in
Presented as part of the 9th USENIX Symposium on Networked Systems Design and Implementation (NSDI 12). 2012.
29. ITU-T, G. 722.2: Wideband Coding of Speech at Around 16 kbit/s Using AMRWB. 2003, ITU-T: Geneva, Switzerland.
30. Redwan Salami, R., Milan Jelínek, The Adaptive Multirate Wideband Speech Codec
(AMR-WB). IEEE TRANSACTIONS ON SPEECH AND AUDIO PROCESSING
2002. 10.
31. UIT, U.-T.S.D.N.D.L.T.D.L., Recomendación UIT T G.722.2 – Anexo D:
Secuencias de prueba digitales. 2003, UNIÓN INTERNACIONAL DE
TELECOMUNICACIONES.
32. ITU, I.-T.T.S.S.O., Recommendation ITU T G.722.2-Annex C: Fixed-point C-code. 2008, International Telecommunication Union.
33. Sulong, A., et al. Speech Enhancement in Non-stationary Noise Using Compressive
Sensing. in Computer and Communication Engineering (ICCCE), 2016 International Conference on. 2016. Kuala Lumpur, Malaysia IEEE
34. Zhu, X., et al., Content-independent and loss-pattern-aware distortion evaluation for
streaming media, in Image Processing (ICIP), 2016 IEEE International Conference on. 2016, IEEE Phoenix, AZ, USA
35. Gaich, A. and P. Mowlaee, On speech quality estimation of phase-aware single-
channel speech enhancement, in Acoustics, Speech and Signal Processing (ICASSP), 2015 IEEE International Conference on. 2015, IEEE: Brisbane, QLD, Australia.
36. Chang, C.-C., Y.-H. Shih, and P.-M. Wang, Design and implement SPEEX decoder
on ARM process, in Image and Signal Processing, BioMedical Engineering and Informatics (CISP-BMEI), International Congress on. 2016, IEEE Datong, China
37. Mello, C.A.B. and R.Q. Albuquerque, Reference-Free Speech Quality Assessment for
Mobile Phones Based on Audio Perception, in Systems, Man, and Cybernetics (SMC), 2015 IEEE International Conference on. 2015, IEEE Kowloon, China
38. Telecomunicaciones, U.I.d., Recomendación UIT-T P.862 Enmienda 2 Anexo A
revisado – Implementaciones de referencia y pruebas de conformidad para las Recs. UIT-T P.862, P.862.1 y P.862.2. 2005, UIT-T SECTOR DE NORMALIZACIÓN DE
LAS TELECOMUNICACIONES DE LA UIT.
39. Côté, N., et al., Analysis of a Quality Prediction Model for Wideband Speech Quality,
the WB-PESQ, in 2nd ISCA/DEGA Tutorial and Research Workshop on Perceptual Quality of Systems. 2011.