从今天开始尝试写技术文档,虽然自己没任何技术。可就是因为没有才需要拥有,希望通过不断地努力能够让自己在IT技术方面有核心竞争力。
今天对QoE的评价参数进行调研。
以下内容为文献《用户体验质量(QoE)的模型与评价方法综述》(林 闯 胡 杰 孔祥震)中的内容
文献3:国际电信联盟对QoE的定义为:终端用户对应用或者服务整体的主观可接受程度[3].([3]ITu—T:Definition of quality of experience(QoE).International TelecommunicationUnion,Liaison Statement,Ref.:TD 109rev2(PLEN/12),2007)
文献4中,QoE被定义为:从用户角度体验到的一个系统的整体性能.指出:一般来说,视频和音频业务的QoE客观评价方法根据其特定的应用可以选择以下3种方法:全参考、部分参考、无参考.将IPTV的QoE分为两个组成部分:(1)与网络相关的QoE,用QoE。表示;(2)与用户相关的Qog,用QoEu表示.与网络相关的QoE主要由网络延迟、丢包、抖动这些因素决定([4]Garcia M,Canovas A,Edo M et a1.A QoE management system for ubiquitous IPTV devices//Proceedings of the 2009 Third International Conference on Mobile Ubiquitous Cornputing,Systems,Services and Technologies.2009:147—152)
文献[5—7]详细讨论了QoE的影响因素
([5]Volk M,Sterle J,Sedlar U et a1.An approach to modeling and control of QoE in next generation networks.IEEE Cornmunications Magazine,2010,48(8):126—135;论述了:服务层面的影响因素又包括网络(或者传输)层、应用层及服务层的参数
[6]Ries M,Froehlich P,Schatz R.QoE evaluation of high-deftnition IPTV services//Proceedings of the Radioelektronika (Radioelektronika).2011:1—5
[7]Barakovie S,Barakovi6 J,Bajrie H.QoE dimensions and QoE measurement of NGN services//Proceedings of the Telecommunications Forum(TELFOR 2010).2010:15—18)
文献[8—9]对这些影响因素--用户层面的 因素包括用户的期望、体验经历、用户体验时所处的身心状态和自身背景(如年龄、性别、受教育程度、价值观念等)如何相互作用进行了分析和讨论.
([8]Moller S,Engelbreeht KP,Kuhnel C,Wechsung I,Weiss B.A taxonomy of quality of service and Quality of Experience of multimodal human—machine interaction//Proceedings of the International Workshop on Quality of Multimedia Experience (QoMEx 2009).2009:7-12
[9]ur Rehman Laghari K,Crespi N,Molina B,Palau C E.QoE aware service delivery in distributed environment//Proceedings of the 201 1 IEEE
Workshops of International Conference on Advanced Information Networking and Applications (WAINA).201 l:837—842)
文献[11—12]采用类型量表的方法,将QoE分为可接受(Acceptable)和不可接受(Unacceptable)两个级别.测试环境(伪主观评价方法步骤之一)可以有多种选择,测试环境可以选择在实验室的环境中
([11]Agboma F,Liotta A.QoE—aware QoS management//Proceedings of the MoMM2008.2008:1 1 1—1 16。讲述了伪主观评价方法的基本步骤,有判别分析法(对QoE的评价)
[12]Menkovski V,Sanchez A C.Predicting quality of experience in multimedia streaming//Proceedings of the MoMM2009.2009:52—59)]给出了用决策树解决QoE评价问题
的方法,并获得了较高的准确率
文献[13]提出了用成对比较法(paired comparison)对QoE进行量化,属于等距量表法。([13]Chen K T,Wu C C,Chang Y C,Lei C L.A crowd sourceable QoE evaluation framework for multimedia content//Proceedings of the 1 7th ACM International Conference on Multimedia.2009:491—500)
文献[14]提出了Bradley—Terry—Luce(BTL)模型,处理比较法中的数据
文献[15]"平均评估分值",即MOS,是目前较广泛采用的,由国际电信联盟(ITU)建议。以语音业务为背景,最先提出了主观评价的方法.主观评价的方法就是要直接从用户感知出发,对业务进行评价.为了获得用户的感知,就需要选择一定数量的测试人员,让他们来使用给定的业务,并按照MOS方法给出分数.
[15]International Telecommunication Union,Geneva.Methods for subjectivedetermination of transmission quality.Report:ITU—T_P.800,1996
文献[16]:峰值信噪比(Peak Signal to Noise Ratio,PSNR)是一种传统的客观的视频质量的评价方法,它没有考虑人的视觉掩蔽的现象,也就是说,每一个像素的错误都会影响最后的评价结果,而实际上这样的错误是完全不能被人眼觉察到的
[16]Venkataraman M,Sengupta S,Chatterjee M et a1.Towards a video QoE definition in converged networks.Proeeedings of the 2nd International Conference on Digital Telecommunications(ICDT’07).2007
文献[16-18]:MPQM将人类视觉特征考虑在内,更准确地反映了用户对业务的主观体验.
[17]Wang Y.Survey of objective video quality measurements.Worcester Polytechnic Institute:Technical Report,2006
[18]NetPredic,Inc.Performance Analysis for Video Streams across Networks.White Paper,2003
文献[19]:国际电信联盟使用这种方法(全参考)来获得有线数字电视业务中用户对视频质量的要求
[19]ITU—T Rec J.143.User requirements for objective perceptual video quality measurements in digital cable television.2000
文献[20]对原序列和语音序列的比较是在每一帧之间进行的,这样就需要将这两个序列在时间上进行对准.如果系统中存在时延抖动的话,这样的比较就会存在一些问题.
[20]Winkler S.Quality of Experience(QoE):An important measure of success for IP—based video services.Symmetricom White Paper.2007
文献[21]:这种方法(部分参考)中,选择输入、输出序列的部分参数进行比较从而获得质量评价.
[21]Richards A,Rogers G,Antoniades M et a1.Mapping user level QoS from a single parameter.Proceedings of the 2nd IFIP/IEEE International Conference of Management of Multimedia Networks and Services,1998
一些研究者[4,22]试图通过研究QoS与QoE之间的关联模型来对QoE进行评价.文献[22]中讨论了IPTV业务中视频的QoE和QoS之间的关系,并给出了视频质量的QoE与
QoS之间的关联模型.
[22]I-Iyun Jong Kim,Seong Gon Choi.A study on a QoS/QoE correlation model for QoE evaluation on IPTV service.Proceedings of the 1 2th International Conference on Advanced Communication Technology(ICACT).2010,2:1377—1382
文献[23-24]:伪主观的评价方法结合了主观评价方法和客观评价方法的优点.
[23]Koning T D D,Velthoven P,Knoche H et a1.Of MOS and men:Bridging the gap between objective and subjective quality measurements in Mobile TV.Proceedings of the SPIE.2007
[24]Perreira F.Burnett I.Universal multimedia experiences for tomorrow.IEEE Signal Processing Magazine,2003,20(2):63—73
文献[25]:测试环境可以选择在真实的生活环境中
[25]Menkovski V,Exarchakos G,Liotta A.Online QoE Prediction.Proceedings of the QoMEX.2010:118—123
文献[26]给出了一个数据筛选的方法.在数据筛选之后,还要对筛选后的数据进行分析,判断其是否在统计上有意义.
[26]ITU—R Recommendation BT500.Methodology for the Subjective Assessment of the Quality of Television Pictures,2002
文献[27]对QoE的主观参数进行了因子分析.它将主观参数分为质量层面和情绪层面.给出了QoE的5个评价指标与QoE之间的相关性分析,如表5所示.
[27]Ketyk6 I,De Moor K,Joseph W et a1.Performing QoE Measurements in an Actual 3G Network.Proceedings of the 2010 IEEE International Symposium on Broadband Multimedia Systems and Broadcasting.20 10:1-6
文献[28]:指出,实时交互的业务适合用指数回归模型进行分析,而传统的网页浏览的业务则适合用对数回归模型进行分析.
[28]De Moor K,Joseph W,Ketyk6 I et a1.Linking users’subjective QoE evaluation to signal strength in an IEEE 802.1 lb/g wireless LAN environment.Eurasip Journal on
Wireless Communications and Networking,2010,2010:1-12
文献[33]:回归分析的基本研究方法
文献[34]:韦伯一费希纳定律1是心理学领域的一个重要原理,它描述了物理刺激的程度和它被人感受的强度之间的关系,适用于中等强度的刺激.在许多场景,这种关系都呈现一种对数的特征.可以利用这一性质来研究QoE的评价[35]--通过两个例子描述了韦伯一费希纳定律在QoE评价问题中的意义.
[34]Urban F M.The weber-fechner law and mental measurement.Journal of Experimental Psychology,1933,16(2):221-238
文献[35-36]:QoE评价的IQX假设
[35]Reichl P,Egger S,Schatz R.The logarithmic nature of QoE and the role of the weber—fechner law in QoE assessment.Proceedings of the IEEE ICC 2010.2010
[36]Fiedler M,Hossfeld T,Phuoc Tran-Gia.A generic quantitative relationship between quality of experience and quality of service.IEEE of Network,2010,24(2):36—41
基于FAHP的QoE评价:
[32,37]:面介绍FAHP中的一些主要的定义和定律.文献[32]根据FAHP方法,建立了短信服务OoE的评价体系结构
[32]Du Yu,Zhou Wen-An,Chen Bao-Fu et a1.A QoE based evaluation of service quality in wireless communication network.Proceedings of the New Trends in Information and
Service Science.2009:552-557
[37]Mikhailov L,Tsvetinov P.Evaluation of services using a fuzzy analytichierarchy process.Appl.Soft Comput.,2004,5(1):23—33
基于机器学习的QoE评价:
[12,25,31]:讨论决策树,[12,25,30-31]:支持向量机
[30]Farrugia R A,Debono C J.A support vector machine approach for detection and loealization of transmission errors within standard H.263++Decoders.IEEE Transactions on Multimedia,2009,11(7):1323—1330
[31]Menkovski V,Exarchakos G,Liotta A.Machine learning approach for quality of experience aware networks.Proceedings of the 2nd International Conference on Intelligent
Networking and Collaborative Systems(INCoS).2010:46l一466
按照是否有用户直接参与评价及是否给出QoE与其影响因素之间的关联模型可以将现有的评价方法分为主观评价方法、客观评价方法及主客观结合的方法,其中主客观结合的方法又可以称为伪主观评价方法(在一些文献中,伪主观的评价方法和客观评价方法都被称为客观的评价方法).
服务层面:
l 传输层的参数反映网络传输的状况,如延迟、带宽、丢包率、误码率、抖动等.
l 应用层的参数反映没有经过传输的服务的性能,包含了0SI模型中会话层、表示层、应用层对服务的影响,如IPTV服务中的内容分辨率、编解码类型等.
l 服务层的参数确定了通信的语义、内容、优先级、重要性以及定价,如服务层的配置(内容类型、服务的应用级别)及质量保证.
环境层面的影响因素包括自然环境(如光照条件、噪声的大小、环境的固定或移动),人文与社会环境(如社会观念、文化规范)以及服务运行环境(包括软硬件环境)等.
用户层面的因素包括用户的期望、体验经历、用户体验时所处的身心状态和自身背景(如年龄、性别、受教育程度、价值观念等).
与网络相关的QoE主要由网络延迟、丢包、抖动这些因素决定,与用户相关的QoE主要由视音频质量、视音频的同步及转换频道所用的时间决定
几种QoE的评价方法:基于统计学的评价方法、基于心理学的评价方法、基于机器学习的QoE评价、基于随机模型的评价方法研究