发明名称 模拟用户行为的移动流媒体业务感知体验QoE的测评方法
摘要 一种模拟用户行为的移动流媒体业务用户感知体验QoE的测评方法:先设置一套把移动流媒体业务的用户感知体验分成业务接入,业务保持和业务完整三方面参数的移动流媒体业务QoE测评指标体系,再利用测试终端模拟用户使用移动流媒体业务的整个过程,分别采集与计算移动流媒体业务的关键性能指标KPI,进而计算其相应业务的关键质量指标KQI,以及利用心理模型对KQI进行综合运算,获得相应业务的关键体验指标KEI,最后对这些KEI指标进行综合分析,获得等效于国际标准平均意见分值MOS的五分制流媒体业务QoE值。本发明方法的测评参数标准客观、实用、操作步骤简单,计算复杂度低和易于集成,能够模拟移动流媒体业务用户得到相对客观、公正的用户体验感知质量。
申请公布号 CN102685790B 申请公布日期 2014.09.10
申请号 CN201210159921.3 申请日期 2012.05.22
申请人 北京东方文骏软件科技有限责任公司;北京邮电大学 发明人 杜海清;刘勇;叶艳柯;徐静涛;周小毛;亓玉娇;王永峰;许克辉;孟欣欣;胡文;李湘平
分类号 H04W24/06(2009.01)I;H04W24/08(2009.01)I;H04N21/24(2011.01)I 主分类号 H04W24/06(2009.01)I
代理机构 北京德琦知识产权代理有限公司 11018 代理人 夏宪富
主权项 一种模拟用户行为的移动流媒体业务用户感知体验QoE的测评方法,其特征在于:先设置一套移动流媒体业务QoE测评指标体系,该测评指标体系把移动流媒体业务的用户感知体验分成业务接入,业务保持和业务完整的三方面体验参数;然后,利用测试终端模拟用户使用移动流媒体业务的整个过程,分别采集与计算移动流媒体业务的关键性能指标KPI(Key Performance Indicator),进而计算其相应的移动流媒体业务的关键质量指标KQI(Key Quality Indicator),以及利用心理模型对KQI进行综合运算,从而获得相应的移动流媒体业务的关键体验指标KEI(Key Experience Indicator),最后对这些KEI指标进行综合分析,获得等效于国际标准平均意见分值MOS(Mean Opinion Score)的五分制流媒体业务QoE值;所述方法包括下述步骤: (1)测试终端采集移动流媒体业务的关键性能指标KPI:测试终端从媒体服务器上的媒体资源集中随机选择读取一个可播放的统一资源定位符URL,模拟用户的视频点播行为并收集和保存KPI; (2)根据移动流媒体业务QoE测评指标体系中的性能指标参数,利用采集到的关键性能指标KPI逐步计算其关键质量指标KQI和关键体验指标KEI,并最终得到测试终端模拟用户本次使用移动流媒体业务的QoE值;该步骤(2)包括下列操作内容: (21)利用测试终端采集到的移动流媒体业务KPI分别计算下述各个KQI: 接入时延,为接入网络时长; 接通状态,为PDP激活结束、认证完成或集客专线IP地址获取的三种状态中的一种状态; 视频流状态,为RTSP保持状态; 在线状态,为承载网络状态; 平均速率,为平均传输速率; 信号稳定度,为信号电平的标准差系数,用于表示单位信号电平均值的偏 离度;其计算公式为:<img file="FDA0000504873850000021.GIF" wi="687" he="139" />速率稳定度,为传输速率的标准差系数,用于表示单位平均传输速率的偏离度;其计算公式为:<img file="FDA0000504873850000022.GIF" wi="637" he="140" />初始缓冲时延,为视频播放开始时刻与视频播放请求时刻之差值,其数值与接入RTSP时延等同; 视频等待累计时长,为超流控缓冲累计时长,即超过设定阈值的多个单次超流控缓冲时长的累加和; 视频等待次数,为超流控缓冲次数,即单次超流控缓冲时长超过设定阈值的重缓冲的总次数; 视频质量,为视频评价MOS值,即经过网络参数修正的视频客观评分值; (22)先将KQI指标分为两类:实际数值越大、网络性能越好的正向指标和实际值越小、网络性能越好的反向指标,其中正向指标包括:接通状态、视频流状态、在线状态、平均速率和视频质量,反向指标包括:接入时延、速率稳定度、信号稳定度、初始缓冲时延、视频等待累计时长和视频等待次数; 再将每项KQI指标与其期望值相比较,并按照满意度映射函数计算每个KQI的满意度值KQI<sub>MOS</sub>,即等效于MOS[0,5]区间的分值; (23)利用每个KQI的满意度值KQI<sub>MOS</sub>和层次分析法AHP,按照公式KEI<sub>i</sub>=∑ω<sub>β</sub>KQI<sub>MOSi,</sub><sub>β</sub>计算其关键体验指标KEI;式中,KEI<sub>i</sub>是由下标i区分的接入性、保持性和完整性的关键体验指标;系数ω<sub>β</sub>是由下标β区分的各项关键体验指标KEI中的各项关键质量指标KQI的权重,ω<sub>β</sub>是由AHP得到的,且满足∑ω<sub>β</sub>=1;KEI的取值区间为[0,5]; (24)按照下述公式计算测试终端模拟用户每次移动流媒体业务的QoE值:QoE=∑ω<sub>i</sub>KEI<sub>i</sub>=ω<sub>接入性</sub>KEI<sub>接入性</sub>+ω<sub>保持性</sub>KEI<sub>保持性</sub>+ω<sub>完整性</sub>KEI<sub>完整性</sub>;该步骤操作内容与步骤(23)相同,即利用AHP方法先构造各KEI关系判断矩阵,再计算该判断矩阵的最大特征值与其对应的特征向量,并对该特征向量进行归一化处理,归一化 处理后的向量的每个元素就是各KEI对应的权重ω<sub>i</sub>,最后进行一致性检验;但要说明的是:当上述三个KEI中任意一个数值为0时,则其对应的QoE即为0; (3)返回多次重复执行步骤(1)和(2);并基于该多次测试结果数据,统计设定时间和/或设定地点的移动流媒体业务的用户体验质量情况。
地址 100016 北京市朝阳区酒仙桥路14号兆维工业区A区3号楼1门4层