CTS失败項 参考

CTS失败項 参考
CtsHostsideNetworkTests com.android.cts.net.HostsideVpnTests#testAppDisallowed 需要确保Wifi AP能使用IPv6翻牆,国内无法测试
CtsLibcoreTestCases libcore.java.net.InetAddressTest#test_getByName [FAQ09392]:这项fail很可能是DNS被绑架了,
在测试CTS,建议贵司把dns server 配为 8.8.8.8 和 8.8.4.4, 避免运营商的劫持
用国内wifi有时可以测过
CtsMediaTestCases android.media.cts.DecoderTest#testDecodeFragmented patch:ALPS03460041
  android.media.cts.VideoDecoderPerfTest#testAvcGoog0Perf1920x1080 按照 FAQ19346,修改media_codecs_performance.xml
CtsNetTestCases android.net.cts.DnsTest#testDnsWorks 需要确保Wifi AP能使用IPv6翻牆,国内无法测试
  android.net.cts.MultinetworkApiTest#testNativeDatagramTransmission EPROTO (Protocol error):
这个报错一般是wifi连不上server,请更换不同的VPN测试
EPERM (Operation not permitted):
这个报错一般连接的是virtual network,比如手机连上普通wifi以后,再使用的软件。导致其底层认为你当前的网络是虚拟的,但是由于当前跟CTS的这个进程对应的UID不在protecteduser里面,因此导致测试无法通过。
外网有时测不过
CtsSecurityTestCases android.security.cts.StagefrightTest#testStagefright_bug_23270724 与google security patch ALPS03460041有关,
可提交eservice申请分析报告,申请豁免
—打patch之后可以通过
CtsMediaTestCases android.media.cts.MediaCodecCapabilitiesTest#testAvcBaseline12 申请ALPS03407763
CtsPermission2TestCases android.permission2.cts.PermissionPolicyTest#testPlatformPermissionPolicyUnaltered 是frameworks\base\core\res\AndroidManifest.xml
不能在platform namespace定义,即这个定义是非法的:android.permission.HARDWARE_ABSTRACTION_ACCESS
android.permission.HIDE_NON_SYSTEM_OVERLAY_WINDOWS
申请豁免
—打patch之后可以通过
CtsCameraTestCases android.hardware.camera2.cts.RecordingTest#testBurstVideoSnapshot 摄像头帧率太低,拿手电筒照着摄像头测
CtsViewTestCases android.view.cts.SurfaceViewSyncTests#testVideoSurfaceViewCornerCoverage 这几项跟CPU/GPU performance有关,测试前打开开发者选项/disable HW overlays 看看是否可以pass,
如果可以pass 这种情况Lab是认可的,如果多次测试仍然不能pass 只能申请豁免了。
若要走豁免流程,请用Bug ID 35087167 申请豁免
     
CTS-Verifier失败項 参考
Camera FOV Calibration   FAQ10317
BYOD Managed Provisioning Cross profile intent filters FAQ19527
Network Connectivity Screen Off Test   需要确保Wifi AP能使用IPv6翻牆,国内无法测试
GTS 5.0 r2 失败項 参考
GtsPermissionTestCases com.google.android.gts.backup.BackupPermissionRestrictionHostSideTest#testOnlyWhitelistedTransportsOrPackagesHoldBackupPermission 申请豁免:Google id:68671775
  com.google.android.permission.gts.DefaultPermissionGrantPolicyTest#testDefaultGrants 不能手动打开文件管理器的存储权限。
GtsExoPlayerTestCases com.google.android.exoplayer.gts.DashTest#testH265AdaptiveWithRendererDisabling CPU资源不够用,重试可以通过
GtsExoPlayerTestCases com.google.android.exoplayer.gts.DashTest#testWidevineH264AdaptiveWithRendererDisabling 重新打patch ALPS03584324
  com.google.android.exoplayer.gts.DashTest#testWidevineH265AdaptiveWithRendererDisabling 重新打patch ALPS03584324
  com.google.android.exoplayer.gts.DashTest#testWidevineVp9AdaptiveWithRendererDisabling 重新打patch ALPS03584324
GtsMediaTestCases com.google.android.media.gts.WidevineHEVCPlaybackTests#testClearWithUHD30 网络问题,网速跟不上,修改时间限制:
修改GtsMediaTestCases.config

改成

  com.google.android.media.gts.WidevineHEVCPlaybackTests#testL3WithUHD30 同上
  com.google.android.media.gts.WidevineH264PlaybackTests#testClearWith1080P30 同上
  com.google.android.media.gts.WidevineH264PlaybackTests#testClearWithUHD30 同上
  com.google.android.media.gts.WidevineH264PlaybackTests#testL3With1080P30 同上
  com.google.android.media.gts.WidevineH264PlaybackTests#testL3WithUHD30 同上
GtsMediaTestCases com.google.android.media.gts.WidevineVP9WebMPlaybackTests#testClearWith720P30 修改配置media_codecs_google_video_le.xml
  com.google.android.media.gts.WidevineVP9WebMPlaybackTests#testL3With720P30 修改配置media_codecs_google_video_le.xml
  com.google.android.media.gts.WidevineVP9WebMPlaybackTests#testVP9WebMCencSubSampleL3With720P30fps 修改配置media_codecs_google_video_le.xml
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testClear720P60 豁免Google bug ID:67077385
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testL3Cenc720P60 豁免Google bug ID:67077385
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testClear240P60 fail LCD的刷新频率要达到60FPS
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testClear360P60 fail LCD的刷新频率要达到60FPS
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testClear480P60 fail LCD的刷新频率要达到60FPS
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testL3Cenc240P60 fail LCD的刷新频率要达到60FPS
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testL3Cenc360P60 fail LCD的刷新频率要达到60FPS
  com.google.android.media.gts.WidevineYouTubePerformanceTests#testL3Cenc480P60 fail LCD的刷新频率要达到60FPS

你可能感兴趣的:(gts,cts)