V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
simadad
V2EX  ›  问与答

超出认知范围的视频 APP 反爬虫策略

  •  
  •   simadad · Oct 20, 2018 · 2886 views
    This topic created in 2756 days ago, the information mentioned may be changed or developed.

    问题描述

    最近在练习爬虫技巧时遇到了一个十分棘手的视频 APP —— 移动电影院,在我有限的认知内,fiddlerXposedJustTrustMe等工具在面对这款 APP 时均告失败,有没有大神能花时间分析一下这款 APP 的反爬虫策略,指导一下我接下来该往哪个方向去尝试破解?

    已尝试过哪些方法

    1.fiddler 代理捕获 http 请求——无法获取视频资源 url ;

    猜测原因:视频请求地址为 https 加密地址;

    2.fiddler 代理伪造证书捕获 https 请求—— APP 响应 404

    猜测原因:证书不受信任;

    3.Charles 代理伪造证书捕获 https 请求—— APP 响应 404

    猜测原因:安卓 8.0 用户证书不被信任;

    4.Xposed + Android6.0 模拟器(mumu 模拟器) + JustTrustMe 模块绕过 SSL Pinning—— APP 闪退;

    猜测原因:APP 与模拟器版本不兼容

    5.Xposed + Android4.4 模拟器(夜神模拟器) + JustTrustMe 模块绕过 SSL Pinning——仍然无法捕获视频链接;

    猜测原因:视频请求使用的不是 tcp/http/https/WebSocket 等 fiddler 可以捕获到的常规协议???

    求助

    有没有大神能花时间分析一下这款 APP 的反爬虫策略,指导一下我接下来该往哪个方向去尝试破解?

    2 replies    2018-10-20 19:51:56 +08:00
    wdv2ly
        1
    wdv2ly  
       Oct 20, 2018 via Android
    wireshark
    PulpFunction
        2
    PulpFunction  
       Oct 20, 2018 via iPhone
    他们的工程师应该也会看这里
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   4977 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 49ms · UTC 09:53 · PVG 17:53 · LAX 02:53 · JFK 05:53
    ♥ Do have faith in what you're doing.