Home Sign Up Sign In
爱意满满的作品展示区。
Advertisement
WildCat

Scylla——开源免费的代理 IP 池，更新到 1.1 版本：更好的验证策略、更简单的使用方式、改进的 Web UI

  •  5      
  •   WildCat · May 31, 2018 · 17526 views
    This topic created in 3079 days ago, the information mentioned may be changed or developed.

    banner

    image image image image

    GitHub： https://github.com/imWildCat/scylla

    几天前发布了 Scylla，感谢大家的帮助，一度冲到 GitHub Trending 前五的位置。

    欢迎在贴中留下您的邮箱，我可以发送你 1.1 版本的 demo 地址（暂时不打算公开发布）。如果您想留邮箱，请注意：

    • 可以使用 base64 编码
    • 在您的回复的第一行或者最后一行写（含有邮箱的那一行请不要写其他东西）
    • 也可以用 [at] 或者 # 替代 @

    根据大家的在原帖里的建议，这几天又添加了如下功能（仅选重要的展示）：

    1. 改进的 Web UI

    2. HTTP 正向代理服务器

    查看文档：https://scylla.wildcat.io/zh/stable/#http

    3. 验证策略

    查看文档：https://scylla.wildcat.io/zh/stable/#id9

    Supplement 1  ·  May 31, 2018
    已知一个小问题，将在 1.1.2 版本修复（ 15 分钟内）
    Supplement 2  ·  May 31, 2018

    最新版的 Docker build 有点问题，如果运行后没有任何 IP，请先用 1.0 版本：

    docker run -d -p 8899:8899 -v /var/www/scylla:/var/www/scylla --name scylla wildcat/scylla:1.0

    十分抱歉

    Supplement 3  ·  Jun 1, 2018
    Docker 问题已经完全修复，非常抱歉！
  • image
  • scylla
  • 邮箱
  • Web
    170 replies  •  2018-09-23 09:54:35 +08:00
    1  2  
    ❮ ❯
    LeungJZ
    LeungJZ
    May 31, 2018 via iPhone❤️1
    1
    前排资瓷。
    wjm2038
    wjm2038
    May 31, 2018 via Android
    2
    wjm2038#gmail.com
    支持一下
    CodeDrift
    CodeDrift
    May 31, 2018
    3
    MzA5ODcxMjcxQHFxLmNvbQ==
    支持一下 谢谢啦
    moack
    moack
    May 31, 2018
    4
    dHNoZW5nQG1vYWNrLm5ldA==


    谢啦
    imyip
    imyip
    May 31, 2018
    5
    docker 部署失败了?自动退出?
    moming87
    moming87
    May 31, 2018 via Android
    6
    MzMxNTUxQEdtYWlsLmNvbQ==
    体验一下
    WildCat
    WildCat
    OP
    May 31, 2018
    7
    @imyip 已知一个小问题，将在 1.1.2 版本修复（ 15 分钟内）
    wwek
    wwek
    May 31, 2018
    8
    @imyip 和你一样
    1507265844
    1507265844
    May 31, 2018 via Android
    9
    d3dlaXl1YW5kaW5nQGdtYWlsLmNvbQ==
    了解一下
    WildCat
    WildCat
    OP
    May 31, 2018
    10
    @wwek 在修复，docker build 太慢了。。。
    finely
    finely
    May 31, 2018
    11
    MjQzNzUwNzgyQHFxLmNvbQ==
    支持楼主
    raychar
    raychar
    May 31, 2018
    12
    cmF5Y2hhckBhbGl5dW4uY29t
    支持楼主
    WildCat
    WildCat
    OP
    May 31, 2018
    13
    @wwek
    @imyip

    已修复！
    leonnadesico
    leonnadesico
    May 31, 2018 via Android
    14
    d2FuZ2p1bjQyNDIxMUAxMjYuY29t
    oIMOo
    oIMOo
    May 31, 2018
    15
    Ym93ZW5hY2hhdCNnbWFpbC5jb20=
    WildCat
    WildCat
    OP
    May 31, 2018❤️1
    16
    @wwek
    @imyip

    似乎还有点小问题，我找下原因。pyppeteer 这个库太坑 b 了
    Backlitz
    Backlitz
    May 31, 2018 via Android
    17
    enl3OTcxMkBnbWFpbC5jb20=
    感谢楼主
    veau
    veau
    May 31, 2018
    18
    veau#foxmail.com

    感谢楼主
    bSty
    bSty
    May 31, 2018
    19
    dXRlbWl0ZmtAZ21haWwuY29t
    支持一下 感谢
    fzudust
    fzudust
    May 31, 2018 via Android
    20
    zjz02936341#163.com
    支持
    fzudust
    fzudust
    May 31, 2018 via Android
    21
    zjz02936314#163.com
    刚刚邮箱打错了
    maooyer
    maooyer
    May 31, 2018
    22
    bWFvbWFvaGFja0BnbWFpbC5jb20=
    支持支持
    xxhjkl
    xxhjkl
    May 31, 2018
    23
    eHhoamtsMUBnbWFpbC5jb20=
    前排支持，求发
    rails3
    rails3
    May 31, 2018
    24
    MTM0NzIwMEAxNjMuY29t
    1024bytes
    1024bytes
    May 31, 2018
    25
    aXB2NC5rZXZpbkBnbWFpbC5jb20=

    感谢楼主
    Finch
    Finch
    May 31, 2018 via iPhone
    27
    [email protected]
    感谢
    wingoo
    wingoo
    May 31, 2018
    28
    d2luZ29nb29AZ21haWwuY29t

    感谢
    whoami9894
    whoami9894
    May 31, 2018 via Android
    29
    d2hvYW1pOTg5NEBnbWFpbC5jb20=

    感谢
    sgq1128
    sgq1128
    May 31, 2018 via Android
    30
    ODEzODIyNzQ0QHFxLmNvbQ==
    好人一生平安
    crayhuang
    crayhuang
    May 31, 2018
    31
    cray.huang [at] gmail
    daiqiangbudainiu
    daiqiangbudainiu
    Jun 1, 2018
    32
    mac 不支持吗？
    WildCat
    WildCat
    OP
    Jun 1, 2018
    33
    @warcraft1236 支持，Python 3.6.5 在 Mac 上有个 bug，具体看 issues。我就是在 Mac 上开发的
    WildCat
    WildCat
    OP
    Jun 1, 2018
    34
    @crayhuang 你这个回复真的是气死我了：

    1. 先是研究过滤空格
    2. 然后发现智障 AI 还是不识别你这个回复是邮箱地址
    3. debug 办个小时发现你没写 .com
    ahbing
    ahbing
    Jun 1, 2018 via Android
    35
    givemearainbowlife#gmail.com
    vipdomain
    vipdomain
    Jun 1, 2018
    36
    v2 用户名 @vip.qq.com
    thx
    WildCat
    WildCat
    OP
    Jun 1, 2018❤️1
    37
    @vipdomain 你这让我程序怎么爬你邮箱啊？天呢我一个一个手工爬么
    crayhuang
    crayhuang
    Jun 1, 2018 via iPhone
    38
    @WildCat 😂 我错了! 😅 不是故意的
    daiqiangbudainiu
    daiqiangbudainiu
    Jun 1, 2018
    39
    @WildCat 可是我 pip install 了之后，启动不起来
    daiqiangbudainiu
    daiqiangbudainiu
    Jun 1, 2018
    40
    @WildCat
    报错 log 如下

    2018-06-01 - 02:17:02 DEBUG: create new db connection
    Traceback (most recent call last):
    File "/usr/local/bin/scylla", line 11, in <module>
    sys.exit(app_main())
    File "/usr/local/lib/python3.6/site-packages/scylla/cli.py", line 84, in app_main
    sys.exit(main(sys.argv[1:]))
    File "/usr/local/lib/python3.6/site-packages/scylla/cli.py", line 48, in main
    from scylla.proxy import start_forward_proxy_server_non_blocking
    File "/usr/local/lib/python3.6/site-packages/scylla/proxy/__init__.py", line 1, in <module>
    from .server import start_forward_proxy_server_non_blocking, start_forward_proxy_server
    File "/usr/local/lib/python3.6/site-packages/scylla/proxy/server.py", line 14, in <module>
    httpclient.AsyncHTTPClient.configure("tornado.curl_httpclient.CurlAsyncHTTPClient")
    File "/usr/local/lib/python3.6/site-packages/tornado/httpclient.py", line 302, in configure
    super(AsyncHTTPClient, cls).configure(impl, **kwargs)
    File "/usr/local/lib/python3.6/site-packages/tornado/util.py", line 354, in configure
    impl = import_object(impl)
    File "/usr/local/lib/python3.6/site-packages/tornado/util.py", line 181, in import_object
    obj = __import__('.'.join(parts[:-1]), None, None, [parts[-1]], 0)
    File "/usr/local/lib/python3.6/site-packages/tornado/curl_httpclient.py", line 23, in <module>
    import pycurl # type: ignore
    ImportError: pycurl: libcurl link-time ssl backend (openssl) is different from compile-time ssl backend (none/other)
    WildCat
    WildCat
    OP
    Jun 1, 2018
    41
    @warcraft1236 你电脑没装 lib-curl-dev，你自己 Google 去吧，不同系统不一样
    HFX3389
    HFX3389
    Jun 1, 2018
    42
    Y2NjcGNjcEBxcS5jb20=
    感谢楼主
    xiaofengchen
    xiaofengchen
    Jun 1, 2018 via Android
    43
    eGllX2NhbmdAb3V0bG9vay5jb20
    支持～
    safilar
    safilar
    Jun 1, 2018
    44
    dTUyMDc1NDFAZ21haWwuY29t
    HuaBeau
    HuaBeau
    Jun 1, 2018
    45
    NDI5NDYwMTY1QHFxLmNvbQ==

    支持楼主
    80868075
    80868075
    Jun 1, 2018 via Android
    46
    后排支持楼主
    MzE1NDk4MTYxOUBxcS5jb20=
    safilar
    safilar
    Jun 1, 2018
    47
    @Scylla 部署好多久会有 IP 进来啊
    safilar
    safilar
    Jun 1, 2018
    48
    @WildCat 部署好多久会有 IP 进来啊
    fuckshiter
    fuckshiter
    Jun 1, 2018
    49
    MzMyODk5MTVAcXEuY29t

    非常感谢，支持楼主的
    isin
    isin
    Jun 1, 2018
    50
    aVFpZmVuZ0BIb3RtYWlsLmNvbQ==
    islee
    islee
    Jun 1, 2018
    51
    c2xlZS5yZXBhbGNlQGdtYWlsLmNvbQo=
    gcod
    gcod
    Jun 1, 2018
    52
    emh1Y2VAdnYxMjM0LmNu
    chi1st
    chi1st
    Jun 1, 2018
    53
    支持支持
    eXVjaDEyMzBAcXEuY29t
    frozenthrone
    frozenthrone
    Jun 1, 2018
    54
    bW9vbi56anVAZ21haWwuY29t

    thanks
    ch940621
    ch940621
    Jun 1, 2018
    55
    Y2g5NDA2MjFAcXEuY29t
    资瓷一下
    ZhouAI
    ZhouAI
    Jun 1, 2018
    56
    支持
    bXIuZnJpZW5kbHlAMTYzLmNvbQ==
    cedared
    cedared
    Jun 1, 2018
    57
    MzQxNDUwNkBnbWFpbC5jb20=
    lingdong
    lingdong
    Jun 1, 2018
    58
    bGluZ2Rvbmc3NTg2QGdtYWlsLmNvbQ==
    支持下
    woyao
    woyao
    Jun 1, 2018
    59
    cndkc3FjOTg1NDBAY2hhY3VvLm5ldA==
    thx
    gmx1234
    gmx1234
    Jun 1, 2018
    60
    Z214MTIzNEAxMjYuY29t
    支持 谢谢
    freemagico
    freemagico
    Jun 1, 2018
    61
    dGdseTMwN0BnbWFpbC5jb20=

    赞美楼主
    shore507
    shore507
    Jun 1, 2018 via Android
    62
    shorecw#gmail.com
    支持支持
    zhangchioulin
    zhangchioulin
    Jun 1, 2018
    63
    Z21AY29yZWhlbGwuY29t

    蟹蟹
    gqlxj1987
    gqlxj1987
    Jun 1, 2018
    64
    Z3FseGoxOTg3QGdtYWlsLmNvbQ==

    谢谢
    qshujun
    qshujun
    Jun 1, 2018 via Android
    65
    cXNodWp1bkBnbWFpbC5jb20=
    多谢，辛苦啦
    hourann
    hourann
    Jun 1, 2018 via iPhone
    66
    scylla，这个命名是取自越狱吗？
    azhi
    azhi
    Jun 1, 2018 via Android
    67
    YWlrdXVlckBnbWFpbC5jb20=

    爬点小东西美滋滋
    yujizmq
    yujizmq
    Jun 1, 2018
    68
    bWlrb3RvLnl1NTFAZ21haWwuY29t
    thx
    mutiple
    mutiple
    Jun 1, 2018
    69
    emhhbmd4dWFucjExQDEyNi5jb20=
    蟹蟹
    vipwpcom
    vipwpcom
    Jun 1, 2018
    70
    MjExNTE2MjEyQHFxLmNvbQ==
    支持 谢谢
    alwayshere
    alwayshere
    Jun 1, 2018
    71
    请问你这个是爬取各大代理网站还是真正的爬取代理 ip 再来验证？
    SPACELAN
    SPACELAN
    Jun 1, 2018
    72
    bHloYW1uQHFxLmNvbQ==

    谢谢
    yuluofanchen
    yuluofanchen
    Jun 1, 2018
    73
    bHlubjEyOTk5QDE2My5jb20=

    谢谢~
    kingmo888
    kingmo888
    Jun 1, 2018
    74
    bHpoLTM5MTZAMTYzLmNvbQ==
    感谢楼主，搭个车！
    Asugar
    Asugar
    Jun 1, 2018
    75
    d2hvdG9AbXNuLmNvbQ== 谢谢
    Backlitz
    Backlitz
    Jun 1, 2018 via Android
    76
    zyw9712#gmail.com

    不知道为什么一直没有收到，是不是之前格式错了？
    YY
    YY
    Jun 1, 2018
    77
    djJleEBtYWlsaW5hdG9yLmNvbQ==

    谢谢
    Bisn
    Bisn
    Jun 1, 2018
    78
    YmlzbkBxcS5jb20=
    Bisn
    Bisn
    Jun 1, 2018
    79
    请问怎么和 Scrapy 集成？
    感谢！
    Bisn
    Bisn
    Jun 1, 2018
    80
    http://api.ipify.org 这个网站估计有限制，经常不成功，返回的 ip 还是原先的
    http://ip.3322.net/ 换成这个网站没问题
    eastrd
    eastrd
    Jun 1, 2018
    81
    ZTB0M3J4QGdtYWlsLmNvbQ==

    谢谢
    yolan
    yolan
    Jun 1, 2018
    82
    dHJhc2gyNTgwQDE2My5jb20K
    3q
    taozywu
    taozywu
    Jun 1, 2018
    83
    taozywu#qq.com
    咫尺一下
    huijian222
    huijian222
    Jun 1, 2018
    84
    bGFpamluYmFuZzIwMDlAZ21haWwuY29tCg==
    3q
    zxy
    zxy
    Jun 1, 2018
    85
    aXp4eUBsaXZlLmNvbQ==
    Sin
    Sin
    Jun 1, 2018
    86
    c2lucnVlQGdtYWlsLmNvbQ==
    mmnnyycc
    mmnnyycc
    Jun 1, 2018
    87
    MjYzMTMzODQ0MEBxcS5jb20=
    mosliu
    mosliu
    Jun 1, 2018
    88
    bHgwMzE5QGdtYWlsLmNvbQ==
    谢谢楼主~~
    vuefu
    vuefu
    Jun 1, 2018
    89
    Y2ZxdHhkMUBnbWFpbC5jb20=
    好人一生平安
    chinayb
    chinayb
    Jun 1, 2018
    90
    Y24ueWJAZm94bWFpbC5jb20=
    Mrkon
    Mrkon
    Jun 1, 2018
    91
    MTczMjkyNjE5QHFxLmNvbQ==
    谢谢
    Fechin
    Fechin
    Jun 1, 2018
    92
    bXIuZmVjaGluQGdtYWlsLmNvbQ==
    多谢
    demoxu
    demoxu
    Jun 1, 2018
    93
    ZGVtb3h1MjAwOUBnbWFpbC5jb20=

    支持一下，多谢
    robinlovemaggie
    robinlovemaggie
    Jun 1, 2018
    94
    cm9iaW4ud2hrQGdtYWlsLmNvbQ==
    正好需要写一个蕾丝工具，谢谢啦～～
    byron
    byron
    Jun 1, 2018
    95
    Ynlyb25qaWFAZ21haWwuY29t

    吼啊。
    daiqiangbudainiu
    daiqiangbudainiu
    Jun 1, 2018
    96
    @WildCat mac 还需要装这个吗？
    Caratpine
    Caratpine
    Jun 1, 2018
    97
    做开源不易，支持一下。
    yyminmax
    yyminmax
    Jun 1, 2018
    98
    bWlubWF4eXlAMTYzLmNvbQo=


    谢谢了～
    liujunsheng
    liujunsheng
    Jun 1, 2018
    99
    YUBsaXVqdW5zaGVuZy5jb20=
    frankmdong
    frankmdong
    Jun 1, 2018
    100
    c3VwZXJmcmFua2llNjIxQGdtYWlsLmNvbQ==
    感谢
    1  2  
    ❮ ❯
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1448 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 235ms · UTC 18:19 · PVG 02:19 · LAX 10:19 · JFK 13:19
    ♥ Do have faith in what you're doing.