• 请不要在回答技术问题时复制粘贴 AI 生成的内容
alexapollo
V2EX  ›  程序员

关于内网 bbs 抓取的技术问题

  •  
  •   alexapollo ·
    geekan · Mar 4, 2015 · 4542 views
    This topic created in 4273 days ago, the information mentioned may be changed or developed.

    很想关注某些内网bbs的关键词(二手、交易),但我们公司每次登录都是动态密码,cookie每次都变,就没法用程序写死cookie或密码来自动抓取了
    有什么好方法让我能自动抓取内网bbs的相关信息呢?

    18 replies  •  2015-03-06 10:51:21 +08:00
    horsley
    horsley
    Mar 4, 2015
    1
    鹅厂?
    onlyice
    onlyice
    Mar 4, 2015 via Android
    2
    动态密码没办法了吧。。看看 BBS 有漏洞没有。。
    zkd8907
    zkd8907
    Mar 4, 2015
    3
    =.= 目测鹅厂。。。
    YouXia
    YouXia
    Mar 4, 2015
    4
    无解。
    xfspace
    xfspace
    Mar 4, 2015
    5
    根据Github的显示: Tencent
    lk09364
    lk09364
    Mar 4, 2015
    6
    userscript?
    loading
    loading
    Mar 4, 2015
    7
    取cookie,发送给你的抓取服务app,app用cookie认证登陆。

    发cookie这一步,程序不好取,可能要手工,不知node-webkit行不行。
    horsley
    horsley
    Mar 4, 2015
    8
    其实我们这边已经有一个小工具,不过我要做一个新工具
    ytzong
    ytzong
    Mar 4, 2015
    9
    装个浏览器扩展,自动刷新页面的那种,可以设置监控的关键字,刷到了会弹通知

    鹅厂你好,鹅厂再见
    800126
    800126
    Mar 4, 2015 via Smartisan T1
    10
    我也想起了鹅厂的RSA密码令牌了
    typcn
    typcn
    Mar 4, 2015
    11
    需要费时间的方法:
    反编译密码令牌的客户端,一般情况下 iOS 客户端比较好逆,OC 可以还原的比较好。安卓端一般混淆的比较蛋疼。
    找出算法,写出密码计算器,然后就简单了

    懒一点的方法(有现成实现的):
    装个安卓模拟器,把密码令牌程序运行到模拟器里,一般情况下数字非常好认,把0-9都截图一遍,然后屏幕识别就可以轻易的获得当前的密码,然后模拟登陆抓取
    mdjhny
    mdjhny
    Mar 4, 2015
    12
    1、大部分人浏览器一整天都是开着的;
    2、总要访问个oa吧,访问oa就自动种下cookie了;
    3、种下cookie就可以用浏览器插件开搞了。

    ps:楼主工作明显不饱和。
    hiboshi
    hiboshi
    Mar 4, 2015
    13
    目测楼主所说的应该是
    bbs.oa.com 鹅厂
    ykjsw
    ykjsw
    Mar 5, 2015 via iPhone
    14
    如果是鹅厂 建议别搞 有访问记录的 访问多了会有人找你的
    horsley
    horsley
    Mar 5, 2015
    15
    @ykjsw ls亲历?
    cvrock
    cvrock
    Mar 5, 2015
    16
    我擦,这么多鹅厂的
    alexapollo
    alexapollo
    OP
    Mar 5, 2015
    17
    @ykjsw really?。。。。
    alexapollo
    alexapollo
    OP
    Mar 6, 2015
    18
    @loading 看起来登录以后ajax调一下本机的服务就行。。
    @ytzong 估计只有这个办法了,但监测到关键字后有没有什么简单的弹提示的方法?
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1898 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 64ms · UTC 08:10 · PVG 16:10 · LAX 00:10 · JFK 03:10
    ♥ Do have faith in what you're doing.