V2EX 首页   注册   登录
 yeyu1989 最近的时间轴更新

yeyu1989

  •   V2EX 第 185983 号会员,加入于 2016-08-08 14:51:39 +08:00,今日活跃度排名 9320
    ping ip 通,但 ping 域名不通,是什么原因
    DNS  •  yeyu1989  •  28 天前  •  最后回复来自 yeyu1989
    11
    帮分析爬取一个网页信息 cn.investing.com
    Python  •  yeyu1989  •  55 天前  •  最后回复来自 noreason
    16
    迫生,出 iMac 一体机一台 ( i5/8G/1T) ME086CH/A
    二手交易  •  yeyu1989  •  144 天前  •  最后回复来自 manoon
    11
    请教一下两个报错,在 import 库的时候
    Python  •  yeyu1989  •  165 天前  •  最后回复来自 wentian
    4
    Python 安装 scipy 报错
    Python  •  yeyu1989  •  146 天前  •  最后回复来自 yeyu1989
    15
    求助, pip 不管装啥都报错
    Python  •  yeyu1989  •  203 天前  •  最后回复来自 flaneurse
    1
    出 9 月 23 日五月天 深圳场 355 价位门票 2 张
    二手交易  •  yeyu1989  •  2016-09-13 12:23:01 PM  •  最后回复来自 lpdy4
    1
    重新出五月天 9 月 23 日深圳场门票 2 张
    二手交易  •  yeyu1989  •  2016-09-07 10:02:15 AM  •  最后回复来自 yeyu1989
    10
    转让 9 月 23 日五月天深圳演唱会门票 2 张
  •  1   
    二手交易  •  yeyu1989  •  2016-08-11 07:39:10 AM  •  最后回复来自 forgett
    6
    yeyu1989 最近回复了
    28 天前
    回复了 yeyu1989 创建的主题 DNS ping ip 通,但 ping 域名不通,是什么原因
    @IceBay @Quarter @ccer @liuminghao233 @oooxxx @qiuyk @silencefent @wtbhk @wtks1
    谢谢各位,不知道什么原因,后来重置路由器就好了。。

    路由器是 r6300v2,刷的梅林,最近也是很奇怪,ssr 用不了。同样的账号,在手机就可以用;用路由器就不行
    55 天前
    回复了 yeyu1989 创建的主题 Python 帮分析爬取一个网页信息 cn.investing.com
    @ospider @qwjhb @Marsss
    非常感谢各位大神,终于可以了。
    不过还有个小问题,就是 post 参数里的 pn:1,貌似只能得到第一页的 50 条记录,我试了一下好像只能一页一页的获取,要获取 70 多次。

    这种有什么简便的办法吗?
    56 天前
    回复了 yeyu1989 创建的主题 Python 帮分析爬取一个网页信息 cn.investing.com
    @qwjhb
    header={
    'Accept':'application/json, text/javascript, */*; q=0.01',
    'Accept-Encoding':'gzip, deflate, br',
    'Accept-Language':'zh-CN,zh;q=0.9',
    'Connection':'keep-alive',
    'Content-Length':'909',
    'Content-Type':'application/x-www-form-urlencoded',
    'Host':'cn.investing.com',
    'Origin':'https://cn.investing.com',
    'Referer':'https://cn.investing.com/stock-screener/?sp=country::37|sector::a|industry::a|equityType::a|exchange::a%3Ceq_market_cap;1',
    'User-Agent':'Opera/8.0 (Macintosh; PPC Mac OS X; U; en)',
    'X-Requested-With':'XMLHttpRequest'
    }
    data={
    'country[]':'37',
    'sector':'2,11,7,10,1,4,9,5,8,3,6,12',
    'industry':'63,85,82,21,10,86,7,78,36,25,4,28,67,5,71,27,61,90,23,68,34,89,43,50,81,41,56,59,69,9,83,29,52,100,58,95,102,94,60,53,38,87,31,6,16,48,55,74,66,35,65,40,99,42,92,98,39,70,32,45,77,20,54,33,24,72,51,30,64,2,96,8,14,22,26,80,15,37,93,13,46,1,79,44,75,91,49,62,88,12,47,84,57,76,17,97,18,19,3,11,101,73',
    'equityType':'ORD,DRC,Preferred,Unit,ClosedEnd,REIT,ELKS,OpenEnd,Right,ParticipationShare,CapitalSecurity,PerpetualCapitalSecurity,GuaranteeCertificate,IGC,Warrant,SeniorNote,Debenture,ETF,ADR,ETC,ETN',
    'exchange[]':'54',
    'exchange[]':'103',
    'pn':'1',
    'order[col]':'eq_market_cap',
    'order[dir]':'d'
    }
    session = requests.Session()
    s = session.post('https://cn.investing.com/stock-screener/Service/SearchStocks',params=data,headers=header)
    html = etree.HTML(s.text)

    我理解应该是这么写的?但还是得不到想要的结果...
    56 天前
    回复了 yeyu1989 创建的主题 Python 帮分析爬取一个网页信息 cn.investing.com
    @qwjhb
    我现在都是照猫画虎,还没有系统学习过。想着边用边学来着
    56 天前
    回复了 yeyu1989 创建的主题 Python 帮分析爬取一个网页信息 cn.investing.com
    @qwjhb
    data={'sp':'country::37|sector::a|industry::a|equityType::a<eq_market_cap;1'}
    header=func.randHeader()
    s = requests.post('https://cn.investing.com/stock-screener/Service/SearchStocks',params=data,headers=header)
    我这么写的,有什么问题吗?还是没有数据...
    DigitalOcean
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   885 人在线   最高记录 3541   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.0 · 43ms · UTC 17:46 · PVG 01:46 · LAX 09:46 · JFK 12:46
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1