requests 的作者的新项目 requests-html

[yangzhezjgs]

https://github.com/kennethreitz/requests-html

This library intends to make parsing HTML (e.g. scraping the web) as simple and intuitive as possible.

When using this library you automatically get:

-Full JavaScript support!
-CSS Selectors (a.k.a jQuery-style, thanks to PyQuery).
-XPath Selectors, for the faint at heart.
-Mocked user-agent (like a real web browser).
-Automatic following of redirects.
-Connection – pooling and cookie persistence.
-The Requests experience you know and love, with magical parsing abilities.

对 requests 做了封装，添加了解析 html 的接口，总代码现在是 399 行，还在更新

[cy97cool]

mark 先 star 为敬

[lhx2008]

把 pyquery 和 xpath 弄进来了，还有自动 useragent，是要一统江湖的节奏

[co3site]

观望中，先 star

[Sanko]

orz

[prolic]

star 为敬，beautifulsoup 用着还是不够爽

[weiwio]

今天看了一下，原来是新项目，很有希望啊

[fyyz]

吊炸天

[tuding]

这个作者好腻害，好多牛逼项目

[steveway]

看作者就 star 系列

[lfzyx]

可以放弃 bs4 了？

[CSM]

期待有人封装 aiohttp

[sunwei0325]

如果下载和解析分开异步进行就好了

[angelshq]

mark

[Zzde]

Mark

[find456789]

不太明白，这个 库 用来替代谁的？

[find456789]

请问这个库 是 requests+bs4 吗

[douglarek]

xxx for humans 又来了？没有 xxx 之前莫不是大家都在吃猪食 ？

[soulmine]

@find456789 大约看了下 大概类似于 requests+bs4+selenium/phantomjs 不过后面两个现在只是封装了一小部分功能 比如通过 css selector 解析或者执行 js 代码这种

[soulmine]

@sunwei0325 你可以自己异步啊 比如用队列什么的

[hugo2lee]

Only later versions of Python 3 are supported. 好评