DXC 采集,一个跨平台的数据采集软件

2017-01-11 21:19:41 +08:00
 milu05163614

爬虫估计已经泛滥了,但是没有通用的解决方案。

好比大家想造一辆汽车,网络上各种开源的发动机,底盘,你可以轻易的组装出自己的汽车,然后跟我说,看,组装出一台汽车没什么难的,难的当然是量产了,下次你再想要一辆汽车,你还得重复上面的过程。而且你的方案,别人又没法轻易使用,好比你给自己做了一件衣服,衣服好看是好看,别人想穿在自己身上,就未必合适了。

市场上面一些解决方案。逛了一圈论坛,的确也发现一些不错的软件,但感觉都存在不少问题。

我的软件就是为了解决上述问题而产生。

1 、不会编程也可以编写采集规则
2 、几分钟内就可以完成一条规则,刷刷刷的采集了。而你还在那调试代码。
3 、通用的解决方案,基本上大部分网站都可以采集。对于一些个性化的需求,未来估计会开放一些接口,就可以针对性的低成本开发自己的爬虫系统。

当然了,上面都是功能上的描述。

还有其他功能:

1 、跨平台。目前支持 win 、 mac 、未来会支持 linux 。

程序不是.net 开发的,我最烦那些软件下载完还提醒我去下载什么 .net framework 框架,何况我很多年不用 win 了。 mac 下面的此类工具真的挺稀少。

2 、可以使用浏览器访问,也可以在软件里面操作。就像你家的路由器,你可以通过网页去控制。这个软件也是一样。如果你装在服务器,你可以通过网页轻易去访问,操作。这个功能非常有用。

3 、当然了,使用很简单。不用你安装什么环境。下载即可使用。开箱即用。写规则也很简单。这些可以慢慢体会。

界面截图:

下载地址: http://www.dxcer.com/
官方论坛: http://bbs.dxcer.com/

目前已经有不少用户使用这个软件,且评价都不错。

4110 次点击
所在节点    分享创造
51 条回复
spice630
2017-01-14 16:03:51 +08:00
@milu05163614
是不是只需输入一次 ?只要采集软件不重启就不需要第二次输入?
milu05163614
2017-01-14 16:06:18 +08:00
@spice630 不需要再输入多次。就好比我登录这个论坛,这个论坛根据 cookie 判断我是否是登录状态。只要我把这个 cookie 给程序,程序就能代表我天天登录这个网站。这个网站也没叫你天天登录吧,说明 cookie 一般是长期有效的。
milu05163614
2017-01-14 16:07:20 +08:00
@milu05163614 软件即使重启,依然有效。就像你把浏览器关了,你再直接输入论坛网站,论坛不也照样认定你是已经登录状态吗?
spice630
2017-01-14 16:11:43 +08:00
@milu05163614
那还好
peneazy
2017-01-15 06:34:12 +08:00
支持一下,正需要这东西
mingyun
2017-01-15 10:09:02 +08:00
cookie 来模拟登录时最简单的了,这个软件看起来很强大,下载用用
yivanus
2017-01-15 13:35:42 +08:00
看了后面的讨论,感觉目前这样就可以了。登录那一块实在没必要花大功夫做。
wtcoder
2017-01-16 01:47:59 +08:00
话说 electron 开发的桌面应用,真的只能有这么大吗 - -
milu05163614
2017-01-16 14:25:55 +08:00
@wtcoder 只能有这么大,这意思是说软件太大,还是太小了。我没领会。
wtcoder
2017-01-23 10:47:42 +08:00
@milu05163614 太大了 :)
wtcoder
2017-01-23 10:48:50 +08:00
@milu05163614 我本来想用 electron 做点简单功能性桌面程序,现在改用 C#了还是~

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/333968

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX