![]() | 1 hellov22ex 2014-08-11 12:43:51 +08:00 图标很喜欢~ |
![]() | 2 zsz 2014-08-11 13:16:56 +08:00 工作地点在哪里? |
![]() | 3 gjflsl 2014-08-11 13:26:50 +08:00 地点哪里呀? |
![]() | 4 imaygou OP @hellov22ex 有品位,哈哈哈~~~我们可以做朋友了~~哈哈哈哈 |
7 panyuan520 2014-08-11 13:37:03 +08:00 偶猜啊,scrapy负责抓取,redis负责做bloomfilter, mongo存储, nodejs干撒喔 |
![]() | 8 imaygou OP ![]() @panyuan520 咦~~不错噢~~~亲在哪里吖?欢迎自荐或者推荐合适的朋友过来吖~~~ |
![]() | 9 gjflsl 2014-08-11 14:14:36 +08:00 要是在上海就好了。 |
![]() | 10 mcwanderer 2014-08-11 14:16:40 +08:00 要在南京就好了,哈哈 |
11 panyuan520 2014-08-11 14:49:00 +08:00 @imaygou 我们可以聊聊呗,我也在弄一个爬虫,redis做队列和bloomfilter,我也在深圳 |
![]() | 12 RangerWolf 2014-08-11 15:08:18 +08:00 能远程吗? |
13 zaishanfeng2014 2014-08-11 15:18:13 +08:00 待遇呢? |
![]() | 14 imaygou OP @panyuan520 可以啊!!有没有兴趣跳槽 把简历发到邮箱[email protected] 我们私下详聊哈! |
![]() | 15 mushan 2014-08-11 15:40:50 +08:00 ![]() 要是在上海就好了 |
![]() | 16 imaygou OP @zaishanfeng2014 待遇从优 主要看你个人背景和经验,还有和我们的匹配度 可以发简历过来看看 邮件联系哈 |
![]() | 17 imaygou OP @RangerWolf 搜里啦 远程没有办法 还是希望大家聚在一起做哈! |
![]() | 18 zsz 2014-08-11 15:45:50 +08:00 @panyuan520 用nodejs和phantomjs抓取渲染之后的页面,对于使用js做前端计算的网站抓取最终结果。 我是这么用的,猜想他们应该也是。。。。 |
22 panyuan520 2014-08-11 16:26:46 +08:00 @zsz 喔喔,明白了、谢谢~ |
23 lkk2003rty 2014-08-12 10:46:23 +08:00 @zsz 抓取渲染之后的页面 phantomjs 就能搞 这里 node 肿么用捏? |
![]() | 24 mashihua 2014-08-12 11:36:27 +08:00 phantomjs的web server有10个并发限制,还不太适合在产品环境。如果console出来数据的话,每次起个进程的话开销很大。小规模用用倒可以,大规模呵呵。 |
![]() | 25 zsz 2014-08-12 12:34:18 +08:00 @lkk2003rty 我在项目中只用了phantomjs,不知道他们在项目中怎么使用node。 |
26 lkk2003rty 2014-08-12 13:42:01 +08:00 @zsz 我也是只用了 phantomjs.赶脚 node 有点和这个不搭界,但我猜可能用 node 做调度啥的吧。 |
![]() | 27 mushan 2014-08-12 14:37:48 +08:00 phantomjs抓取数据,node处理数据并做存储 |
32 veyron 2014-09-24 20:13:18 +08:00 java可以吗?哈哈。 |