这是一个创建于 2029 天前的主题，其中的信息可能已经有所发展或是发生改变。
算下如果按 1 核 2G 算大概能够 10 台 1 年的。如果降配会多几台，升配会少几台，如果是竞价实例会更多。
我主要用 python，想做爬虫，但是爬什么呢？
另外请教下，怎么方便得管理这 10 台服务器？比如本地修改程序后自动部署到这 10 台上，爬完后把数据汇总再下载到本地，如果大神们能推荐合适的轮子就不用自己再去造了。
我主要用 python，想做爬虫，但是爬什么呢？
另外请教下，怎么方便得管理这 10 台服务器？比如本地修改程序后自动部署到这 10 台上，爬完后把数据汇总再下载到本地，如果大神们能推荐合适的轮子就不用自己再去造了。
 | 1 susecjh 2020-03-27 21:14:48 +08:00 学习 k8s 啊，好机会！ |
 | 2 PhyllisLin 2020-03-27 22:25:06 +08:00  1 hadoop 集群 |
 | 3 lshero 2020-03-27 22:40:22 +08:00 via Android 当然是挂探针 |
 | 4 xpresslink 2020-03-27 22:41:51 +08:00 挖矿 |
 | 5 fengyj 2020-03-27 22:42:59 +08:00 挖坑，探针，吃灰... |
 | 6 keepeye 2020-03-27 22:44:13 +08:00 我野路子，本地生成 pyc，然后打压缩包放到 oss 上，通过 pssh 批量控制服务器下载压缩包、解压缩、重启服务。大概几百台服务器就是这么管理的 |
 | 7 AllenBigBear 2020-03-27 22:44:27 +08:00 想问下。。。为啥会买这么多服务器。。。 |
 | 8 levelworm 2020-03-27 22:54:51 +08:00 via Android 出租服务器让别人比如学 spark 这种。。。 |
 | 9 Ultraman 2020-03-27 23:04:11 +08:00 via Android 给个 ssh 我义务帮你管理一台吧 |
 | 10 majiaxin110 2020-03-27 23:19:49 +08:00 部署可以了解下 CI/CD，可以用一些工具比如 teamcity |
 | 11 vus520 2020-03-27 23:20:30 +08:00 批量管理机器用 salt 啊，或者 k8s |
 | 12 locoz 2020-03-27 23:27:51 +08:00 k8s 玩起来啊 |
 | 13 mumbler 2020-03-27 23:47:11 +08:00 via Android 有很多学生买不起服务器，你可以把服务器分割足够小且可用，免费给学生申请 |
 | 14 superrichman 2020-03-27 23:58:25 +08:00 via iPhone 你需要的是 scrapy-redis，不过可能性能过剩了 |
 | 15 timothyye 2020-03-28 00:44:49 +08:00 算了一下，我还有一台没加入监控，我也有 10 台…… |
 | 17 kaiki 2020-03-28 06:24:00 +08:00 1 10 台相互发包并处理，直到其中 9 台瘫痪，剩下一台作为胜利者？ |
 | 22 miscnote 2020-03-28 09:03:36 +08:00 搭建个 dns 集群呗，做个 dns hosting 接口，有人用你就有收入了。类似于 dnsimple.com 。 |
 | 23 Kirscheis 2020-03-28 09:04:10 +08:00 via Android 当然是开 mc 服务器然后叫朋友来玩 |
 | 24 OllyDebug 2020-03-28 09:09:21 +08:00 挖矿 |
| 26 locoz 2020-03-28 09:12:01 +08:00 via Android #25 干净 -> 感觉 |
 | 27 Cyen 2020-03-28 09:13:46 +08:00 via iPhone 兄台能否借我一台 |
 | 29 star7th 2020-03-28 09:51:30 +08:00 我也花过一段时间折腾过服务器，最后发现，如果用来做项目，拿这些服务器来根本没啥可干。服务器都只是项目的载体，自身没有足够大的项目再去扩容机器的话，就是浪费资源。 |
 | 30 LudwigWS 2020-03-28 09:51:54 +08:00 忽然想起来我在私有云，有数不清的虚拟机可以创建，另外还有三台裸机……我是不是该利用上 |
| 31 star7th 2020-03-28 09:51:57 +08:00 我也花过一段时间折腾过服务器，最后发现，如果不是用来做项目，拿这些服务器来根本没啥可干。服务器都只是项目的载体，自身没有足够大的项目再去扩容机器的话，就是浪费资源。 |
| 32 star7th 2020-03-28 09:53:30 +08:00 企图先扩容服务器再把项目做大是本末倒置的。是先有大项目，然后才需要服务器。而不是服务器扩容了，再去找项目（通常这个时候发现没啥好项目）） |
 | 33 opengps 2020-03-28 09:56:54 +08:00 via Android 我因为业务原因也总是屯着一些闲置低配机器，食之无味，弃之可惜 |
 | 36 celeron533 2020-03-28 10:14:33 +08:00 开 minecraft 服务器供群友玩耍 |
 | 38 zyq2280539 2020-03-28 11:03:45 +08:00 如果自己业务没有需求的话，1.建议闲置机器跑点自己小项目 2，可以分享出来供大家做内网穿透使用，毕竟现在很多没有公网 ip 又想需要公网环境的还是挺多的，比如我之前也发过帖子求一个 zerotier 的国内 moon 节点。嘿嘿 3.可以拉一个讨论群集中大家的力量一起来做点啥项目 |
 | 39 dbskcnc 2020-03-28 11:19:27 +08:00 要是用过 gitlab,每台安装个 gitlab-runner,用 gitlab ci 管理也很方便 |
 | 40 xzwc 2020-03-28 11:24:14 +08:00 挖矿 |
 | 43 tojonozomi 2020-03-28 12:00:50 +08:00 我有台 8 核 16G 的云服务器，真就开了 mc 给群友玩。 （然后就没有干正经事了）一直闲置着 orz |
 | 44 zro 2020-03-28 12:16:29 +08:00 部署一个 ADGuard Home? |
 | 45 xsen 2020-03-28 12:41:37 +08:00 嗯。。目前也有三台闲置（ 4g 两台，1g 一台）。。。 |
 | &nsp; 46 explorer123 OP ssh 给别人用的话他干啥我不可控，出事了就麻烦了，只考虑自用或者搭建一些服务提供给别人使用。 关于统一管理我想到的一个办法是让所有主机有一块共享硬盘，用 git 或 ssh 同步文件到这一个硬盘上。然后用程序一台台自动登录机器(这个登录过程好像可以用 fabric 之类的 python 库)发送开始执行的指令，下载的文件也都下到共享盘上。 有点笨，不是很高效，重在好理解，期待大家提供更好的办法。 |
 | 47 Jiolt 2020-03-28 13:17:54 +08:00 开挖 |
 | 49 winglight2016 2020-03-28 14:20:25 +08:00 开端口，弱密码，自然有黑客来告诉你可以做什么。。。 |
 | 51 OneMan 2020-03-28 14:38:21 +08:00 拿着锤锤找钉钉呢 |
 | 52 cnzjl 2020-03-28 15:30:09 +08:00 我囤了 4 台学生机,两台特价鸡,想找点好项目,但是没有..... |
 | 53 lixonxp 2020-03-28 17:00:50 +08:00 搞云计算 大数据 深度学习啊， 10 台少了点， 最好再买 10 台 |
 | 54 firejoke 2020-03-28 19:15:53 +08:00 @explorer123 #46 统一部署和管理可以用 ansible, 也是 python 库, 和 fabric 一样基于 ssh |
 | 57 sunny920 2020-04-23 17:12:45 +08:00 比如建博客，建个人网站等，拥有一台服务器很简单,国内云服务器厂家也有很多，但是服务器也需要经常运维，比如说它的 cpu，内存，网速等都需要定期查看修改增加，不然一旦当你服务器内容存储量或者访客量过多时你的网站将无法正常打开，在这里我推荐你可以试用服务器管理面板来进行运维，比如说云帮手，它可以帮你做到： 1.批量管理多台云主机； 2.兼容性强大，兼容市面基本所有的云商云主机，兼容操作系统； 3.操作简单，可视化界面预览资源、一键修复、一键部署； 4. 可以远程登录云主机 FTP 桌面，处理云主机上的文件； 5.监控和，资源还有告警功能，这个是挺好的，不用盯着看； 6.系统修复功能，这个是挺实用也比较必须的； 7.免费使用。总得来说功能还是挺全的，不存在需要又要另外找软件的尴尬，一个云帮手软件基本满足了所有需求。 |
 | 58 11ssss 2020-04-24 04:35:39 +08:00 才疏学浅 探针是个什么东西 |
| 60 lshero 2022-04-08 20:01:54 +08:00 @b1tz hostloc 的一个梗 ，就是一堆人买了 vps 吃灰，然后挂上 php 探针查看一下机器的性能和环境配置，http://www.liuzhanwu.com/4322.html |
Select Language