This topic created in 2225 days ago, the information mentioned may be changed or developed.
算了下如果按 1 核 2G 算大概能够 10 台 1 年的。如果降配会多几台，升配会少几台，如果是竞价实例会更多。
我主要用 python，想做爬虫，但是爬什么呢？
另外请教下，怎么方便得管理这 10 台服务器？比如本地修改程序后自动部署到这 10 台上，爬完后把数据汇总再下载到本地，如果大神们能推荐合适的轮子就不用自己再去造了。
我主要用 python，想做爬虫，但是爬什么呢？
另外请教下，怎么方便得管理这 10 台服务器？比如本地修改程序后自动部署到这 10 台上，爬完后把数据汇总再下载到本地，如果大神们能推荐合适的轮子就不用自己再去造了。
 | 1 darylc Mar 27, 2020 学习 k8s 啊，好机会！ |
 | 2 PhyllisLin Mar 27, 2020  1 hadoop 集群 |
 | 3 lshero Mar 27, 2020 via Android 当然是挂探针 |
 | 4 xpresslink Mar 27, 2020 挖矿 |
 | 5 fengyj Mar 27, 2020 挖坑，探针，吃灰... |
 | 6 keepeye Mar 27, 2020 我野路子，本地生成 pyc，然后打压缩包放到 oss 上，通过 pssh 批量控制服务器下载压缩包、解压缩、重启服务。大概几百台服务器就是这么管理的 |
 | 7 AllenBigBear Mar 27, 2020 想问下。。。为啥会买这么多服务器。。。 |
 | 8 levelworm Mar 27, 2020 via Android 出租服务器让别人比如学 spark 这种。。。 |
 | 9 Ultraman Mar 27, 2020 via Android 给个 ssh 我义务帮你管理一台吧 |
 | 10 majiaxin110 Mar 27, 2020 部署可以了解下 CI/CD，可以用一些工具比如 teamcity |
 | 11 vus520 Mar 27, 2020 批量管理机器用 salt 啊，或者 k8s |
 | 12 locoz Mar 27, 2020 k8s 玩起来啊 |
 | 13 mumbler Mar 27, 2020 via Android 有很多学生买不起服务器，你可以把服务器分割足够小且可用，免费给学生申请 |
 | 14 superrichman Mar 27, 2020 via iPhone 你需要的是 scrapy-redis，不过可能性能过剩了 |
 | 15 timothyye Mar 28, 2020  算了一下，我还有一台没加入监控，我也有 10 台…… |
 | 17 kaiki Mar 28, 2020 1 10 台相互发包并处理，直到其中 9 台瘫痪，剩下一台作为胜利者？ |
 | 22 miscnote Mar 28, 2020 搭建个 dns 集群呗，做个 dns hosting 接口，有人用你就有收入了。类似于 dnsimple.com 。 |
 | 23 Kirscheis Mar 28, 2020 via Android 当然是开 mc 服务器然后叫朋友来玩 |
 | 24 OllyDebug Mar 28, 2020 挖矿 |
| 26 locoz Mar 28, 2020 via Android #25 干净 -> 感觉 |
 | 27 Cyen Mar 28, 2020 via iPhone 兄台能否借我一台 |
 | 29 star7th Mar 28, 2020 我也花过一段时间折腾过服务器，最后发现，如果用来做项目，拿这些服务器来根本没啥可干。服务器都只是项目的载体，自身没有足够大的项目再去扩容机器的话，就是浪费资源。 |
 | 30 LudwigWS Mar 28, 2020 忽然想起来我在私有云，有数不清的虚拟机可以创建，另外还有三台裸机……我是不是该利用上 |
| 31 star7th Mar 28, 2020 我也花过一段时间折腾过服务器，最后发现，如果不是用来做项目，拿这些服务器来根本没啥可干。服务器都只是项目的载体，自身没有足够大的项目再去扩容机器的话，就是浪费资源。 |
| 32 star7th Mar 28, 2020 企图先扩容服务器再把项目做大是本末倒置的。是先有大项目，然后才需要服务器。而不是服务器扩容了，再去找项目（通常这个时候发现没啥好项目）） |
 | 33 opengps Mar 28, 2020 via Android 我因为业务原因也总是屯着一些闲置低配机器，食之无味，弃之可惜 |
 | 36 celeron533 Mar 28, 2020 开 minecraft 服务器供群友玩耍 |
 | 38 zyq2280539 Mar 28, 2020 如果自己业务没有需求的话，1.建议闲置机器跑点自己小项目 2，可以分享出来供大家做内网穿透使用，毕竟现在很多没有公网 ip 又想需要公网环境的还是挺多的，比如我之前也发过帖子求一个 zerotier 的国内 moon 节点。嘿嘿 3.可以拉一个讨论群集中大家的力量一起来做点啥项目 |
 | 39 dbskcnc Mar 28, 2020 要是用过 gitlab,每台安装个 gitlab-runner,用 gitlab ci 管理也很方便 |
 | 40 xzwc Mar 28, 2020 挖矿 |
 | 43 tojonozomi Mar 28, 2020 我有台 8 核 16G 的云服务器，真就开了 mc 给群友玩。 （然后就没有干正经事了）一直闲置着 orz |
 | 44 zro Mar 28, 2020 部署一个 ADGuard Home? |
 | 45 xsen Mar 28, 2020 嗯。。目前也有三台闲置（ 4g 两台，1g 一台）。。。 |
 | 46 explorer123 OP ssh 给别人用的话他干啥我不可控，出事了就麻烦了，只考虑自用或者搭建一些服务提供给别人使用。 关于统一管理我想到的一个办法是让所有主机有一块共享硬盘，用 git 或 ssh 同步文件到这一个硬盘上。然后用程序一台台自动登录机器(这个登录过程好像可以用 fabric 之类的 python 库)发送开始执行的指令，下载的文件也都下到共享盘上。 有点笨，不是很高效，重在好理解，期待大家提供更好的办法。 |
 | 47 Jiolt Mar 28, 2020 开挖 |
 | 49 winglight2016 Mar 28, 2020 开端口，弱密码，自然有黑客来告诉你可以做什么。。。 |
 | 51 OneMan Mar 28, 2020 拿着锤锤找钉钉呢 |
 | 52 cnzjl Mar 28, 2020 我囤了 4 台学生机,两台特价鸡,想找点好项目,但是没有..... |
 | 53 lixonxp Mar 28, 2020 搞云计算 大数据 深度学习啊， 10 台少了点， 最好再买 10 台 |
 | 54 firejoke Mar 28, 2020 @explorer123 #46 统一部署和管理可以用 ansible, 也是 python 库, 和 fabric 一样基于 ssh |
 | 57 sunny920 Apr 23, 2020 比如建博客，建个人网站等，拥有一台服务器很简单,国内云服务器厂家也有很多，但是服务器也需要经常运维，比如说它的 cpu，内存，网速等都需要定期查看修改增加，不然一旦当你服务器内容存储量或者访客量过多时你的网站将无法正常打开，在这里我推荐你可以试用服务器管理面板来进行运维，比如说云帮手，它可以帮你做到： 1.批量管理多台云主机； 2.兼容性强大，兼容市面基本所有的云商云主机，兼容操作系统； 3.操作简单，可视化界面预览资源、一键修复、一键部署； 4. 可以远程登录云主机 FTP 桌面，处理云主机上的文件； 5.监控和，资源还有告警功能，这个是挺好的，不用盯着看； 6.系统修复功能，这个是挺实用也比较必须的； 7.免费使用。总得来说功能还是挺全的，不存在需要又要另外找软件的尴尬，一个云帮手软件基本满足了所有需求。 |
 | 58 11ssss Apr 24, 2020 才疏学浅 探针是个什么东西 |
| 60 lshero Apr 8, 2022 @b1tz hostloc 的一个梗 ，就是一堆人买了 vps 吃灰，然后挂上 php 探针查看一下机器的性能和环境配置，http://www.liuzhanwu.com/4322.html |
Select Language