设置通过反向代理,实现多ip站群系统管理(站群连文件都不需要上传的那种)


昨天受到zero大神的指点,感觉有了思路 ( 其实主要是技术认知不行.... ) , 本来我在写这个镜像站的时候 最早的思路是这样:

用户访问站群(多ip多分布) → 镜像站带上域名参数,然后用requests请求主程序 → 主程序通过域名判断返回的内容和模板...

基本的思路,就和爬虫一样...自己镜像自己.....但是这个过程中,多使用了一次requests,感觉有点消耗资源...,Z大的建议是:

用户访问站群(多ip多分布) → apahce直接反向代理到主程序 → 主程序通过reques

......

点击阅读更多...

关于多相睡眠的优化方案,以及敏捷迭代的初步计划 ( OKR雏形 )


执行多相睡眠2天,小翻车一次,但是整体的睡眠时间应该都可以稳定的控制在3-4小时以内,最终目标是不超过3小时的睡眠时间,总导航帖子 : http://www.zhangte.org/sheng-wu-hai-ke/41.html

目前有以下几点发现:

1. 小睡的质量对状态的影响非常大

这个看似废话,但是实则意义非常大,因为平时大家对睡眠的影响应该不会有这么强的意识,主要的原因在于:一天的睡眠时间太长,这么长的时间里面,只要有一小段高质量的睡眠,都会感觉非常不错! , 而且,就算睡眠质量不好,影

......

点击阅读更多...

多相睡眠第二天记录,翻车了多睡了2小时,昨日全天睡眠128分钟


多相睡眠的第二天了,在第一天中只睡了40分钟,但是整体的状态不错,除了中途会有点难受,但是到凌晨4点-5点30的时候,精神就非常好...

但是今天就翻车了...昨天其实一切都很顺利,可以说几乎没有影响到正常的工作,反而效率更高..晚上回来以后的第一次小睡整个过程也算是正常...但是到第二个小睡的时候.... 闹钟响起...脑中居然冒出了一个念头:**要不再睡一个完整的周期吧(90分钟).... 然后一睡,就直接睡了2小时... 加上前面的20分钟,就一个晚上的睡眠时间直接赶超昨日...

其实如果

......

点击阅读更多...

66行的单文件django SEO镜像站群代码以及实现思路


有的人说Django很重...其实说这句话的人主要也是不会用Django才会这样说... 比如有人给你一把瑞士军刀....你当然可以只用来剪指甲... 下面这个代码,不足70行代码,就可以实现一个简单的镜像站功能... 非常灵活,非常方便...,直接把代码保存为main.py , 然后运行python main.py runserver 8000 ,连数据库都不用装!,模板也不需要 ( 全部是抄的... )

题外话

为什么突然想起这个功能...,因为有一个强大的思路: 目前在搞的一套站群程序,最

......

点击阅读更多...

模板调整上下篇文章摘要,侧边栏摘要显示


今天上午,把模板进行了一番调整,主要是把上下篇,侧边栏的摘要都显示出来...主要自己还不懂前端,所以干起来比较费劲.. 大致的效果如下 : 这是摘要...,css部分还要看下怎么处理比较好... -w722 在侧边栏的时候,显示了日期和摘要... ( 虽然有种说法,日期时间修改的越早越好... ),但是还是先这样显示出来了... -w377

同时今天把分布监控的部分给修复了一下,一个小BUG...

关于以后的站群的方向

今天突然发现一个灵感,统一后台如果可以最终只要加一下域名,选择一下模板,远程的什么东西自然就全部

......

点击阅读更多...

python几行代码实现本地远程sh脚本,自动操作,远程管理服务器


目前站群是用docker来管理,还没做成swarm的集群模式,所以每次更新代码以后较为繁琐..都要登录服务器去运行一个restart的脚本...,这种做法明显是在浪费时间,虽然操作起来也很快...

还好python有一个库,使用方式如下...

import fabric
path_web = '地址'
def docker_install():
    # 需要访问的host列表
    for host in ['127.0.0.1']:
        con
......

点击阅读更多...

站群冲刺完成接近2轮了,马上进入第三轮冲刺


从12月27号开始要开发站群,也算是不太全职在搞,但是总算接近尾声了... 尤其是这两天的冲刺..整了一堆的功能,但是还是有BUG...., 不过说实话,我还没做这玩意之前,真没想到自己还会web开发.... 目前总共算实现了什么功能? 除了这里提到的详细介绍,再大概总结一下吧:

  1. 全自动关键词,收录率监控,且是分布式的,稳定!
  2. 全站内链布局,未收录页面自动推荐
  3. 内容处理
    1. 根据百度NLP,自动提取摘要
    2. 根据C算法,以及分词的停用词去除,自动提取标题关键词作为tag
    3. 自动加相关图片,自动锚文本,自
......

点击阅读更多...

敏捷迭代到没思路是一种什么样的体验?


我个人是达尔文的进化论的观点的拥护者..我觉得一切成功的商业模式,或是系统,或是所谓的企业文化,都是在一直迭代的过程中产生的.而非直接从头设计到尾...然后跟着做...

为什么我会有这种观点?

我早期研究时间管理,任务管理,尝试各种工具,各种计划方法论,最后发现,你以为的其实真的不是你以为的!为什么? 因为我到目前为止制定的计划,从来没有一个计划是从头直接到做尾,每个计划都是在不断的迭代.. 甚至有的计划,开始执行的第一天,就要开始从新规划...

我曾经一度怀疑,我觉得是自己的拖延症的问题!,为

......

点击阅读更多...