一月技术随笔

一月份折腾了点东西,挖了点坑记录一下。

Celery

这个框架很有意思,是一个不错的 Python 分布式解决方案。 说到 Python,我又想起了是不是该往 Python 3 上面迁移了? 因为今天又看到了 Scrapy 支持 Python 3 了。

Douyu

直播平台的真实人数一直是一个谜,一个人的直播动辄就一百来万人,实在是有点不可思议。所以我打算抓取弹幕并对其进行分析。从1月27日开始,专注于英雄联盟这一款游戏,每天大概采集七八个小时,到今天已经采集了接近一百五十万条数据了,但是数据的大小只有一百兆左右。其实数据大小小也有好处,分析处理起来方便。 主要打算分析一下这些数据里面发言最多的人,然后再统计一下发言的质量,是不是纯数字之类的,或者是一些有意思的词或者梗……

VPS

这几天折腾了不少开源的 Shadowsocks 前端面板,moeSS 和 ss-panel 都试过了,前者部署成功,后者还有点问题。后端的 ss-bash 和 shadowsocks-manyuser 都测试过了,没有问题。 初步的打是更新一个 ss-bash 的英文版本,因为国外的虚拟主机服务商一般都不会预先安装好中文环境,所以每新布置一个节点,都得进行一次安装,而且对于不同发型版本的系统,安装中文环境的方式方法也不一样,所以还是 Fork 一个自己改一下吧,最后看看主干上作者愿意合并否,详见:ss-bash-en 打算弄一个好一点的 VPS 做 Web 服务器,然后其他节点的话,可以都用便宜一点的,然后可以再试试看很多分布式的运维框架。

一些其他的折腾

Mac 上入了两个软件 Quiver 和 MWeb,强烈推荐。