scrapy爬虫教程摘要（二）——反爬攻防
前言 数据爬取的工作往往是一个灰色地带，即使爬取的是公开的数据，也有可能被禁。那就需要一些攻防技巧。但是，也有 …
程序猿的东西
scrapy爬虫教程摘要（一）——基本流程
简介 scrapy是一个基于python的爬虫框架，提供了一套比较完整的爬虫解决方案，包括模拟cookie，r …
jumpserver堡垒机搭建和授权
堡垒机简述 堡垒机是一个服务器授权和管理的不错的方案，虽然有种种缺点，但是对小团队来说依然是不错的方案。 引入 …
Linux扩展权限控制ACL
Linux基本都权限控制一定不陌生，每个文件/文件夹基于 user group other 三种用户身份分别具 …
chmod的第四位数
前几天看到一个命令是chmod 2770 /srv/projecta，十分不解。我们知道chmod三位数分别表 …
Linux用户与组的基本管理
用户和组的基本概念 默认情况下一个用户会拥有一个同名的私有组，比如我们用ls -l 时候会经常看到某个文件所属 …
利用nginx反向代理拷贝网站
需求 源自一个比较奇特的需求，需要把原来的网站换个域名展示，比如用B域名显示A域名下的内容。但是B域名不能与A …
深度优先搜索DFS的非递归算法——PHP实现
概念 深度优先搜索算法（英语：Depth-First-Search，DFS）是一种用于遍历或搜索树或图的算法。 …
负载均衡、hosts和服务端渲染发生的不良反应
为了更简单的部署https，我们将https开通在了负载均衡上，负载均衡统一转发到80端口。 为了节省一丢丢网 …
纪念侦破服务器负载悬案
近来服务器一直会有一些突发的负载高峰，而且还很有规律性，每十分钟一个高峰，同时可以看到TCP连接数和网络也会迎 …
MySQL查询导出到csv
问题 这其实是个常用技能，大部分GUI工具都提供了一些相关的操作，但是由于我用的都是基于WEB的管理工具，对结 …
Elasticsearch参数search_type与分布式原理
要不是遇到这个坑我不会去了解这个参数。 ——《论通读文档的重要性》 问题 起因是搜索结果排序的时候遇到一个奇怪 …
阿里云MaxCompute实操记录之导入数据
MaxCompute有一套自己的导数据脚本格式，不过对于新手只要打开数据集成就可以看到创建引导。新手建议使用向 …
Laravel实操记录之chunk
chunk在计算机行业通常表示数据块。数据库查询下也有一个chunk方法，依据函数式编程思想设计。第一个参数是 …
MIUI无法安装证书问题
小米手机使用Charles抓https需要联机下载证书，但是MIUI下载安装一直出错，看到过很多相同遭遇的人， …
TrustAsia证书在部分华为手机不可用
发现是没有DigiCert Global Root G2根证书，而且还有其他兼容性问题。在myssl.com的 …
Linux磁盘命令汇总
du -h –max-depth=1 ./ df df -i
brew安装php缺少mysql扩展的完美解决
注：本文写于2017年，该方法目前已经失效 前面会有一些废话，如果想直接处理问题请翻到“解决”。 废话 虽然说 …
elasticsearch 查询样例
聚合查询并设置返回的数据量，该语句查询在某话题下发图数量最多的前50人。 GET /images/_searc …
小程序探坑之设置自定义字体
小程序依靠微信OS为强大的后盾，加之可以跨越安卓iOS两大平台，为移动小应用开发提供了巨大的便捷。但是小程序毕 …