发表于
2019-06-06 00:00:00
socks5 协议详解
《socks5 协议详解》`socks5` 是一个简单的代理协议，这里是 [RFC](https://tools.ietf.org/html/rfc1928)。...
...继续阅读
(43)
发表于
2019-05-18 00:00:00
Python Requests 简明教程
《Python Requests 简明教程》[requests](https://2.python-requests.org/en/master/) 是Python中一个非常出名的库，它极大的简化了Python中进行HTTP请求的流程，我们来看一个简单的例子...
...继续阅读
(42)
发表于
2019-05-15 07:45:00
npm 备忘录
常用命令1$ npm init / install / uninstall / update12$ npm ls$ npm list -g --depth 012npm configsetproxy xxx.comnpm config list1234$ npm outdatedPackage Current Wanted Latest Location@commitlint/cli 7.1.1 7.5.2 7.5.2test@commitlint/config-angular 7.1.1 7.5.0 7.5.0test1234567891011121314151617$ npm view @test/test-util@test/test-util@0.3.101 | ISC | deps: none | versions: 242dist.tarball http://rnpm.hz.netease.com/@test/test-util/download/@test/test-util-0.3.101.tgz.shasum: a10f3595eb4cbbdd
...继续阅读
(18)
发表于
2019-05-04 12:06:22
Spark Rdd DataFrame操作汇总
直接上测试代码：
import org.apache.spark.SparkConf
import org.apache.spark.sql.SparkSession
import org.apache.spark.sql.functions.{udf, _}
import org.junit.{Assert, Test}
import org.apache.spark.sql.types._...
...继续阅读
(10)
发表于
2019-03-28 13:00:50
Flink Could Not Resolve Resourcemanager Address
什么是Flink。 Apache Flink® - Stateful Computations over Data Streams Flink安装参考(官方文档)[https://ci.apache.org/projects/f
...继续阅读
(42)
发表于
2019-02-24 14:06:55
发表于
2019-02-14 15:32:32
Class org.datanucleus.api.jdo.JDOPersistenceManagerFactory was not found
Class org.datanucleus.api.jdo.JDOPersistenceManagerFactory was not foundClass org.datanucleus.api.jdo.JDOPersistenceManagerFactory was not found1. 思路第一步2. 新问题及解决
Class org.datanucleus.api.jdo.JDOPersi...
...继续阅读
(51)
发表于
2019-02-12 03:44:00
spring 官方下载地址（Spring Framework 3.2.x&Spring Framework 4.0.x）
spring 官方下载地址（Spring Framework 3.2.x&Spring; Framework 4.0.x）2017年02月24日 15:53:59SPRING官方网站改版后，建议都是通过 Maven和Gradle下载，对不使用Maven和Gradle开发项目的，下载就非常麻烦，下给出Spring Framework jar官方直接下载路径:http://repo.spring.io/libs-release-local/org/springframework/spring/ spring 4.0.x(Spring Framework 4.0.5)下载http://repo.spring.io/libs-release-local/org/springframework/spring/4.0.5.RELEASE/spring-framework-4.0.5.RELEASE-dist.zip spring 3.2.x（Spring Framework 3.2.9）下载：http://repo.spring.io/libs-release-local/org/springframework/spring/3.2.9.RELEASE/spring-framework-3.2.9.RELEASE-dist.zip spring 3.2.x（Spring Framework
...继续阅读
(20)
发表于
2018-09-10 14:50:58
Disable IBus embed preedit text via dbus-send
dbus-send --bus="`ibus address`" --print-reply \
--dest=org.freedesktop.IBus \
/org/freedesktop/IBus \
org.freedesktop.DBus.Properties.Set \
string:org.freedesktop.IBus string:EmbedPreeditText variant:boolean:falseOver!
...继续阅读
(22)
发表于
2018-09-05 13:18:15
Nginx 反向代理缓存静态文件
给几个小站自建个 CDN 缓存，提速下网站。。。https://www.cnblogs.com/walls/p/9017821.htmlhttps://blog.csdn.net/dengjiexian123/article/details/53386586http://www.jackieathome.net/archives/411.htmlhttp://nginx.org/en/docs/http/ngx_http_proxy_module.html#example
...继续阅读
(7)
发表于
2018-09-03 19:10:27
HTTPie 官方文档中文翻译版
§主要功能特性安装macOSLinuxWindows 及其它开发版Python 版本使用例子HTTP 方法请求 URLQuerystring 参数localhost 的 URL 缩写自定义默认的方案请求项字符转义规则JSON默认行为明确的 JSON非字符串的 JSON 域表单普通的表单文件上传表单HTTP 头默认的请求头空头和重新设置默认头授权验证Basic 授权Digest 授权密码提示.netrc授权插件HTTP 重定向按 header 头中的 location 字段值跳转显示中间的跳转响应限制重定向最大次数代理环境变量SocksHTTPS服务器 SSL 证书验证自定义 CA 包客户端 SSL 证书SSL 版本服务器名称指示SNI(Server Name Indication)输出参数哪部分的 HTTP 请求内容应该打印出来查看中间的请求/响应条件化的 body 内容下载重定向输入从一个文件中取请求数据命令行输出颜色和格式化二进制数据重定向输出下载模式下载文件的文件名下载的同时 piping恢复下载其它注意事项流式响应禁用缓冲示例会话具名会话匿名会话只读会话配置配置文件路径可配置的参数取消之前指定的参数脚本最佳实践元信息接口设计用户支持相关项目依赖HTTPie 的朋友贡献变更日志插图许可证作者HTTPie 是一个命令行 HTTP 客户端。目标是让 CLI 与 Web servi
...继续阅读
(8)
发表于
2018-06-01 08:36:00
LNMP一键安装包 V1.5 正式版
LNMP 1.5正式版一如既往的6.1发布了，提前祝儿童节快乐。1.5版本主要新增加PHP7.2支持、增加Maria DB 10.2、增加无人值守安装、增加多核编译安装、替换问题较多的certbot使用acme.sh不需要过多的依赖生成SSL更丝滑、支持生成泛域名SSL证书、lnmp管理脚本增加pathinfo选项、lnmp.conf中增加PHP模块fileinfo安装选项和Nginx lua模块安装选项、增加一些常用伪静态、Apache 2.4支持到http2、Nginx默认支持stream等功能，增加了一些特殊环境下的适应patch，等等就不一一列举了，可以看lnmp更新记录。LNMP安装教程：https://lnmp.org/install.html问题反馈及使用交流论坛：https://bbs.vpser.net/forum-25-1.htmlmore免费泛域名SSL证书生成教程：https://lnmp.org/faq/letsencrypt-wildcard-ssl.html无人值守安装说明：https://lnmp.org/faq/v1-5-auto-install.html打赏捐赠：https://lnmp.org/donation.htmlVPS推荐：https://www.vpser.net/ten-dollars-vps关于升级到当前版本低版本的因为涉及到很多
...继续阅读
(53)
发表于
2018-03-29 00:00:00
goroutine 切换的时候发生了什么？
《goroutine 切换的时候发生了什么？》## Goroutine怎么主动让出权力？https://golang.org/pkg/runtime/#Gosched...
...继续阅读
(40)
发表于
2017-10-18 00:00:00
Web开发系列(八)：单点故障，负载均衡
《Web开发系列(八)：单点故障，负载均衡》试想我们有一个内容服务器，假设是监听在 `192.168.1.1:8000` 上，我们所有的请求都打到这上面，那么这个进程或者机器挂了怎么办？因此有一个新的概念，叫做 [单点故障](https://en.wikipedia.org/wiki/Single_point_of_failure)。即，只要我们这唯一的，仅有的...
...继续阅读
(34)
发表于
2017-10-07 17:19:27
macOS Sierra 开发环境配置指南
发表于
2017-09-01 00:00:00
没有银弹
维基：https://zh.wikipedia.org/wiki/没有银弹文献：Brooks, F. P.，"No silver bullet—essence and accidents of software engineering, " in Information Processing 86, H. J. Kugler, ed. Amsterdam: Elsevier Science (North Holland), 1986, pp. 1069-1076.结论：不会有任何单一的软件工程上的突破（银弹），能够让程序设计的生产力得到一个数量级的提升。「人月神话」维基：https://zh.wikipedia.org/wiki/人月神话豆瓣：https://book.douban.com/subject/1102259/结论：人力和时间并不呈现线性关系。以大量人员和较短的时间，并不能缩短软件的开发进度。公式：沟通管道数量（n 为一个项目团队中的人数，显然，人数越多，沟通成本越大）：p = n(n-1)/2Brooks 法则：Adding manpower to a late software project makes it later.组织：提倡类似外科手术团队的组织。在接受相同的训练、同样都是两年资历的情况下，优秀专业程序员的生产力要比差劲的程序员好上十倍。系统设计的民主与专
...继续阅读
(29)
发表于
2017-08-26 00:00:00
墨尔本之行 (Trip to Melbourne)
从下了飞机到酒店，一路上体验到了我国互联网对世界各地的影响，机场巴士可以用微信和支付宝，下了巴士发现这里也有共享单车，人家还配了头盔。晚上雅拉河还是很漂亮的，天气略凉，空气不错，淡淡的云，大冷天的人们也很愿意在外面吃饭。谈到澳大利亚，最熟知的两种动物就是精壮的袋鼠和呆萌的考拉，晚上吃饭看了菜单发现居然有袋鼠肉，味道还是很不错的，没什么奇怪的味道。后来得知，在澳洲袋鼠的数量算得上略微的泛滥，所以法律是允许吃袋鼠的，如果你在路上开车不幸撞上了一只袋鼠，那么请快速的结束他的生命就好，免得痛苦，但如果你撞了一只考拉，那好吧，估计你出不去澳大利亚了……当然，本次旅程最重要的还是 IJCAI 大会，让我这个半路出家搞 AI 的人感触最多的是：未知的还有很多，要学的也还有很多。这次大会期间也再次发表了呼吁禁止自主武器的公开信，我认为有时候我们更多的关注了 AI 技术的层面，而忽略了很多其他的事情，例如伦理和道德。例如现在医学图像识别技术在一定范围内已经超越了人类，那么是否我们就可以让机器直接做决定呢，如果出了问题，将如何处理，所以这个边界到底在哪里也是值的我们仔细思考的。这边的冬天是多雨的，来的时候推算这边应该是早春，没带太厚的衣服，和当地人聊到天气，我说现在是 Early spring 怎么怎么的，结果对方说 No, No, No, still winter。尽管天
...继续阅读
(37)
发表于
2017-06-03 13:05:27
SpringMVC配置太多？试试SpringBoot
SpringMVC相信大家已经不再陌生了，大家可能对于Spring的各种XML配置已经产生了厌恶的感觉，Spring官方发布的Springboot 已经很长时间了，Springboot是一款“约定优于配置”的轻量级框架；Springboot首先解决的就是各种繁琐的XML配置，你可以不用任何XML配置，进行web服务的搭建，其次是Springboot本身就继承了web服务器，如果说前端开发人员想在本地启动后端服务不需要进行各种配置，几乎可以做到一键启动。再有就是目前大热的微服务，而Springboot恰恰满足了快速开发微服务的开发场景；对于目前主流的框架Spring+MyBatis+redis的集成，好吧直接看代码...以下代码是整个开发框架集成完之后的，关于Spring官方那一套如何编写启动类，如何配置端口这些随便google一大把的我就不再本文说明了。下面的代码，mybatis mapper我就不贴了，平常怎么写现在也一样，还有redis存数据取数据什么的。本文给的都是划的重点啊！1.数据源以及其他的配置文件（PS：说好了不配置，怎么刚开始就上配置？ 答：不配置也可以，如果你想把数据源硬编码写死的话。^_^）下面给的是YML的配置文件方式，YML被各种主流的开发语言所支持，相当于常见的.properties文件。jedis :
pool :
host : 127.
...继续阅读
(29)
发表于
2017-05-31 02:20:31
node v8.0.0 发布了
可以进入官网https://nodejs.org/en/下载，或者使用nvmnvm install v8.0.0相关的 ES语法支持 可以在node.green查看
...继续阅读
(13)
发表于
2017-05-30 02:07:45
Malwaresearch：在Openmalware.org上查找恶意软件的命令行工具
发表于
2017-05-27 17:02:45
佐仔志考虑更换域名啦…
从自把gsky.org收入囊中后就想把它做为佐仔志的新域名，但一直都没有行动起来。今天终于忍不住把gsky.org域名解释到佐仔志上，只差最后一步：把所有链接换成新域名。这一步也就是一条执行命令而已，但我犹豫了。之所以犹豫并不是gsky.org这个域名不好，而是旧域名使用多年一时舍不得更换，更重要的是旧域名可是本人名字的拼音加123，也算有一些意义吧。同时更换域名又要做301定向和通知更换友好链接网址，唉，懒症又犯了。如果gsky.org后辍是.com多好呀，我想多了，哈哈。先忍忍吧，现在新旧域名都可以访问佐仔志。gsky.org现在使用免费的Let’s Encrypt SSL证书，脚本三个月更新一次。在布署过程当中发现OneinStack一键安装包实在是太方便太好用了，于是干脆把旧的域名也更换成免费的Let’s Encrypt SSL证书，省去一年几美元的费用。我知道一个博名两个域名不好，影响SEO，但人总是念旧呀。gsky.org你觉得如何？如果你觉得好就留言推我一把。
...继续阅读
(17)
发表于
2017-05-23 21:13:02
spring-cloud eureka server 的发现客户端与注册例子
发表于
2017-05-22 22:27:26
如何构建一个分布式爬虫：基础篇
发表于
2017-05-22 16:01:19
log4j 日志信息的引入（通用版）—— 解决项目运行过程中的日志信息
定义log4j是Apache的一个开放源代码项目，通过使用Log4j，我们可以控制日志信息输送的目的地是控制台、文件、GUI组件，甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等；我们也可以控制每一条日志的输出格式；通过定义每一条日志信息的级别，我们能够更加细致地控制日志的生成过程。最令人感兴趣的就是，这些可以通过一个配置文件来灵活地进行配置，而不需要修改应用的代码。一、log4j.properties 的使用详解1.输出级别的种类ERROR、WARN、INFO、DEBUG
ERROR 为严重错误 主要是程序的错误
WARN 为一般警告，比如session丢失
INFO 为一般要显示的信息，比如登录登出
DEBUG 为程序的调试信息2.配置日志信息输出目的地log4j.appender.appenderName = fully.qualified.name.of.appender.class
1.org.apache.log4j.ConsoleAppender（控制台）
2.org.apache.log4j.FileAppender（文件）
3.org.apache.log4j.DailyRollingFileAppender（每天产生一个日志文件）
4.org.apache.log4j.RollingFileAppender（文件大小到达指定尺寸的时候产生一
...继续阅读
(34)
发表于
2017-05-22 11:50:30
[备忘]新主机Python部署环境初始化清单
openresty官网:https://openresty.org/cn/linux-packages.htmlvim /etc/yum.repos.d/OpenResty.repo:[openresty]
name=Official OpenResty Repository
baseurl=https://copr-be.cloud.fedoraproject.org/results/openresty/openresty/epel-$releasever-$basearch/
skip_if_unavailable=True
gpgcheck=1
gpgkey=https://copr-be.cloud.fedoraproject.org/results/openresty/openresty/pubkey.gpg
enabled=1
enabled_metadata=1yum install openrestyVim插件管理工具: https://github.com/VundleVim/Vundle.vimMySQL:yum install mariadb-server mariadb -yyum install mysql-develsystemctl enable mariadbvim /etc/my.conf:[mysqld]
# 省略其他，增加下面一行配置
cha
...继续阅读
(47)
发表于
2017-05-21 16:01:43
log4j2 不使用配置文件，动态生成 logger 对象
发表于
2017-05-20 10:23:21
spring boot与kafka集成
发表于
2017-05-19 00:00:00