工作将近三年了，然而自己并没有成为当初自己希望的那个样子，只是因为期间经历的事情并不是自己之前可以预期的。经过几年的工作，也渐渐明白了为什么中国的开发人员年纪大了之后都不写代码，而是去转管理，而一旦转不了管理就会变得忧心忡忡。今天发了一条状态：“dota里有句话说的很好，没有输出环境，在牛逼的核也是白搭“。结合当下的工作环境以及之前几年的工作感想，发现这句话在很大程度上表达了技术人员的痛。自己的工作经历也算和大部分人有些不一样，从实习开始，加入当时一家火的一塌糊涂的C轮公司，跟着一个部分从零开始建设基础服务和设施，同时参与研发了世界范围内都少有的百万并发级别的服务，三年后这家公司的市值翻了10倍以上，而我却徘徊在离职的边缘，第一次经历了公司成长过程中的动荡和迷茫。因为在这个时候，技术和能力是次要的，你所在部门的业务是否核心是关键，你所在的团队是否在上升是关键。而悲剧的是我所在的部门并不是做核心业务的，说的直白点，仅仅是卖东西的。我所在的团队属于系统架构团队，说白了和业务没有直接关系。而且leader也是偏向于体验生活类型的，并没有太大的追求。其实曾经，我觉得这些都不是问题，我觉得用技术把事情做好就可以了，但是后来不得不逼迫我去面对这些问题，因为你会发现你做的事情没有被关注，你要做更深入的时候需要更多的资源却没有办法拿到。这个时候你才会发现这一切都是你需要面临的问题。离职之前我想了很 ...继续阅读 (20)

在使用Python进行Web开发的时候，早晚会碰到字符编码的问题，这里以一种比较通俗的方式深入讲解一下字符编码的原理。为什么需要编码这个问题比较简单，最直接的回答就是：因为计算机内部只能表示0或者1，再底层一点讲，就是电路的开与关。但是实际应用中，人类对信息的编码是采用文字和符号这种方式。因此，我们需要把0和1映射到人类日常需要的文字和符号，我们也把这种映射关系称作编码方式。都有哪些编码方式ASCII，UTF-8，GB2312，这些都是字符编码。对于程序员而言，比较关心的还是ASCII和UTF-8。先说说ASCII编码，ASCII采用一个字节进行编码的方式，首位是0，也就是说一共可以保存2的7次方，128种不同的符号。这个编码方式对于英文及其常用符号地区是够用了。但是随着发展，其它国家也要给自己的文字和符号进行编码。比如中国，就要给汉字进行编码。然而如果每个国家都给自己的文字和符号进行一次编码。那么最后就会变的无法管理，可能同一个二进制子节，在不同的地方出现不同的编码方式。随着互联网的发展，世界范围内的信息交流和沟通变的更加频繁。于是出现Unicode字符编码，这种编码出现的目的就是为了形成世界范围内通用的编码。这里说下Unicode的编码形式：Unicode最开始采用两个字节进行编码，也就是说最大能容忍的编码个数为2的16次方，65536个。这个数字基本上可以满足全世界的字符编码 ...继续阅读 (22)

再过几天就是2016年了，我总是很少会写总结，记得上次写总结的时候是2012年，那一年于我而言真的是发生了很多事情。2015年，第一次跳槽了，离开了自己待了将近3年的公司，离开并不是冲动，已经在心里怨念许久，有那么多的不好，技术上的，管理上的，个人发展上的都有。但是我自己心里清楚，这毕竟是自己的第一家公司，从2012年实习开始，那时我大三刚结束。在哈尔滨闭塞的环境下，第一次来到北京这个互联网高度发展的城市，在小米当时的办公地点，卷石天地，用着ubuntu系统，敲着自己的代码。住的地方则是清华西门那暗无天日的小黑屋。那时的小米，一个活脱脱的创业公司，NodeJS，Lua，MongoDB，Redis。各项新技术。那些在学校里只能自己玩的技术都可以用在真正的产品上。那时，虽然在技术上没有学到太多的新的东西，但是不少互联网公司专用的名词熟悉了不少，那个时候对自己说，如果去不了南方，就留在小米了。等到后来，经历了一个公司部门人员从几十人到成百上千人的增长。发现很多自己原先想象的事情已经不再美好。在这个过程中，我也体会到了一个公司在发展壮大的过程中，所经历的病痛。或许是刚从学校出来的学生还是太天真。对技术总是有太完美的期待，一个人可以容忍没有人指点你走正确的路，但是不能容忍有人阻挡你走正确的路。在一次一次打击下，终究还是决定了离开。尽管舍弃了不少物质上的利益，但还是跟随了自己的内心。2015年 ...继续阅读 (17)

窗外的雪纷纷扬扬四处乱窜，但是终究不可避免地往下飘去。放眼望去，远处屋檐上是白茫茫的一片，这样的场景似曾相识，但是细细一想，竟是四五年前的事情了。或许也是某个午后，坐在窗前，听着雪飘落的声音，那会是什么样的声音呢？我也又些记不起来了，但是我知道那个时候肯定没有马路上汽车经过哗哗的声响。那时候还是可以听到下雪的声音的。那时候的雪比现在要厚的多了。我总是觉得北方的雪下的太着急，太仓促。没有好好准备就开始不停地下。雪花是一粒一粒的，那么的小，堆在地上仿佛沙子一般，让人少了许多怜爱之心。我记忆中家乡的雪像棉花，像鹅毛一般。软绵绵的，毛茸茸的。接一片挂在衣服上可以观察好久，不过因为气温太低，往往看不了多久就融化了。如果也有那么一个人，依在窗前，盯着外面的一片雪白，盯着四处乱窜的雪花，静静地发呆，他会想些什么呢？或许，他什么也不会想，或许什么都会想，只是你什么也不知道。如果马路上没有车在奔驰，没有人在行走，让一切动事物都安静下来。整个世界都变的纯粹了。我觉得要是能够这样也挺好的，尽管只是非常短暂的白。就算如此也足够我平静上那么一段时间。一直觉得自己对哈尔滨缺少记忆，其实不是的。雪就是我对哈尔滨的记忆。对这座北国城市感觉。只要下一场雪，看着窗外纷纷扬扬的雪花，看着树木屋檐被雪白覆盖，一种熟悉的感觉便油然而生。 ...继续阅读 (28)

今年北京的第一场雪来的有些早，除了第一次来北京实习的2012年，记忆中上班的路上踩着厚厚的雪。13年和14年，基本上都没有见过下雪。对于我这个在哈尔滨待了四年的人来讲，雪真的不算是什么觉得新奇的事。只是忽然觉得时间好快好快，从2012年到现在，就好比是我09到12年。忙忙碌碌之中又过去了三年，也就是说那个时候，哪个小朋友带着期盼的心情来开始他的大学之旅，那么到现在也差不多到了我曾经的那个状态。当人碌碌无为的时候，回首往事，会发现时间真的过的很快。看自己上一次写博客已经是4月底的事情，整整半年多的时间了。发现自己变懒了，累了。习惯是一件很可怕的事情，在不经意间就被它统治了那么久。对于这些年过的生活，自己觉得并不快乐。反反复复的想，终究的原因是自己追求的价值感和自己当下生活状态不一致吧。对待事情太认真，太纯粹，若不是如此，自己深深地觉得没有意义。但是这些纯粹往往都是附属在某些人或者事上的，而往往因为如此，而变得失去了自己。不知道是什么时候开始，生活这两个字竟然是需要自己花时间和精力去思考的。原本在我的概念中，生活不过是你对消逝的时间的一种状态描述。然后在现在的社会里却变成了一种需要考虑的事情。如果做的是自己喜欢的事情，那么花去再多的时间又是什么关系呢？但是事实是我也不过是被这样的思想给同化了，其中很大的一点是周末的时候不想做工作相关的事情，明明有些东西是自己想做的。当你奋不顾身地想要跑 ...继续阅读 (26)

网上有一篇叫做<<从三月开始，到世界末日>>的文章，每每看完让我感动不已。于是这里就叫做六月吧，尽管是写在六月之末。不曾想过六月于我而言是一个让我成长的月份，三年前如此，如今也是。而成长是痛苦的。今天坐地铁的时候看到李开复老师的<<向死而生>>，里面说到:要珍惜缘分，学会去感恩和爱。要学会生活，活在当下珍惜身边的人，在别人对你好的时候，要懂得感恩，爱的最高境界就是付出而不求回报的爱。我把这些对应到现实的生活中，发现虽然是简单的几个字，但是真正去做起来真的很难，珍惜身边的人，怎样才算是珍惜呢？在现代城市里的生活节奏下，身边的人来来去去越发显得多，很多人你只是见过那么一面或许以后再也不会见面，有些或许会相处一段时间，但是终究会分别的。人与人之间的相处原本就是互相的，并不是一个人的事情。单方面的珍惜，是否真的可以呢？感恩或许会好一些，大部分情况下，人都是懂得善恶的，但是在现实生活中或许就会被解释成了你来我往。而爱，却是更加难了，谁能做到不求回报的爱，这种爱只有存在于父母和孩子这样的亲人之间吧，而人与人之间的相处最难的也就是这种关系是相互的。彼此之间的事情，并不是一个人可以决定的。但是仔细体会，这些其实都是你本真的体现，每一项都是代表着你的初心。没有应该不应该，当你遇到了，去体会，问问自己的内心，就会知道。当发现自己纠结的时候，便说明，你当前的状态很不对，当然这里的每一个境界都不是轻易可以 ...继续阅读 (27)

很多曾经都是使用PHP和Python进行Web开发的人对于怎么使用Go语言构建Web应用往往存在疑惑。疑惑的主要原因大概有如下两点：习惯了使用框架编写Web应用，他们面对的是取出Request的参数，然后根据自己内部的逻辑，实现相应的数据处理，然后返回或者不返回。传统的web开发往往会输出模版文件，换句话说，就是面对浏览器的输出，返回的结果往往都是一个html文件。从PHP或者Python迁移到Go，往往都是有一个比较重要的原因：那就是为了提升性能。提升性能这个工作，往往对底层了解的越多，那么方向也就越明确。因此，这里要明确一点：所谓的Web编程就是网络编程，一个远程数据交换的过程。接下来的内容描述，假设读者了解使用TCP进行网络编程，在Go里面，网络编程可以简单的抽象为对一个文件描述符的读和写。以前的Web编程，主要是偏向于输出html文件，而随着移动互联网的到来，现在的web编程慢慢向着移动设备转移。因此Web编程会更加纯粹化，不再需要去关注具体的展示格式，而只要关注数据内容本身就可以了。内容的具体展示效果由客户端或者浏览器去做，现在诸多前端框架的出现，也正体现了这种思想的趋势，例如 AngularJS 等，它们都更加关注数据本身，彻底将前后端的编程进行隔离。在我还在学校的时候，就觉得在html里面嵌入PHP代码是一种无比丑陋的事情。而这些年前后端的发展，也体现了数据和展示分离 ...继续阅读 (34)

初夏的晚上九点多，办公室略冷清，楼道也有些昏暗，电梯里，我一个人下来了。外面的空气没有室内那么温润，有些微冷。马路边的小饭店也透露着打烊的气息。从四面零零散散而来的人朝地铁站走去，每个人都仿佛是机器一般，刷卡，进去，然后等待着地铁的到来。随着叮叮叮的声音，门打开了，大家都进去了……这便是改变后的第一天，有那么瞬间，这座陌生的城市，给了我一种三年前曾给过我的感觉。第一次来北京，是实习，尽管那段时间也如行尸走肉一般，但是那个时候告诉自己还小，当下的苦只不过是为了将来的甜，而现在，所谓当初的未来，我似乎也不过如此。并不是我对生活，对技术，对工作失去了信心。对技术我也有热情，对生活我也有一些期待，对于工作我也希望能够有一个期待的愿景，与公司一起成长与奋斗。可是，当安静下来，沉淀下来的时候，发现这个陌生的城市，让自己觉得好没意义。我想找到自己的价值观，找到自己内心，对自己最重要的东西是什么。或许我是知道的，只是自己不肯承认，在有些时候，自己真的是很怂。不敢去说，不敢去做。在喧嚣褪去，一切都安静下来的时候，我不知道该如何去面对我自己。我想，在我还来不及继续忧伤的时候，睡意会侵袭了我，让我在生活的齿轮上照旧的走下去。 ...继续阅读 (32)

总有那么些时候，会觉得做什么事情都失去了意义如果这是一种心里疾病，而我反而觉得其他人好没意义夜很深，第二天也会很忙碌，所以我不想睡去，真的不想睡去，而这换来的不过是第二天的犯困不已到那时，我也不过是其他人，而且更加没有意义这是一个解不开的环，又是一个解不开的结，我纠结的不过是自己的内心人最悲哀，莫过于在你想要的时候得不到，在你拥有的时候却已经看透曾你以为可以天长地久的事情，却不会出现哪怕那纠结的仅仅是在于自己的心，自己的心而心只有一颗，而它也正是你自己，不是这个它，也不是这个你自己这终究是一个走不出去的环往往对自己喜好的人倾其所有，而失去神秘感世界从来没有公平，任何个体与任何个体美丽传说，千古佳话，在天，在地，不在于你月光下，一步一步，没有脚印空气从温和变到有点浑浊，空间从嘈杂变得宁静我不知道如果一个人寻找光明，不幸他始终朝着一个黑暗的方向走，怎样的一个结局才不是那么残忍的是最终走到路的尽头发现自己错了，还是在路上便死去，不知所以或许无知也是另一种智慧当你要到河的对岸，没有船，没有桥，只能趟过去，但是却不想弄湿衣服你只是在纠结，要是没有这条河该多好，要是赶在下大雨之前该多好可是没有如果，要么你在此岸终老，要么终究需要趟过去如果有个人拉着你过去了，那也就过去了又或许自己只是在瞎想，衣服湿了，晾干了依旧如此，只是自己多想了而已等累了，困了，就睡着了，但是醒来，依旧如此，或许在梦里，你可 ...继续阅读 (30)

在使用Go编写并发程序的时候，往往需要很好地控制已经启动的协程。下面讲解在工作中遇到的一个场景。实现一个函数，该函数包含两个参数，一个是需要并行处理的任务个数，另外一个是一个信号通道，当该通道关闭的时候，所有的任务都必须停止。函数定义如下：StartTasks(n int, exit chan struct{}) error具体实现// Create a channel which length is n. // Every task going done will write into this channel done := make(chan struct{}, n) // Follow channel used to manage all tasks, // if close stop, all tasks will shutdown stop := make(chan struct{}) wg := &sync.WaitGroup;{} wg.Add(n) for i := 0; i < n; i ++ { go func(){ DoTask() done <- struct{} }() } select { case <- done: // If one task stoped, then n ...继续阅读 (47)

根据官方文档的描述，用Go语言编写的程序在运行的时候，对协程的调度是不确定的。也就是说某一个时间里，具体哪个协程在运行是不确定的。但是下面出现了一个反例：package main import ( "fmt" ) func main() { c := make(chan string) done := make(chan struct{}) go feed("cat", c, done) go feed("dog", c, done) c <- "fish" <-done } func feed(name string, ch chan string, done chan struct{}) { meat := <-ch fmt.Println(name, "eat", meat) done <- struct{}{} }运行上面这段代码输出的总是cat eat fish。也就是说，每次都是cat那个协程可以拿到通道中的数据。而不是cat和dog随机从通道中拿到数据。这个现象和官方的描述是有出入的。但是对这段代码稍作改动，每次运行的时候，出现的结果就会是随机的，且看下面这段代码：package main import ( "fmt" "runtime" ) func init( ...继续阅读 (28)

很少会写总结，我现在能记起的应该是2012年，那一年特别想写总结。因为那一年发生的事情实在太多，使我一直平淡的人生起了波澜。2014年是我的本命年，却似乎并没有期待的那样，会有什么特别的事情发生。过的平淡，但相比以往却又有很多不同。这一年是我作为一个公司雇员，作为一个工作者完整的第一年。过完春节回到北京，便去参加做封闭开发，开发了一个多月，为米粉节做秒杀系统。其实当时还真的有点兴奋，觉得可以真切的去参与一个项目。一种临危受命的承当感。那段时间，真的是全身心去投入做一件事情，没有周末，没有白天黑夜。空下来就是写代码。以至于后来我翻开那个时候的代码都觉得写的挺好的。其实从来都是觉得自己以前写的代码很挫的，但是这次是例外。相对来说，能够亲身经历一场并发连接2000万，QPS过百万，总PV超百亿的活动，也算是一种幸运吧。那天活动结束之后，仿佛参加完一次高考，终于放下负担。对于秒杀峰值系统设计，网上的资料真的不多，不像大数据，前端技术之类的，有很多现成的分享。这样的秒杀系统只能根据自己业务场景去设计，说到这里想起自己大学的时候，有些妄想，总想设计出一种高性能的网站，能够用最少的资源抵抗住最大的压力。因此，当时小米来学校招实习生的时候，听他们介绍抢购网站的压力，还觉得很兴奋。其实也挺有幸可以实际参加到这样场景中。这一年也是我大量使用Go语言开发的一年，或许应该说就是那Go语言开发项目了。虽然1 ...继续阅读 (18)

其实我和游戏没有太多缘分，不像icek同学那样，对一款游戏有那么痴情的经历，那么深刻的印象。晚上打开自己大一的时候收藏的仙剑四的mv的时候，内心还是有点小触动的。小学2，3年级的时候，当时有幸见到了小霸王游戏机，玩的都是坦克大战，雪人，采蘑菇之类的游戏。不过当时也只是偶尔去外婆家的时候才会看到，因为我舅舅家的孩子比较贪玩，总能弄一些小孩子特别喜欢的东西回来。记得我第一次玩的时候，想让游戏里面的小人跳起来，不自主地就把手往上抬，差点没把手柄的线给拉断了。后来住到外婆家了，那个小表哥（就比我大几个月）就经常找我玩，于是我们就一起玩游戏。不过也是躲着大人们偷偷地玩的，那个时候的想法就是恨不得哪天晚上大人们都不在家，然后我们就可以一整夜都玩游戏了，那个时候，在我们的脑海里，一整夜是很漫长的时间。而现在不过是偶尔的一次加班而已。可是那个时候，我记得直到小学毕业了似乎都没有一整宿不睡觉的经历，我能记起来的第一次整夜没有睡觉是我去哈尔滨上大学的时候，36个小时，一路站过来的，差不多两个晚上都没有睡。小学那个时候虽然特别想玩，但是真正玩的时间还是很少的。总是在大人们的监督下玩，而且我们几个孩子还要轮着玩，谁输了谁下。说道这里，我怎么有点当时学《少年闰土》那篇课文的感觉，还有恰好在表姐的课文里读到鲁迅的《故乡》那篇文章。或许是因为鲁迅是浙江人，自然而然地内心会有一些熟悉感，亲切感。我现在发现，小学课 ...继续阅读 (31)

Golang提供了一个服务器之间传输数据的包Gob。使用这个包可以轻松的在服务器之间传递Go语言内置类型的数据。使用的时候只需要调用Encode和Decode两个方法，不需要关注内部的数据传输细节。同时thrift从0.9.1版本（目前最新的thrift版本是0.9.2）开始，实现了对Go语言的支持。最近在重新设计日志系统，涉及到数据传输，就考虑到使用Gob还是Thtift。这里的关注点比较多：发送相同大小的数据量，发送端占用机器的CPU资源多少，占用机器内存资源的大小，占用的带宽大小；另外还要考虑协议本身的通用性。于是对Gob和Thrift两种传输格式进行了测试。基本信息CPU型号：i7-3770 CPU @ 3.4GHzThtift定义：enum ResultCode { OK, TRY_LATER } struct LogEntry { 1: string hostname, 2: string message } service proxyTrans { ResultCode Log(1: listmessages); }Gob传输格式：type LogEntry struct { Hostname string Message string }日志内容：日志为一条40 ...继续阅读 (23)

其实取这样的一个名字有些奇怪，因为这个假期我并没有去哪儿玩，也没有做一些让我能够忘记时间的事情，甚至中间有几天我希望尽快恢复工作的节奏。除了十一那天出去逛了下。剩下的时间，我基本都是快到中午的时候起床，然后吃过中饭朝着公司走去，进入黑暗的三层办公区还需要到保安处进行登记，我甚至觉得这也是一件尴尬的事情。虽然家里也有电脑也有网，但是明显在公司网络要畅通很多。但是我不知道要做什么，简单地登上服务器，查看一下机器的状态以及我负责的几项服务的运转情况。静下来之后，我发现我都不知道应该去上哪些网站，去看些什么。默然我发现这些年带给了我这么大的变化，让我想起大学时候，逛各个技术，偏技术的论坛，总觉得有学不完的东西。那个时候的动力除了毕业之后要养活自己，还有就是未知东西的发现和探索。我不止一次和别人说我自己并不喜欢计算机，我想现在是表现出来的时候了。很多时候，当一个人失去激情的时候做什么事情都会显得很无力，只会坐在那里发呆，如果旁边有一台电视，就会无脑傻傻地看一下午的电视。我想这个十一我差不多就是这样子度过的。起码接下来的一段时间里我不会再说自己有多久没有看电视剧了。基本上每天4点多的时候，我就收拾一下东西从公司走回家，然后一直看电视剧直到肚子饿了去吃饭。吃完饭回来洗漱一下接着看电视剧直到困了再睡觉。而这一切也不过是对现实生活的一个描述罢了，内心的心理活动又该如何表达呢？我不知道！从学校出来一年 ...继续阅读 (16)

上周末去看了《变形金刚4》，我真正去电影院看电影的次数到现在也在个位数。在仅有的几次看电影经历中，我发现自己始终是适应不了那种大片的场景。感觉从电影开始，就把人的各种感官刺激调到最大承受范围，接受各种高强度的听觉，视觉刺激。反而让人用心去感受体会故事情节的机会更少了。因此，我一直很怀疑是什么驱使这类影片能够在现在社会生活下如此受到追捧。当然从技术角度去考虑，电影的特效的确是很多高端技术的成果，但是这种直接把技术转成商业的手段让我惊叹和惊奇。如果是我小时候，看这样的影片一定会觉得很满足的，可以想象那个时候看奥特曼都可以高兴的不得了的自己。对于这样具有那么些真实性的科幻大片怎能不着迷。小孩子的世界总是充满好奇心。探索着未知的世界，总是期盼着自己能够发现别人从来没有发现过的神奇。对于那些神奇的不可思议场景，宁愿相信它在现实世界是存在的。而现在的我很明显“理智”了许多，或许也意味着长大和失去了很多。知道所有这一切也只不过是一个人或者几个人设计而成的，它们终究是那些和你一样的人的思维产物，并不是自然界发生的奇怪现象。因此也不再有那么大的好奇心，只因这一切都是设计好的。现在的自己更加关注“人”这一元素，因为我觉得“人”这个因素更加让我觉得不可预测。而在“人”上发生的故事更加值得思考。泰莎和她的父亲就是比较具有代表性的一对人物，一个单身父亲，一个处于叛逆期的17岁女儿。父亲有自己很深的爱好，喜欢 ...继续阅读 (37)

心中总会有那么些念想，那是年少。那些执着，倔强，曾是支撑我面对生活的勇气。没有到达便不算输，同时也被称作希望和憧憬。生活中没有什么是不可失去的，失去的本身也不过是一种生活。只是快乐与不快乐，而我为那些得不到的而伤心，纠结难过，这便是生活。有人说这是成长必须走过的路，而每个人都会认为自己的路和别人是不一样的。到底又有谁知道真正的答案呢？成长只不过是对失去的妥协和无奈的表达。一个人终究是会去成长的，他会变得看轻一切，并不是他变得无情，而是被岁月一次次清洗过后留下的特性。生命的负担太重，活着，更多的时候是一种责任。承担这个担子需要太多用心的付出。长大是一种历练，其实也是一种失去。有些人为了这些失去，一生都在逃避自己。其实最终也走不出围绕自己的那个圈子，我没有体验过这样的人生，所以我也不知道这些人是否后悔过。我也不知道怎样去面对那些失去，但是如果还是活着，那么只有放下，对那些曾经，唯有保持沉默和尊重。这个分量很重，重到很多时候你都挑不起来。成长是一个很重很重的词，它并不代表一个更加优秀的你出现，而可能只是曾经简单的你的消失。它需要一个曾经的消逝来换取，这个太痛太痛了。我一直固执的不愿放下过去，无论是好的还是坏的。我都不愿放下，即使茶杯的水早已经没出来，我也还不愿意放手，这便是痛。我总有一种倔强，对于失去的好的事物，我总是不能释怀。拼命地去折腾自己的内心，撕心裂肺地敲打和哭喊。甚至这些都会从 ...继续阅读 (33)

在Go语言HTTP包浅谈一中讲解了Server和Handler这两个结构，接下来深入讲解一个http请求是如何被解析和处理的。越看Go的net/http就会越觉得Handler这个接口设计的巧妙，至少你会发现很多关于Go的web中间件都是在Handler接口上做文章的。http包内部使用Handler接口最有效的例子就是他的路由mux模块。因此开发实际上是可以自己实现一个单独的路由的。甚至实现一个链状的嵌套中间件模型，negroni就是利用了这种特性实现的一种中间件模型。Server结构体有一个Serve方法，它的主要工作是接口一个TCP连接，经过简单的判断确定无错误之后，基于这个TCP连接创建一个新的连接对象。然后使用go关键字调用该对象的一个私有方法serve，启动一个单独的groutine处理随后的逻辑。主协程继续等待下一个连接的建立。打字模型如下：for { rw, err := l.Accept() if err != nil { // do something } c, err := newConn(rw) if err != nil { continue } go c.serve() }关键点在newConn和serve这两个方法中。http内 ...继续阅读 (31)

使用Golang进行Web开发，HTTP包的使用是离不开的。但是相比net包，http相对要逊色很多，这个从http包源码中的注释也可以轻易看出来，不少的TODO都写着要优化。好在1.3对http包的优化粒度还是挺大的，尤其是sync.Pool的加入，对于在高并发下，频繁申请读写buffer优化非常大。查看1.3对包的优化描述，是不是也间接说明了原来的http的不足。使用http进行编程最常见的方式如下：func ServeApi(w http.ResponseWriter, r *http.Request){ // do something io.WriteString(w, "this is api") } func ServerHandle() { http.HandleFunc("/api", ServeApi) err := http.ListenAndServe(":8080", nil) if err != nil { log.Fatal(err) } } func main(){ ServeHandle() }在这段代码里面基本都使用了http包内部默认的配置。对于一般的小应用也足够应付了，但是对于大并发量的服务，还是需要优化很多东西的。下面来具体分析一下。Server结构http包种的se ...继续阅读 (30)

经过几个月的来的加班之后，今天在家调休。可能是白天睡觉的缘故，各种乱梦，却又是和现实交叉在一起，直到醒来之后，仔细的想，才隐约能想到和之有相关联的地方。或许在梦中出现的那些人物和场景冥冥之中给自己留下了深刻的印象吧。傍晚回家的路上胡思乱想，就想到了自己的那些老师们，从小学到大学，仅仅两个字之差，却是14年的光阴。转眼间，我也长大了。小时候，农村的教育并不是那么好，但是在我们这些小屁孩的眼里，那些大人们总是什么都知道的，更何况是老师。那时候很不愿意上学，又被伯伯说，上学就像蹲监狱一样的。我就更不愿意上了，于是拖得不能再拖了，在八岁的上半年上了一学期的学前班，然后就上一年级了。记得学前班学期结束之前，老师在讲台上说，你们就要上一年级了，到时候作业本上都要写自己的名字的，所以，一定要学会写自己的名字啊，你们还有谁不会写自己的名字的？当时的我还不会写自己的名字，但是我没有吱声，那时的我连下课都是坐在座位上的，所以基本上也没有什么朋友，甚至都有些记不清楚啦，反正就是觉得自己和别人不一样，可能一个主要的原因就是我戴着眼镜吧。在我的记忆中，我数学的启蒙老师是我的小学数学老师。现在想起来，一年级她刚教我们的时候应该是大学刚毕业，也就是差不多我现在的年纪，应该还是很稚嫩的小姑娘吧，但是当时也没有这么觉得，在我的眼里老师都是一样的与众不同，和我们普通人是不一样的。小学六年，她一直是我的数学老师，这一点 ...继续阅读 (21)

一致性哈希算法，当我第一次听到这个名字的时候，感觉特别高深。而它往往会和分布式系统相关，准确的说，是分布式缓存。在Web服务中，缓存是介于数据库和服务端程序之间的一个东西。在网站的业务还不是很大的时候，一般不会需要这个东西，每次都可以从数据库中查询获得数据，但是随着网站的访问量增大，每次请求都访问数据库的话，数据库的压力就会非常大，导致响应变慢，于是就需要一种缓存数据库，它们的存储结构一般比较简单，而且它们的数据都是存储在内存中。典型的缓存数据库有Redis，Memcache。有了缓存之后，服务端的程序可以先从缓存中读取数据，如果发现没有数据，那么从数据库中读取，并且将它放入缓存中，局部性原理，它们下次被访问的概率会很大，因此，当再次访问该数据的时候，就可以直接从缓存中读取数据。由于磁盘和内存的性能差别是很大的，因此，命中缓存和不命中缓存的性能差距也是很大的。要增加缓存的命中概率，很显然，增加机器是一种简单有效的解决办法，但是一台机器的内存是非常有限的，因此，我们需要多台机器一起组成一个缓存集群。然后将数据分散到各个机器上，在这个分散过程中，我就需要一种hash算法。如果不加额外考虑，我们可以根据机器的台数n，给机器编号成0到n-1，使用模n的方法分散到各个机器中，根据概率的分布原理，每台机器获得的数据大致是相同的。随着网站规模的增大，n台机器已经不足以支撑现有的数据缓存，这个时候 ...继续阅读 (27)

对于编程语言，在最初的时候，我觉得每种语言都是不一样的，不同语言需要一个一个去学习。最开始学的是C++，后来当我学完了JAVA之后，再学C，再学Python，渐渐的，我觉得各种语言都是类似的。只要对着语言说明，看上一上午，就能写了。而现在，我发现语言分不用的类别，同一类语言的语法和用法相似，而不同类的语言却有各自不同的特质和灵魂。使用Go语言编程已经将近一年时间了，开始只是觉得用的挺舒服，而且有着很高的性能。但是随着程序的复杂性的增加，对于比较大的逻辑，尤其是管理多个协程之间的协作，成为了一个瓶颈。总感觉有一种潜在的针对Go语言的并发编程模型。首先，实现第三方包的时候，最好不要在内部启用协程。而是暴露借口或者函数给使用者。因为包内部启动协程，对于调用者而言是不可控的。一旦，协程内部运行出现致命错误，包的调用者的程序也就崩溃了。这样对于控制程序非常不利。因此应该显式的提供调用方法给包的使用者，由包的使用者去控制程序运行。在实际使用中往往会有这样的模型，一个数据或者请求过来，然后启用一个协程，去处理。Go内置的Http包，就是这样一个模型，当一个请求过来之后，启动一个协程处理请求。但是很多时候，主的控制者需要控制并且获取子任务的运行状态，这样才能保证不会出现协程泄漏的情况。这个时候就需要使用channel来作为协程之间通信的通道。而这个channel应该如何来组织呢？这是一个问题，这里 ...继续阅读 (26)

连续几周的紧张开发，每日都在夜里1点到2点左右回家，这给我带来的疲惫感甚至让我怀疑有些我做过的事情，比如当我回复完别人的邮件的时候，我总是觉得我是不是在某个地方打错字了。而愈加到后来就愈加让我感到这种疲惫已经转换为一种精神上的压迫。于是趁着周末，北京的空气也不错，跑去参加Openparty了。我比较关心的两个话题分别是关于自制空气净化器和欧洲小镇之旅的。讲自制空气净化器的是一个美国小伙子，在北师大读研究生，他说自己的梦想是回美国教中文。我觉得他一定能够实现他自己的梦想，因为他的中文说的太好了，让我非常惊讶，想到自己蹩脚的英文水平，就伤心不已。一架普通的电风扇和一张淘宝上就可以买到的过滤网，自己就可以组装出来一个空气净化器。这种过滤网能够过滤掉0.3微米以上的空气里的微粒。使用一种激光器测量了空气中微粒的密度，实际上过滤了80%的空气中的微粒。面对这样的结果，对于为什么市面上卖的那些空气净化器会那么贵，他表示这是一个世界性的难题(^__^) 。非常有趣，中间去听了一下ThoughtWorks公司开源的持续集成工具Go。我过去的时候刚好看到分享者在演示demo。其中讲到和Github相接的时候，对于新更新的代码，它使用了轮训，而不是通过Github的web hook，在心里有点小鄙视啊。不过分享的那个小伙戴着黑框眼镜，挺萌的。这中间还被ThoughtWorks的HR拉去聊天了，心里窃喜 ...继续阅读 (22)

自从2012来北京实习之后，开始去参加一些技术聚会，无论小的，大的，只要是可以免费参加，都会去。开始的时候真的可以学到很多东西，而且感觉特别新奇。还买了Pycon2012的门票去参加了。可是，也正是那次之后，忽然感觉其实去参加这些技术聚会，很少有能带给我所期望的东西。分享的人的水平更加是参差不齐。昨天第一次去参加车库咖啡的百度技术沙龙。由于手机这个月的流量使用完了，看不了地图，找了半个小时才找到，不得不说这个地方真的不好找啊。刚进去，感觉还是挺有味道的。“点上一杯咖啡，可以坐一天”，门口的墙上面贴满各种创业团队招聘的信息，这些信息也写得特别有意思，其中有一张写着“鹦鸣求友~~ 21画生”。颇有《恰同学少年》的韵味。进入之后，是人山人海啊，站着好多人，自己找了个稍微能看到演讲台的地方站了下来。凡是技术类的聚会，绝大部分都是被各种潜在的广告宣传给毁了，这个也不例外，百度，InfoQ，各种宣传，回来之后更是被InfoQ的微博刷屏了。什么微博墙，以xxx主题发微博，抽奖啥的，深深地让我疑惑大家来到这里的目的是什么？假如我也热情的参与进去，然后有幸得奖的话，拿本书回去，然后高高兴兴地回家了。或许很多人来的目的也就是如此吧。至少于他们而言，一天也算是“有意义”地过去了。于我而言，这完全不是我要来的目的。这种形式的活动在校园招牌宣讲会中也频频出现。大部分宣讲会核心消息只有一个：什么时候，在哪里笔 ...继续阅读 (34)

如果有那么一件事是你非常期待的，当它来临的时候也就意味它将要逝去13年，似乎仅仅可以分为两段，前半年和后半年。前半年基本上就是在法国度过了，后半年就来到了小米。13年，我真正毕业离开学校，踏入社会。从一个学生变为一个工作者，这也意味着我的学生生涯基本结束。或许对于大多数同龄人来说，这会是很不寻常的一年。甚至是人生的一个转折点，而于我而言，13年还不如12年跌宕起伏。我的大学只有三年。12年是我的人生的一个转折点，同时也是我经历最多，最落寞的一年。甚至行尸走肉了那么一段时间。很神奇的是在12年和13年这两年里，因为各种机缘巧合，出了两次国，分别去了日本和法国。在九月和五月分别登上了东京铁塔和埃菲尔铁塔。至今记得在塞纳河边游走的情景。不知道今后是否有机会去美洲逛逛。只能说很多发生的事情真的是不可预料的。13年的元旦是在北京霍营的一个小屋子里度过的。那时候外面是皑皑的白雪。在3月初的时候，结束了实习生活。回到学校之后便是准备着办理去往法国的相关手续，因为之前就帮一位博士生写实验程序，作为论文中的实验验证。所以也就去了那个实验室，实验中的一部分也就拿来当做毕业论文了。那段时间，因为要准备出国，忙着把实验的相关程序代码实现，几乎是天天坐在电脑面前敲着Python代码。那段时间是我唯一坐在寝室里安安静静敲代码的时间。后来在我出国的前一天，从上午讨论到晚上10点多，终于把整个论文的相关问题理了一 ...继续阅读 (25)

很早的时候就听说Google出的Go语言，但是等真正去了解它是在去年上半年的时候，那个时候从各个渠道听到关于Go语言的各种传说。后来的ECUG大会爆出的各种猛料顿时让Go火起来了。从我受到影响的方面来讲，七牛云存储功不可没。后来就买了本许式伟的Go语言编程。不知道为什么，那个时候就觉得Go语言以后一定是主流语言，可能是被洗脑的原因吧。但是无论怎样，现在Go的影响力越来越广是事实。自己本来就是喜欢Python和C这两门语言。但是实际工作中真正那C来写工程很少，只是在各个OnlineJudge提交代码的时候用它来实现算法。我喜欢Python的简洁语法风格，喜欢C的严谨，底层。该指针就是指针，该变量是变量，而且把操作系统底层的东西都暴露出来。让开发者明明白白知道自己在干什么事情。而Go语言就是Python和C的结合。从语法上更像C，但是它拥有Python的一些隐性思想。具体或许只有真正写过Python的人来写Go才会有体会吧。说说刚开始学习Go语言的时候，可能会遇到的坑。时间函数，通常我需要sleep的时候会调用sleep(1)表示睡眠一秒钟，但是在Go里面默认单位是1毫秒。所以我们准确的用法是time.Sleep(time.Second)。如果不注意，很多初学者会在这里被坑。关于Select，有的时候，我们需要获取一个channel数组的数据的时候，为了简化代码的编写：可能会去这么实现 ...继续阅读 (24)

很多时候，我们会用忙碌来形容自己的生活。这一个月来我的生活恰好也是这么形容的。每天一两点回到家里，然后洗漱，看看微博，3点左右睡去。早上十点不到起床上班。这种接连在一起的生活节奏，让我和别人的交流变得少了。对一些原本是自己会常常念叨的东西也会暂时不去想了。有的时候，忙绿是对生活的一种充实，然后忙碌过后又会有一种很好的收获的感觉。这样的过程和结果往往会比较美好，让人期待。而我现在过程忙碌，但是结果我自己不知道。而这个过程，我自己也不知道是不是快乐的。或许是现在对很多事情都想太多，赋予太多的目的。就像小时候上学，也并不是因为上学快乐才会去的，但是最后回忆起来，十多年时间里都是这么过来的。更多的人对这段时光还是充满了怀念。如果是很多年前，有人问我：你以后要做什么事情呢？我会回答实现自己的理想，如果老天怜悯的话，可以再赐予我一段完美的爱情。那时候的自己至少知道自己的未来要做什么。而现在，我只能说我已经找不到这样的目标了。每天上班，工作。习惯了这样的生活，连周末都想着去公司像工作日一般敲着代码。因为我觉得与其在家里荒废一天的生活，还不如去写一些代码，因为工作上的事情永远是忙不完的。而除了去公司多写几行代码，我自己都想不出有什么更好的生活方式。在曾经我不觉得在有太阳的天气里出去逛几圈是有什么不好的。而这里，看着手机上显示着中度污染的指标。我想还是待在家里吧。顿时觉得我自己是多么不自由啊，这种不 ...继续阅读 (23)

2013年对我来说，应该算是不平凡的一年，就像无数学生看待他们毕业那一年一样。毕业了，工作了，反而觉得自己没有静下心来好好写写博客了。和很多人不一样，毕业对我生活上的改变并不是很大，可能仅仅就是换了一个城市而已。因为大二开始，我的生活就和现在类似了，每天除了上课就是面对着电脑，探索各种技术，自己敲着自己的代码。还有一点不同的话，可能就是环境了。现在敲代码的环境的确比以前的好多了，但是敲代码的动力却和以前不一样了。连我自己都说不出这种不一样到底在什么地方。大学的时候，看到各种新的技术，自己不知道的技术和知识都会没日没夜的去探索去了解，而且得到的满足感也很强，也会很兴奋，但是现在却似乎没有这样的感觉了。也不能说是因为我厌倦了这样的事情，而是没有了喜欢的源泉。甚至是失去了做任何事情的源泉和动力。如果是放假，我的一天可能就是这么度过了，10点起床，12点自己做饭吃饭，2点睡觉，4点醒来，看看书，6点吃饭，然后过不了多久，可能又要睡觉了，我变得一个人做什么事情都没有激情的状态了。而工作的时候，我会尽量的把自己的工作做好，做的完善。但是回到家之后，就不愿再翻开工作的那些琐事了。这种不愿并不是我主观的不愿意，而是潜意识的不让自己这么做。或许是受到某些言说：要把工作和生活分开。而现在我的生活似乎是空白一片。用一些话来描述，就是：一旦安静下来，我就会变得不知所措。周一到周五，每天9点多起床，然后去上 ...继续阅读 (24)

简介kafka是一个由linkedin开源的分布式消息系统。既然是分布式，它就拥有高可用性，没有单点故障。同时它具有很高的吞吐量。和许多其他的日志收集系统不同的是，它采用拉的方式进行消息的获取。而scribe等一些消息收集系统都是采用推的方式进行消息的传递。尤其是scribe，要想对消息做一些解析的工作的话，就需要先将消息写入磁盘，然后再通过读取文件的方式将消息都到程序中进行解析。这中间的经过了一次读文件的过程，并且这个过程单个类别是单个文件的，很容易产生性能瓶颈。而kafka系统则没有这样的担忧。另外比较好的一点就是在github上这个系统还是一直在很活跃地更新。当然对于我来说有一点比较遗憾的就是它也是运行在jvm之上的。使用scale语言编写。个人对java的那一系列实在是不熟悉。实现方式和原理初步存储方式kafka采用存文件的方式对消息进行存储，左右的消息都以log的形式存储在相应的目录下面。很多人都会潜意识的认为文件操作都会很慢，但是其实控制好了，文件操作也是可以很快的。kafka就是一个代表。利用磁盘的顺序读和顺序写的优势性质，以及网络发送的零复制等技术。在性能方面非常优秀。几个概念消息按照Topic进行存储，也就是说producer每发送一条消息都要有一个Topic。在Topic下可以设置分为多个PARTITION。这些partition会被均匀地分布在各个broker ...继续阅读 (31)

实时计算问题在做实时计算的时候，往往需要计算某一个指标在一秒钟产生的数量。我不知道现在使用一些先进的计算工具是怎么做的。但是如果仅仅是使用普通的编程语言进行计算的话，瓶颈在于一秒钟是否可以计算完成。如果这个计算在一秒钟之内是完成不了的，那么就会造成下一秒的计算的丢失，甚至是下下秒。当然即使是在一秒钟之内能够完成的计算任务。计算本身也是会消耗一点时间，这样来说的话，最后的计算结果也是不正确的。理想的情况下：不考虑取数据需要花费的时间的话，那么模型应该是这样子的：每隔一秒钟取出数据，然后启动一个并行的进程，让这个进程去执行计算任务。这种情况下，可以保证每秒钟都会有数据，但是如果计算时间比较长的话，还是会造成最终的延迟，但是这已经是能够保证的最好的一种方式了。Go语言的处理效果为什么要使用Go呢，其实本来我是使用Python作为计算任务脚本的，大家知道要想在Python中启动并行计算，那么只能够是启动进程。后来发现Go语言在处理这种事情上，显得非常适合，首先创建一个定时器：ticker := time.NewTicker(time.Second)这就创建了一个定时为一秒的定时器，使用方法如下：for t := range ticker.C { //do something }创建一个通道：channel := make(chan string, 1024)在循环里面可以去读取数据 ...继续阅读 (28)