马上要从有道离职。除了MSRA实习外人生第一份正式工作即将结束，在这个隆重的时刻自然是需要写点东西纪念一番。感性的文字不着急写，作为一个搞技术的，当然还是先写点技术文章争取对同行有所帮助。所以第一篇呢，凑个热闹，redis3.0正式版刚发布，就先说说redis cluster吧。我在有道引入redis cluster是14年8月，到现在已经8个月了。在当时那个时间点，有道至少是词典在缓存这块的基础设施搭建还是比较薄弱的，翻译用memcache，简单的客户端写死配置来分片；词典的各种服务如果需要缓存基本上是单独搭一个redis实例，因为公司机器比较弱，大内存机器太少，所以通常是几个服务用一个实例，没有主从，纯单点。于是N个服务有M个redis实例，每个示例数据量、qps完全无法维护，基本上是某个服务的某个开发记得哪个redis的host和port，就在自己维护的服务上用哪个的节奏。当然因为我们也不把redis当数据库，只当做一个单纯的缓存，所以挂了的结果就是redis超时之后请求全落在下层存储上。感谢redis还是足够稳定，也感谢贵司的挫机器挂了这么多也没在redis所在机器上挂过，至少我印象中redis单点挂掉这种事情还没发生，即使后来因为个人风格问题有的人写的服务是一旦redis挂了彻底不能用，也暂时没出过这个问题。倒是惠惠前段时间（那边暂时没用任何redis的集群方案）因为re ...继续阅读 (43)

这个博客一直以来写的频率是越来越少，之前感觉是因为自己想写的东西“不那么值得写”，最近想了想，原因还是不够精准。真正本质的原因是——我不愿意为了表达我的那些东西而花时间写东西让人看了。一方面是因为读者当然是不太多，平均下来每个字远远不够一个PV，不值得我花太多时间；另一方面，我不在乎别人是否知道我怎么想了，也不在乎别人是否认同我的想法，更不在乎别人因为我的想法而改变自己的想法了。时间是很值钱的，这种事情很多时候必须是上完学开始工作了才能理解。一个是因为对绝大多数学生来说工作之后空闲时间会变少，那么原来业余生活里快感度比较低的事情就不做了；一个是因为你的时间可以换来收入了，而收入可以用来在空闲时间换取更爽的快感，那么你的选择空间也更多了。上学的时候，空闲时间太多，以至于连写东西吐槽、在网上跟人互喷，都能排上日程。而现在先不说没有喷人的动力，即使有，也会因为宁愿去做更有意思的事情而懒得喷。那为啥没有喷人的动力了呢？因为我的价值观逐渐认为，这是一个价值观的问题。作为一个在各种角度更崇尚“个人”而非“集体”的人，这是一种价值观的站队。没有对错，就是价值观，一样就可以做朋友，不一样就很难。这个集体可以是家庭班级学校国家全人类……总之在很大程度上自己的想法才是最重要的。这不是说不考虑别人的想法，因为要“在不影响他人的情况下”做自己的事情。问题在于，什么是不影响他人？公共场所大声喧哗、过年不回家 ...继续阅读 (43)

之前订过Xbox的国行，发货前夜觉得锁区实在不靠谱，于是退了。后来等PS4国行，开始据说不锁区然后现在貌似很可能锁区。想了想对kinect还是有一定的需求，加上对PS4独占游戏不是那么感兴趣，而且童年缺失没怎么玩过游戏机所以对索大法也没啥感情。于是就淘宝了港行的X1。首先，假如你买了X1，请第一步先买xbox live金会员。因为很多游戏尤其是稍微过气一点的大作，金会员很可能打折，而且是五折。而且因为买金会员才能联网多人游戏，所以肯定是要买的，那就得早买。另外，遇到了金会员打折的游戏，如果觉得以后早晚要买，那应该马上入手，因为打折是有期限的。买完之后每天回家玩，到今天自带的手柄电池用完电了。俩五号电池理论上可以撑30-40个小时。所以顺道买个5号充电电池套装吧，一次性电池频繁买麻烦还不经济更不环保。而且电池尤其是充电电池这玩意还是最好不要买低端货，直接爱乐普之类的比较靠谱。GTA系列一直是神作，虽然前面若干代都没正经玩过……这种沙盘类的游戏自由度太高，以至于抢个出租慢慢开着玩拉客也能带来不少乐趣……目前进度大概是40%，还没试过多人模式。除此之外买了极限竞速-地平线2，是极限竞速5的引擎，但比赛在广阔的公路而非赛道，是我喜欢的类型；光环-士官长合集也买了，准备从1代开始玩玩这个据说很牛逼的游戏。Xbox的独占游戏据说都是深受美帝人民喜爱的枪车球，不过其实我也是喜欢这仨类型，纯rpg ...继续阅读 (47)

Cassandra的batch，就是一次提交多个修改操作，节省传输请求的资源消耗。同时也可以理解为一种事务的解决方案——all or nothing，这些操作可以保证要么都成功要么都不成功，即原子性。这里需要注意几点：1：batch只保证原子性，要么都成功要么都失败，不保证隔离性。就是说可能存在某个时间点，batch的若干个修改只能读到一部分。同时batch也可以指定本次操作不需要保证原子性，这样显然性能会更高。另外counter因为不是幂等操作（多加了一次总和就变了）以及其实现比较复杂，不支持原子性的batch。2：batch中针对同一个row的操作会先合并再写，直接变成了一条操作。所以Cassandra是可以通过static column的batch来实现订单和余额在一个表，一个人的全部订单和余额放在一个row，对一个row key(userid)同时写成交新订单和余额修改操作，这样可以通过batch来实现原子性+隔离性。换句话说，只涉及到一个人的余额变化及订单成交，没有另一个人的余额变化，是可以搞的，而另一种事务的典型场景——一个人给另一个人转账，一个余额增加一个余额减少——这种跨行事务Cassandra应该至少目前是搞不定的。3：非batch的普通修改请求，在写失败的时候不会回滚，比如QUORUM的操作，写两份client才认为成功，假如3个节点只写成了一份另两份超时，cl ...继续阅读 (48)

前文说过：年底了，到了冲KPI的时间了。那现在离2014结束还有半个月，要是还觉得年度KPI没把握，想冲KPI已经来不及在代码层面动点啥，只能动脑筋，或者干脆放弃抵抗接受达不到KPI的现实了。那既然今年就这样了，就得规划明年的计划了。明年的产品怎么做，是上到CEO下到主管再下到产品经理日夜思索的问题。当然，除非做得牛逼能让公司上市让员工暴富，或者利润特高能让员工拿奖金分红，否则还是跟码农关系不大。互联网本质上还是商业，最终目的一定是赚钱。除了游戏、电商这种小量赚小钱大量赚大钱——只要把量做上去就行的行业之外，其实很多行业是要同时想两件事情的——提高用户活跃度和提高收入。当然前者是后者的前提，但前者做好了后者未必做好。比如我们词典这么多年，也算不容易，干掉了其他家，占有率基本上是垄断，加上竞争对手基本不怎么用心做了，我们可以算“打着望远镜也找不到竞争对手”了，可然后呢？一直以来我们就是卖卖广告，直到去年这个时候才实现理论上的收支平衡并微微盈利，还会被用户喷广告太多太花哨（广告的脑洞越大就越吸引注意力所以财主给钱越多）。怎么把产品推开很难，在已经成功的产品上赚钱也不容易甚至更难，尤其是我们做工具的。解决用户痛点，做的比别人好用，至少是个明确的方向，只要动脑是有机会的。但把用户变成钱，除了广告之外的赚钱点，还真得靠点“聪明才智”。资本讲的是规模和增长。有规模有增长才有估值，才能上市。甚至 ...继续阅读 (53)

话说今天遇到一个特别牛逼的事情。俺们词典首页各种文章比如双语阅读的展示是用本地存好的html+js模板然后服务器取每个文章的json再本地渲染webview，而html模板或者js文件是可以在线更新的，方便我们改改样式啥的。这个应该没啥问题。而有个牛逼的东西叫360免费wifi，用他上网他会劫持网页概率性的出360的广告还推荐一些app让你下载，可能刚连上第一次访问网页才会出吧不知道了。总之呢如果客户端后台更新html模板的时候360恰好想插广告，那就喜闻乐见地下载到了一个被强奸的模板，以后打开词典里所有文章就都有360的广告了，直到我们下次想更新模板然后客户端恰好下载的时候没被劫持。为了防这样的强奸，只能是在各种没啥隐私可言的服务上搞https才行了吧。 ...继续阅读 (42)

要到年底了，互联网界乃至很多行当都到了冲KPI的时间了。是不是通过KPI来考核不重要因为本文不是说KPI；KPI是不是好东西不重要，因为就算没有KPI，也不能没有“考核”。除非领导能保证所有人都在非常努力地做该做的事情，并且做的很好——或者领导（至少假装）认为自己的手下是这样的。所以每个产品是否成功要考核，每个人是否工作的好要考核，大boss考核小boss，小boss考核小经理，小经理考核基层员工，再扁平化的管理，他也是有层级的。更不用说我朝政府内部的考核了，中央考察地方，省考核市，市考核县区……至于人民考核领导、下级考核上级的事情，就不是本文的所能考虑的了。当层级不止有两级的时候，理论上有效的考核机制应该是上级考核你的东西，你拆分出自己的职责跟手下团队的职责，然后去按这个来考核手下团队。但很多时候并不是这样，要么手下团队不care这种考核不鸟你，要么两个层级的职责完全不同考核的机制也不同。最典型的属两例：学生干部如学生会的和班委会的，其职责就是帮助学校更好的管理学生。管的好，这些干部的KPI高。但学生并没有“被良好管理”的职责，一个不服管的学生只要不违纪而又不挂科，理论上是完全不用听班干部的，也就是说学生真正的KPI是成绩和遵守纪律。于是假如上头安排个集体活动要学生参与，那学生的参与情况是学生干部的KPI，但作为普通学生是否参与并不是自己的KPI而是班干部的KPI。于是通常学生干 ...继续阅读 (30)

最近用macbook玩风暴英雄内测经常玩着玩着就巨卡无比，本来以为是刚出的新游戏对性能优化尤其是mac的优化不到位。但最近wow开了6.0玩着玩着也很卡，于是我就开始怀疑是不是升了10.10导致的……卡的时候fps个位数，完全不能玩，只能退出重进，然后玩一会又卡再重启。今天实在受不了了，上网搜了下，发现有人在wow国服的官网论坛发帖说mac卡顿的问题，然后官方客服的回复是：国服没有对mac提供技术支持，这也算能理解吧。于是玩家自己找解决方案，发现美服大量mac用户遇到同样的问题，官方发帖承认当前mac客户端有bug。然后说等更新。然后最近6.0.3上线官方说问题已修复，人民群众纷纷表示还是很卡。然后评论中有人提到卡的时候agent也就是战网客户端是无响应状态，关了战网客户端就不卡了，我试了下发现果然不卡了。所以似乎bug出在战网客户端而非具体的游戏。风暴英雄我也打了一盘至少在这半小时内也不卡了。 ...继续阅读 (57)

从广州回来一周多，想了想还是应该写篇文章记录下。如前文所说，被升舱之后坐着头等舱来到了广州，一个相对较小的一线城市。广州打车好像比北京贵，机场好像离市区很远。我们的面试是在广州信息港的网易大厦里，所以住在了附近的7天。正好赶上广交会，住宿比较紧张，没订到更好的宾馆，也因祸得福每个人都能住单间大床房。信息港的网易大厦楼不算很大，一共10层，顶楼是食堂、健身房、一个小的咖啡吧，一个能抽烟的露台，和一个钢管舞室……没见到过里面有人，也不知道谁会愿意在这里练钢管舞给人看……食堂不能说多好也不能说多差，就是人有点多，高峰期很不好找座，如果是多人一起吃就更不好找连着的座位了。不过不管怎样，有食堂总是不错的。比北京好多了。工位并不算太舒适，只能算是比创业大厦2楼稍微好点，当然比7楼强多了。楼里主要应该都是做游戏的，总能看见一大片工位都在开着游戏，当然人家开游戏是为了工作。等电梯的电视里也是网易开发/代理的游戏介绍视频轮流播，不过电梯一共只有三台，等起来很不爽。据说这边每天早上9点上班，迟到累计够一定次数就扣当季度奖金。在一个赚钱足够多的行业，什么人性化啊福利啊，都不那么重要了。三天的面试，连过两轮能进终面的人不到20%，总体来说广东这边的计算机学生水平还是远不如北京的。单纯说学校的教学水平我不觉得广州的高校会比北京的差——因为我觉得除了顶尖学校之外都是一样差、一样都得靠自学的，关键是在广州上学， ...继续阅读 (49)

“档次上去了，可就下不来了”。上了大学之后各种物质生活的改善让我屡次提到这句话。前几天看南都周刊讲唐岩。说他坐飞机一直头等舱，而罗永浩一直经济舱。有一次他俩一起出门，唐发现罗订的经济舱就偷摸给他改成头等舱了。罗发现后不高兴，说要接地气什么的，但唐成功说服了罗并让老罗之后也一直是头等舱。当时看完觉得唐岩好厉害能说服老罗。今天坐了次头等舱，感觉未必怎么需要说服，因为本来就太爽了……这周去广州出差，校招面人。订的南航的波音787的灰机。登机前几个小时被告知免费升舱（P舱头等舱），让我们取消值机，然后过一会航旅纵横又通知可以值机了，然后就直接选头等舱的座位了。大概是因为经济舱卖光了头等舱恰好剩我们6个人的坑就把我们升舱让剩下的人买腾出来的坑吧。来的比较早，去南航VIP的屋子换登机牌，额外给了个VIP休息室的票，顺着红地毯到了安检专用通道，因为通道只有一个感觉排队的人也挺多没准比其他地方还慢……然后去头等舱休息室溜达一圈，除了座位舒服之外就是免费的饮料咖啡点心泡面。不过座位挺有限的有点不够坐。头等舱休息室的人也不一样，隔壁的聊天都是说什么“我每年投入两千万”、电子商务、企业信息化建设啥的。还看见个妹子拿个iPhone6plus，真的好大……然后就上飞机了。波音787不是超大的那种但足够新，发动机感觉比一般飞机大很多不知道是不是幻觉。飞起来特别稳，起飞降落感觉尤其明显。之前坐飞机不关注飞机的型 ...继续阅读 (40)

之前在github上倒是给一些开源的库提交过代码，但用的人一般也不多。这次应该算真正意义上的“为开源项目贡献代码”。所以写篇文章纪念下……起因是我上周把我们公司的cassandra集群升级到2.1.0了。虽然理论上大版本的第一个正式版坑可能不少，要几个小版本升级后才靠谱，但这次2.1搞了N个beta和rc，感觉还是靠谱的。加上号称性能提升，对整天因为机器太搓扛不住压力之类的俺们公司还是挺有吸引力的。于是就升级了。升级完倒是没觉得性能提升，但发现log里经常有AssertionError。看了下是发现不同节点数据不一致的时候判断每个节点与最新数据的差异（把差异部分写到对应节点从而保持数据一致性）的代码的一个assert挂了。没时间细看就复制粘贴异常信息发JIRA上和maillist里，发了3天没人理……然后这几天不上班了就看了下具体的代码，是在比较一个节点的对应row的RangeTombstoneList和所有节点合并后的最新状态（因为传输不成功、丢数据等导致某个节点的数据并不是最新的，把对应的row在每个节点上的各种状态按时间戳挨个找最大就是一个row真正的最新状态，当读取数据的时候发现某个节点与最新状态不一致的时候要把需要更新的部分找到然后传给对应节点）的RangeTombstoneList的diff时挂的。写diff函数的人认为单个节点的TombstoneList长度应该小于全 ...继续阅读 (42)

这不是一场精彩的辩论，如同一场5比0的球赛只能让赢的人很爽，但算不上精彩。老罗喜欢吹牛逼，太多人讨厌，所以导致很多人事实上因为敌人的敌人而支持王自如。于是一旦有了“谁也不支持”的选项，支持两者的支持度差距会更大。锤子手机好不好，我作为用户也不想多说。无论说世界第二还是东半球第一，都是夸大，都是吹牛逼，这个毫无疑问。人们骂他吹牛逼的时候，如果有人拿数据说明这手机就是个普通手机，根本不比其他手机牛逼到哪去，那就是用数据客观的打脸。老罗一直无视，也只能无视。可王自如玩大了。整场辩论，王自如坐姿神态喝水频率都体现了他远比老罗紧张。不说辩论内容，甚至如果对面不是老罗，只是面对一个在新东方教GRE的人，王自如在气势技巧口才逻辑都是完败。他不可能不知道，但还是来了，只能说太年轻。有人分析当时老罗中午越战自如吃完饭随手同意没经过思考和团队讨论，我深以为然。或者说严重点，年轻人有了点成绩就轻浮了。就视频来说，王自如一直在批判锤子各种硬件设计，但没有对比（比如没拆别人），或者只和苹果对比（比如温度，显然和最好的对比大多数人招架不住，何况人家金属外壳温度低几度很正常），这都是一种不客观的手段。即使有对比，评价指标的设立也可以非常巧妙。最典型的就是新闻联播，只说中国的好事和外国的坏事，所有新闻都是真的，但这不叫客观。但问题又恰恰在于其实你永远不能证明自己客观，甚至无法真正证明“不客观”，反正你不可能所有新 ...继续阅读 (35)

最近被某服务折腾，交了点学费但至少对Cassandra删除数据这块的理解更深了一些。总结的经验如下。Cassandra通过写一条“tombstone”来标记一个数据被删除了。被标记的数据默认要10天(配置文件中的gc_grace_seconds)后且被compaction或cleanup执行到对应的SSTable时才会被真正从磁盘删除，因为如果当时这个delete操作只在3个节点中的2个执行成功，那么一旦2个有tombstone的节点把数据删了，集群上只剩下没tombstone的那个节点，下次读这个key的时候就又返回对应的数据，从而导致被删除的数据复活。Repair操作可以同步所有节点的数据从而保证tombstone在3个节点中都存在，因此如果想确保删除100%成功不会复活需要以小于gc_grace_seconds的周期定期执行repair操作(所以官方建议”weekly”)。然而在select数据的时候，在每个SSTable遇到的所有符合查询条件的tombstone要放内存中从而在合并每个SSTable文件的数据时判断哪些column数据没被删能最终返回，tombstone太多会导致heap被大量占用需要各种GC从而影响性能，所以cassandra默认读到100000个(可配置)tombstone就强制取消这次读取，因为遇到这种情况一定是你“doing ...继续阅读 (72)

前文写了C*的轻量级事务的实现，侧重的是网络和逻辑的流程，因为整体的流程cas的操作包含了读写，所以没必要再研究C*如何完成一次完整的读取或者写入。不过对于流程的认识还局限在发了一条消息到对方节点异步等response，还不太清楚在节点本地如何读写数据，于是就研究下C*的数据存储以及相对应的读写逻辑。C*的数据存在本地，不依赖第三方的分布式存储服务(相对于HBase需要hdfs)，这样可以针对C*的特性来定制本地的存储逻辑，但因为也需要集群自己来实现存多份冗余，需要在数据库层面维护数据的强一致性。定制化的存储，一个很简单的例子是C*把SSTable按照data/keyspace/table的目录形式来存，而unix是支持按目录挂载不同的磁盘，因此理论上可以把一个ssd挂载到某个keyspace的目录，把机械硬盘挂载到/，这样那个keyspace的数据就总是会保存在ssd上，其他的表存机械磁盘，从而加速了特别需要降低响应时间的表，同时节约成本不需要全上ssd。本地的数据除了放在本地磁盘的还有放在内存的。放内存的数据C*基本上都是用java的off heap memory实现，即不放在JVM的堆上，不通过JVM GC。坏处当然是需要自己释放自己管理，好处是尽量减轻GC的负担。按照BigTable的数据模型，C*自然会有MemTable(放在内存)、CommitLog(放磁盘)和SSTa ...继续阅读 (32)

先感谢王前闯同学送我的优先码，能让我7月8号0点0分付款今天就拿到。可能我这种比较晚的骑兵是等待时间最短的。锤子盒子设计得确实不错，外面快递箱子也直接是红色的锤子专用快递箱子，直接能看出是锤子手机。今天顺丰快递给我打电话也是说“你的锤子手机到了”，真是不错的免费广告……不过盒子太精美就有点不实用，比如我一直把手机配件放盒子里然后把盒子收起来，锤子的盒子太大了。。。。锤子设计上比较奇葩的就是搞了个螺丝开后盖装sim卡，很怀疑女生会搞不定因为要点力气才能扣紧。网上说缝隙和摄像头歪不少其实是因为没扣紧。不过换卡总体上是小概率事件，大多数人应该能忍。妹子用这个手机的应该也不会太多因为这手机确实比一般的沉……不知道是不是最沉的。。rom的界面我自己主观认为是非安卓官方界面里最好看的，国产rom普遍是故意把安卓改丑。。。屏幕据说算偏冷，感觉看白底黑字的效果很好，字体不知道有没有优化过感觉也不错。如果说情怀，除了图片音乐都有作者名字之外，我觉得各种ui细节是最体现情怀的了。商店提供谷歌服务的安装器很良心，也没了root的最大理由，所以root会失保能接受。和ios一样，锤子不支持widget，只能是图标，但系统也和ios一样支持图标的动态效果。苹果把日历和时钟两个程序做成动态的，一个看图标知道今天几号一个图标里的时钟指针会按照真实时间来走。锤子的时钟不会动，日历有日期据说新一天第一次看到这个图标 ...继续阅读 (65)