这篇文章本来是我在Chainline Newsletter写的，不过后来我经常在推特上收到相关内容的@，所以我现在在我的博客上重新发布这篇文章，内容略有修改。我一直在思考“错误的抽象”所带来的结果，我在RailsConf2014“细枝末节”的演讲中有一部分说道：重复是比错误的抽象更低成本的。在摘要中，我也建议道：建议使用重复而不是错误的抽象。这个长篇演讲中的小插曲却一石激起千层浪，引起了强烈的反响。少数人觉得我糊涂了，但是更多的人对下面这句表示认同：这些，无数次的这些情况！很多条都像如下这条这么说！“@BonzoESC:”重复是比错误的抽象更低成本的“ @sandimetz @rbonales pic.twitter.com/3qMI0waqWb”-41个蓝色调（@pims）2014.3.7这些反应的力量使我意识到“错误的抽象”所带来的问题是如此普遍和棘手，下文是我提出的几个问题：1、程序员A发现了重复。2、程序员A抽取了重复部分并给它命名。这就创造了一个新的抽象，它可以是一个新的方法，甚至也可能是一个新的类。3、程序员A用这个新的抽象代替了重复。吼！这段代码棒极了，程序员A欢快的跑了起来。4、时光流逝。5、针对目前这个近乎完美的抽象出现了一个新的需求。6、程序员B被分配了实现这个需求的任务。程序员B认为保留这些原来的抽象是荣誉攸关的，但是因为每种情况都不太一样，只能修改这些代码来 ...继续阅读 (16)

前言Java 开发过程经常需要编写有固定格式的代码，例如说声明一个私有变量，logger或者bean等等。对于这种小范围的代码生成，我们可以利用 IDEA 提供的Live Templates功能。刚开始觉得它只是一个简单的Code Snippet，后来发现它支持变量函数配置，可以支持很复杂的代码生成。下面我来介绍一下Live Templates的用法。基本使用IDEA 自带很多常用的动态模板，在 Java 代码中输入fori，回车就会出现for (int i = 0; i < ; i++) { }按Tab可以在各个空白处跳转，手动填值。自定义 Template官方自带模板毕竟不能满足我们个人编码风格的需要，Live Templates提供了变量函数的方式供我们自定义。简单用法新增自定义模板，首先需要填写触发单词（即 Abbreviation），描述是可选的，然后定义模板的上下文，点击define选择Java，这样在编辑 Java 的时候就会触发当前模板，定义完上下文之后，就可以填写模板了。下面列举几个我常用的简单模板==========---------- System.out.println($END$) ==========---------- private final static String $varName$ = "$var$";` ==========----- ...继续阅读 (29)

【伯乐在线导读】：2009年，美国 Radford 大学心理学系的 Michael G. Aamodt 博士做了一项关于离婚率的调查研究。博士最初是为了研究“美国执法部门警官的离婚率要远高于其他职业人群的平均水平”这一普遍而奇怪的现象，但此项课题的研究，还顺带产生了许多有用的副成果。发现绝大多数工程专业的从业人员的离婚率都位于 13% 以下。详情看这里：http://blog.jobbole.com/86055/国外程序员 Bruce Lucas 今年 1 月份在 Facebook 发的一个帖子。他认为是程序员是可靠的约会对象和伴侣选择，列举了 20 个理由。1、程序员聪明他们透彻掌握自己知道的东西，并且总是在学习新东西。当遇到不懂的事时，他们热衷于去学习。他们从小就有了这种心态，因而积累了很多知识，随时准备与他人分享。2、他们会珍视你们之间的感情/关系，且意识到并不是每个人都有火辣的身材这是真的。3、程序员是问题解决者如果事情出错了，他们会竭尽全力解决（fix）。4、相对其他人群来说，程序员都有可观的收入和你交往的程序员很有可能非常富有，因此你大可放心的在一个高级场所就餐，而且不需要担心要掏腰包。Mark Zuckerberg 是世界上最富有、最成功和最有能力的科技企业家之一。他是通过 Facebook 社交网络改变世界的程序员。如果你正在找寻一个成功的伴侣，绝大多数程序员有资格 ...继续阅读 (24)

当我们讨论微服务架构时，我们通常会和Monolithic架构（单体架构 ）进行比较。在Monolithic架构中，一个简单的应用会随着功能的增加、时间的推移变得越来越庞大。当Monoltithic App变成一个庞然大物，就没有人能够完全理解它究竟做了什么。此时无论是添加新功能，还是修复Bug，都是一个非常痛苦、异常耗时的过程。Microservices架构渐渐被许多公司采用（Amazon、eBay、Netflix），用于解决Monolithic架构带来的问题。其思路是将应用分解为小的、可以相互组合的Microservices。这些Microservices通过轻量级的机制进行交互，通常会采用基于HTTP协议的服务。每个Microservices完成一个独立的业务逻辑，它可以是一个HTTP API服务，提供给其他服务或者客户端使用。也可以是一个ETL服务，用于完成数据迁移工作。每个Microservices除了在业务独立外，也会有自己独立的运行环境，独立的开发、部署流程。这种独立性给服务的部署和运营带来很大的挑战。因此持续部署（Continuous Deployment）是Microservices场景下一个重要的技术实践。本文将介绍持续部署Microservices的实践和准则。实践:使用Docker容器化服务采用Docker Compose运行测试准则:构建适合团队的持续部署流 ...继续阅读 (28)

在未来的 12 到 24个月，即 2018 年到 2019 年，程序员的聘用方式将会彻底地发生改变。2004 到 2014年之间，我任职于世界上最大的开源软件公司红帽公司。2004年的7月，当我在红帽公司开始第一天工作时，我的上司 Marty Messer 对我说：“你在这里所做的一切工作都是开源的。在将来，你不再需要简历，人们可以直接通过谷歌来了解你。”在当时，这是在红帽公司工作的其中一个独特之处：我们可以在开源社区里创立自己的个人品牌和声誉。我们通过邮件列表、bug 跟踪表单（bug trackers）以及提交到 Mercurial、Subversion 和 CVS 仓库的源代码与其他软件工程师进行交流。所有的这些交流，都是公开的，并且可以被谷歌进行索引。到了2017年，我们已经生活在开源的世界里了，进入了软件开源的时代。下面两件事，可以让你真切地感受到开源时代的到来：微软曾经是闭源私有软件的典型代表、反对开源的圣斗士，如今已经全心全意地拥抱开源软件，成立了 .Net 基金会（红帽是其中的一员） 并且加入 Linux 基金会。.Net 现在已经作为开源项目进行开发。GitHub 已经成为了一个奇特的社交网络，它把问题跟踪（issue tracking）和分布式代码控制捆绑在一起。对那些主要是拥有闭源软件背景的软件开发者来说，他们还没真正了解到开源时代的到来。开源对他们来说就，等 ...继续阅读 (25)

在上一篇文章里面，通过对 DHH 的文章以及 DHH 和 Kent Beck 等讨论的分析，我阐述了对 TDD 的理解和分类，现在来继续聊聊 TDD的实施和分层。现在还有非常多的软件工程师在质疑 TDD 的可行性，比如太难不会、成本太高无法推动、意义不是很大等，但是他们却一直都在做着TDD，只不过没有意识到而已，这便是“不识庐山真面目，只缘身在此山中”。TDD的实施一般分为思维层面和技术层面。一般来说，思维层面上的实施成本较低、容易接受，但是缺点很多，比如难以传递、难以持续获得快速反馈等；而技术层面上的实施一般成本较高、不容易被人接受，但是优点更多，比如可以获得快速反馈、更容易传递和协作等。而现实世界中TDD的实施一般分为三个阶段，即无意识的TDD、被动通过技术实现的TDD、以及有意识和主动通过技术实现的TDD。第一阶段：无意识的TDD对于软件开发人员，当他们拿到一个新的软件需求时，首先会思考如何实现，其中包括当前软件架构、业务分解、实现设计、代码分层、代码实现等。然后通过思考和设计所得到的产出物来驱动代码实现，进而在代码实现中会思考如何通过一个或多个函数或者算法来实现业务逻辑。所以软件系统的实现要先通过意识层面的思考，再进行技术层面的工作。当开发人员思考和设计这些函数或者方法的时候，一般都会思考它们有哪些参数，然后想象将这些参数换成真实的数据后传递进去，会得到怎样的返回值。好一点 ...继续阅读 (43)

施乐（Xerox）的 Star 电脑影响深远当史蒂夫·乔布斯（Steve Jobs）找微软作为 Macintosh（麦金塔电脑）的首个第三方应用软件开发者时，他就思考过他们可能会把苹果的创意复制到基于 PC 机的用户界面上。作为早期能为 Macintosh 开发的条件，斯蒂夫要微软保证至少在 Macintosh 首发（first shipment）的一年内，不能发行任何鼠标应用软件。微软的主系统程序员 Neil Konzen 被分配到了 Mac 项目，这个年轻有为的 Apple II（苹果第二代电脑）黑客成长于西雅图的郊区。当他还是个高中生的时候，就已经开始为微软工作了，并且他独立地为成功的 Z80扩展卡（可以使 Apple II 运行 CP/M 系统的软件）编写了系统软件。因为 Neil 对苹果（Apple）的喜爱，微软顺理成章地把他分配到这个既新奇又高度机密的 Macintosh 计划。尽管 Macintosh OS（麦金塔电脑操作系统）迅速迭代，他依然尽职地集成微软基于字节码（byte-code）的解释环境（interpreted environment）（实际上复制自施乐注重内存效率甚于执行速度的系统，这恰好适合 Mac 有限的内存）。因此 Neil 跃居为微软在 Mac 系统技术细节方面的专家。到 1983 年中期，微软已经能很好地向我们展示他们正在进行的电子制表软件（s ...继续阅读 (24)

今天，我来为大家解读一幅来自 TurnOff.us 的漫画 “InSide The Linux Kernel” 。TurnOff.us是一个极客漫画网站，作者Daniel Stori 画了一些非常有趣的关于编程语言、Web、云计算、Linux 相关的漫画。今天解读的便是其中的一篇。在开始，我们先来看看这幅漫画的全貌！这幅漫画是以一个房子的侧方刨面图来绘画的。使用这样的一个房子来代表 Linux 内核。地基作为一个房子，最重要的莫过于其地基，在这个图片里，我们也从最下面的地基开始看起：地基（底层）由一排排的文件柜组成，井然有序，文件柜里放置着“文件”——电脑中的文件。左上角，有一只胸前挂着 421 号牌的小企鹅，它表示着 PID（进程 ID（Process ID）） 为 421 的进程，它正在查看文件柜中的文件，这代表系统中正有一个进程在访问文件系统。在右下角有一只小狗，它是看门狗（watchdog） ，这代表对文件系统的监控。一层（地面层）看完了地基，接下来我们来看地基上面的一层，都有哪些东西。在这一层，最引人瞩目的莫过于中间的一块垫子，众多小企鹅在围着着桌子坐着。这个垫子的区域代表进程表。左上角有一个小企鹅，站着，仿佛在说些什么这显然是一位家长式的人物，不过看起来周围坐的那些小企鹅不是很听话——你看有好多走神、自顾自聊天的——“喂喂，说你呢，哇塞娃（171），转过身来”。它代表着 ...继续阅读 (27)

一、人工智能和新科技革命2017年围棋界发生了一件比较重要事，Master（Alphago）以60连胜横扫天下，击败各路世界冠军，人工智能以气势如虹的姿态出现在我们人类的面前。围棋曾经一度被称为“人类智慧的堡垒”，如今，这座堡垒也随之成为过去。从2016年三月份AlphaGo击败李世石开始，AI全面进入我们大众的视野，对于它的讨论变得更为火热起来，整个业界普遍认为，它很可能带来下一次科技革命，并且，在未来可预见的10多年里，深刻得改变我们的生活。其实，AI除了可以做我们熟知的人脸、语音等识别之外，它可以做蛮多有趣的事情。例如，让AI学习大量古诗之后写古诗，并且可以写出质量非常不错的古诗。又或者，将两部设计造型不同的汽车进行融合，形成全新一种设计风格的新汽车造型。还有，之前大家在朋友圈里可能看过的，将相片转换成对应的艺术风格的画作。当前，人工智能已经在图像、语音等多个领域的技术上，取得了全面的突破。与此同时，另外一个问题随之而来，如果这一轮的AI浪潮真的将会掀起新的科技革命，那么在可预见的未来，我们整个互联网都将发生翻天覆地的变化，深刻影响我们的生活。那么作为工程师的我，又应该以何种态度和方式应对这场时代洪流的冲击呢？在回答这个问题之前，我们先一起看看上一轮由计算机信息技术引领的科技革命中，过去30多年中国程序员的角色变化：通过上图可以简总结：编程技术在不断地发展并且走向普及，从最开 ...继续阅读 (22)

在本篇文章中，我收集了很多经验和方法。应用这些经验和方法，可以帮助我们从执行速度和内存使用等方面来优化C语言代码。简介在最近的一个项目中，我们需要开发一个运行在移动设备上但不保证图像高质量的轻量级JPEG库。期间，我总结了一些让程序运行更快的方法。在本篇文章中，我收集了一些经验和方法。应用这些经验和方法，可以帮助我们从执行速度和内存使用等方面来优化C语言代码。尽管在C代码优化方面有很多的指南，但是关于编译和你使用的编程机器方面的优化知识却很少。通常，为了让你的程序运行的更快，程序的代码量可能需要增加。代码量的增加又可能会对程序的复杂度和可读性带来不利的影响。这对于在手机、PDA等对于内存使用有很多限制的小型设备上编写程序时是不被允许的。因此，在代码优化时，我们的座右铭应该是确保内存使用和执行速度两方面都得到优化。声明实际上，在我的项目中，我使用了很多优化ARM编程的方法（该项目是基于ARM平台的），也使用了很多互联网上面的方法。但并不是所有文章提到的方法都能起到很好的作用。所以，我对有用的和高效的方法进行了总结收集。同时，我还修改了其中的一些方法，使他们适用于所有的编程环境，而不是局限于ARM环境。哪里需要使用这些方法？没有这一点，所有的讨论都无从谈起。程序优化最重要的就是找出待优化的地方，也就是找出程序的哪些部分或者哪些模块运行缓慢亦或消耗大量的内存。只有程序的各部分经过了优化， ...继续阅读 (28)

讽刺新闻网站 Allium 曾吐槽到，”计算机编程铁律”将会被正式命名为「Google 一下，然后 Stack Overflow」。就像其他一些精彩的吐槽那样，这个玩笑并非无中生有。为何会这样说，请参见伯乐在线这篇文章《如何编程？四步走，So easy！》。Stack Overflow 是一个面向程序员的问答网站，每天有 760 万的访问量，是世界上访问量第 57 位的网站，位列 Craigslist、ESPN 和PornHub 之前。Stack Overflow 如同在编程中遇到困难的人的庇护所。无论新手还是老手，都把 Stack Overflow 作为一个主要的资源网站。不确定如何解决一个难题？把这个问题放在 Stack Overflow 上。一般来讲，半个小时之内这个问题就会被其他的用户解决（不花费你任何东西）。但切记，如果你不想让你的问题被草草地浏览，请把你的问题写清晰明了。自从 2008 年被著名博主 Jeff Atwood 和 Joel Spolsky 建立之后，Stack Overflow 迅速成为一个针对程序员的优秀问答网站。现在，Stack Overflow不再仅仅是一个学习编程的资源网站，而且对于了解编程的世界都正在发生些什么也是十分的有用。编程的世界正在变得越来越重要，但是对于外行人而言，又好像是无法理解的。我们能从Stack Over ...继续阅读 (29)

最近几年“TDD已死”的声音不断出现，特别是David Heinemeier Hansson那篇文章——《TDD is dead. Long live testing. (DHH)》引发了大量的讨论。其中最引人注目的是Kent Beck、Martin Fowler、David三人就这个举行的系列对话（辩论）——Is TDD Dead?当前国内对TDD的理解十分模糊，大部分人也没有明确和有意识的去实施TDD，因此许多人对此都有着不同的理解。其中最经典的理解就是基于代码的某个单元，使用Mock等技术编写单元测试，然后用这个单元测试来驱动开发，抑或是帮助在重构、修改以后进行回归测试。而现在大部分反对TDD的声音就是基于这个理解，比如：工期紧，时间短，写TDD太浪费时间；业务需求变化太快，修改功能都来不及，根本没有时间来写TDD；写TDD对开发人员的素质要求非常高，普通的开发人员不会写；TDD 推行的最大问题在于大多数程序员还不会「写测试用例」和「重构」；由于大量使用Mock和Stub技术，导致UT没有办法测试集成后的功能，对于测试业务价值作用不大……总结一下，技术人员拒绝TDD的主要原因在于难度大、工作量大、Mock的大量使用导致很难测试业务价值等。这些理解主要是建立在片面的理解和实践之上，而在我的认知中，TDD的核心是：先写测试，并使用它帮助开发人员t来驱动软件开发。首先是先写测试，这 ...继续阅读 (30)

jtoy 发起整理的 TensorFlow 资源，包含一些很棒的 TensorFlow 工程、库、项目等。什么是TensorFlow？TensorFlow 是一个采用数据流图（data flow graphs），用于数值计算的开源软件库。节点（Nodes）在图中表示数学操作，图中的线（edges）则表示在节点间相互联系的多维数据数组，即张量（tensor）。它灵活的架构让你可以在多种平台上展开计算，例如台式计算机中的一个或多个CPU（或GPU）、服务器、移动设备等等。TensorFlow 最初由Google Brain 小组（隶属于Google机器智能研究机构）的研究员和工程师们开发出来，用于机器学习和深度神经网络方面的研究，但这个系统的通用性使其也可广泛用于其他计算领域。教程TensorFlow 教程1– 从基础到有趣的TensorFlow程序TensorFlow 教程2– 介绍基于谷歌TensorFlow框架的深度学习，其中有些教程是学习了Newmu的Theano教程TensorFlow 实例– TensorFlow教程以及一些新手的代码实例Sungjoon的TensorFlow-101– 在Jupyter Notebook上用python写的TensorFlow教程Terry Um的TensorFlow练习– 根据其 ...继续阅读 (18)

【摘要】DevOps原则所追求的愿景，就是“让业务所要求的那些变化能随时上线可用”；DevOps的起源表明，其原则是从Agile与Lean的实践当中提炼而来，因此与Agile和Lean的原则并无二致；本文所讨论的DevOps原则可以用“人、产品、流程和工具”这4个维度来进行组织。【正文】“你在做用户故事拆分？这不是在做DevOps。”这是笔者在2016年以咨询师的身份，参与一家大型跨国金融企业的Agile和DevOps转型时所听到的话。在这家企业，Agile和DevOps明显指的是不同的东西：前者专指每日站会、计划会、回顾会等Scrum的实践和用户故事实践；后者专指自动化、工具链和基础设施等实践。过了一段时间，笔者把本文所列举的一些DevOps原则发到一个相关微信群里面，得到了这样的反馈：“怎么满眼都是敏捷和精益？”“感觉DevOps被一群不操作Op的人给玩儿坏了。”这些经历让笔者开始关心这些问题：既然Dev指的是“开发”，Ops指的是“运维”，那么到底什么是DevOps？它的原则是什么？它和敏捷、精益的关系是什么？让我们先观察一下DevOps的起源。DevOps的起源可以分为两条线第一条线是:比利时独立咨询师Patrick Debois2007年他在比利以咨询师的身份，参与了一个政府数据中心迁移中的测试工作。他在做测试时，需要频繁往返于Dev团队和Ops团队之间。Dev团队已经实 ...继续阅读 (31)

大家都知道， 在所有的上班族当中，软件工程师是一群最有特点，智商最高，最自命不凡的人。我非常确信这一点——因为我就要嫁给这样一个人了。但是，为了让这群自命不凡 的人能拜倒在自己的石榴裙下，你不必像我一样把一生的幸福搭进去。我这里有11个非常巧妙的技巧，运用这些技巧，你可从这些程序员口中赚取到“你好厉害 呀”这样的话。一、写纯文本格式的邮件程序员通常不喜欢你那些花里胡哨的邮件——比如粉红的标题、粗体的HTML格式的邮件内容、并且还内嵌图片。他们喜欢的是简洁命令的纯文字表述。如果你想 强调某句话，在那句话两头加上*两个星号*。如果你想再强调一下，加上_两个下划线_。永远永远不要在信的末尾加上“祝好运”三个字。二、会议中说“这跟我们目前讨论的话题相关吗？”每当有一个论点某人引入时，你要记得说类似这样的话,“你说的这个事跟我们目前讨论的问题相关吗？”即使你你判断错误，你也会因为这句话而加分。三、提到Hacker News的头条内容浏览一下 Hacker News的首页，记住它的头条都有那些内容。当你遇到一个程序员，跟他聊天时，提到这些内容。这在聊天中非常管用，不管你们聊什么。比如下面这个对话：你: 你好，吉尔吉尔: 你好你: 你知道吗，iTerm2 2.0 发布了！吉尔: 我也看到了！你: 太棒了，不是吗？哦，有个事情正要找你….四、拿项目经理取乐如果你想让程序员知道你跟他们是一伙的，没有 ...继续阅读 (46)

慎于说Yes在没有搞清楚开发需求、任务工作量、团队期望值之前，有前途的程序员不会轻易答应。特别是对于新人来说，比较急于表现自己，对于同事或者老板的工作安排来者不拒，精神可嘉，方法不可取。承诺太多，会出现自己无法按时完成的情况，即使按时完成，也可能没有达到别人的期望值，长期以往别人对你的失望会越来越多。敢于说No看起来和第一条雷同，其实细究起来不一样。第二条执行起来比第一条难得多。当遇到明显不合理的要求时，可以考虑拒绝，前提是准备好了全面充分的理由。不要经常说No，但是一旦说了，就要切中要害。有前途的程序员不会闷头干活，知道自己的定位和团队期望，分清楚哪些是不合理的要求，哪些是合理的要求，然后把明显不合理的要求和领导沟通下，取得支持。构建自己的知识体系在信息爆炸的年代，碎片化的知识很多，系统学习的时间越来越少，如果没有自己的知识体系，很容易被淹没在知识的海洋中，而且难以记忆。100分程序员推荐的做法，通过Wiki或者其他知识管理工具构建一个知识框架，大的分类可以包括软技能、架构、语言、前端、后端等，小的分类可以更细化。培养大局观程序员比较容易陷入的困境是专注于自己的一亩三分地，不关心团队的进度和业绩，也不关心软件的整体架构和其他模块。这种状态长期下去没有好处，特别是在大公司中，逐渐成长为一颗螺丝钉。100分程序员会在工作之余，多看看其他在做什么，看看团队的整体规划，看看软件系统的架构 ...继续阅读 (17)

有两个非常不一般的群体，他们活在段子手的世界里，把自黑和被黑作为生活中的一部分。一个宣称“敲代码能够缓解寂寞”，一个将自黑进行到底，“给你讲个笑话，我是个HR”。他们就是程序员和HR。这两个本来就槽点满满的群体，凑在一块互怼更是能演出一部大戏。下面就来盘点一下HR招聘程序员过程中双方的互相嫌弃。（以下内容爆笑但纯属娱乐，请勿对号入座）请用一句话描述你们队对方的要求HR：接受面试邀请，不穿拖鞋，还主动交流的程序员比吴彦祖更帅气性感。程序员：除了面试和离职，尽量不要有关系。1.关于程序员标配：双肩包、拖鞋、黑框眼镜程序员：真正的高手往往深藏不露，你什么时候见过乔布斯穿西装!HR：因为他抢镜的脚趾头，整场面试没法专心，招了他怕拉不回整个公司的画风。2.关于HR招聘程序员的渠道程序员：兴冲冲联系论坛里想找程序员男友的萌妹子，没想到都是HR的骗局，你们赔我一颗纯纯的少男之心HR:为了找到程序员，不仅要潜入各大不说人话的论坛，还要到处装萌妹子，现在我都怀疑自己从事的不是正规职业3.关于程序员嫌弃HR不懂技术程序员：和不懂技术的人聊技术，简直是对我编码人生的极大侮辱HR:当年我还是个懵懂的HR,看每个程序员都像大牛。后来才发现，态度傲慢像大牛的，技术往往渣的像小白！4.关于招聘时的薪水程序员:HR们懂什么，竟然随便评价我的价值。压低我的薪酬以讨好老板，简直可恶。HR:背锅的HR,冤枉的HR！都以 ...继续阅读 (31)

WeTest导读分布式系统理念渐渐成为了后台架构技术的重要选择，本文介绍了作者在手游领域对分布式系统进行的种种尝试，并在尝试中制定了对服务的定义、整体框架的构建以及服务内部拆分的流程。前言业务规模不断扩大，对稳定性、扩展性的要求不断提高，推动了后台架构技术的不断革新。面对日益复杂的需求，分布式系统的理念也逐渐深入到后台开发者的骨髓。2013年，借着手游热潮我对分布式系统开始尝试。在近三年的摸爬滚打中，踩过不少坑，也从业界技术发展中吸取一些经验，逐渐形成了目前的设计思路。这里和大家分享点心得，不敢奢谈有多大参考价值，权当抛砖引玉吧。1. 失败的首次尝试最初考虑使用分布式的出发点很简单：解决端游开发时单点结构导致容灾、扩容困难的问题。一种朴素的想法就是将相同功能的进程作为一个整体对外提供服务。这里简要描述下基本框架：这种架构提供了三个基本组件:Client API, 服务请求者API:从 Cluster Center Server 获取服务提供者地址向Server集群内所有实例注册，注册成功则认为可用通过负载均衡算法，选择一个Server实例通信检测Server集群内各实例的运行状态Server API, 服务提供者API:向 Cluster Center Server 上报自己的状态、访问地址等接收 Client API 的注册，并提供服务向已经注册成功的Client定时汇报状态Cl ...继续阅读 (51)

QQ18年1999年2月10日，腾讯QQ横空出世。光阴荏苒，那个在你屏幕右下角频频闪动的企鹅已经度过了18个年头。随着QQ一同成长的你，还记得它最初的摸样吗？1999年：腾讯QQ的前身OICQ诞生，该版本具备中文网络寻呼机、公共聊天室以及传输文件功能。1999年QQ界面2000年，OICQ正式更名为QQ，发布视频聊天功能、QQ群和QQ秀等功能。2003年版本，QQ发布聊天场景、捕捉屏幕、给好友播放录影及QQ炫铃等功能。2004年，QQ新增个人网络硬盘、远程协助和QQ小秘书功能。···几经更迭，QQ版本也产生许多变化，很多操作方式都变了，也让QQ更有现代感了。如今的QQ越来越精美，越来越简洁，如你所见。据不完全统计，腾讯QQ月活用户达到8.7亿左右，而这个数字还在不断增加。。。如此庞大的用户群的任何行为，都会产生巨大的影响。2017年春节，QQ推出AR红包加入红包大战，经调查手机QQ的红包全网渗透率达到52.9%。在此期间，后台想必又一次承受了海量的压力，年后第一波推送，来看看腾讯内部对QQ后台的接口处理的相关技术干货，或许可以给到你答案。一背景QQ后台提供了一套内部访问的统一服务接口，对腾讯各业务部门提供统一的资料关系链访问服务，后面我们把这套接口简称为DB。现在说说分set的背景：2013年的某一天，某个业务的小朋友在申请正式环境的DB接入权限后，使用正式环境来验证刚写完的测试程 ...继续阅读 (37)

在服务器端程序开发领域，性能问题一直是备受关注的重点。业界有大量的框架、组件、类库都是以性能为卖点而广为人知。然而，服务器端程序在性能问题上应该有何种基本思路，这个却很少被这些项目的文档提及。本文正式希望介绍服务器端解决性能问题的基本策略和经典实践，并分为几个部分来说明：1.缓存策略的概念和实例2.缓存策略的难点：不同特点的缓存数据的清理机制3.分布策略的概念和实例4.分布策略的难点：共享数据安全性与代码复杂度的平衡缓存缓存策略的概念我们提到服务器端性能问题的时候，往往会混淆不清。因为当我们访问一个服务器时，出现服务卡住不能得到数据，就会认为是“性能问题”。但是实际上这个性能问题可能是有不同的原因，表现出来都是针对客户请求的延迟很长甚至中断。我们来看看这些原因有哪些：第一个是所谓并发数不足，也就是同时请求的客户过多，导致超过容纳能力的客户被拒绝服务，这种情况往往会因为服务器内存耗尽而导致的；第二个是处理延迟过长，也就是有一些客户的请求处理时间已经超过用户可以忍受的长度，这种情况常常表现为CPU占用满额100%。我们在服务器开发的时候，最常用到的有下面这几种硬件：CPU、内存、磁盘、网卡。其中CPU是代表计算机处理时间的，硬盘的空间一般很大，主要是读写磁盘会带来比较大的处理延迟，而内存、网卡则是受存储、带宽的容量限制的。所以当我们的服务器出现性能问题的时候，就是这几个硬件某一个甚至几 ...继续阅读 (21)

由于配置是运行过那么长时间，很稳定，基本上不考虑，所以本次主要是sql的优化，并且集中在开源中国的个人空间。下面是这次优化的数据库版本：案例一：粉丝查询优化粉丝查询有2条sql--查询所有粉丝 SELECT user FROM osc_friends f INNER JOIN osc_users u ON u.id=f.user AND f.friend=? AND f.user? ORDER BY create_time DESC --查询粉丝数量 SELECT COUNT(friend) FROM osc_friends f INNER JOIN osc_users u ON u.id=f.user AND f.friend = ? AND f.user?这两个查询在业务可以优化，inner join一个osc_users表目的是去掉osc_friends里面自带了自己的userid，偏偏osc_users表是比较大的表，为啥这样设计，可以看看早年红薯分享的OSChina 用户动态设计说明优化思路简化sql，自带的userid的逻辑放到代码层去处理优化后SELECT user FROM osc_friends f WHERE f.friend=? ORDER BY create_time DESC SELECT COUNT(*) FROM osc_friends f WH ...继续阅读 (23)

刚做开发人员的时候，需要掌握的东西非常多。首先是编程语言本身，还有所有你用到的框架的的特定用法，之后（也可能是之前），前端开发的东西也会混进来，在开发过程中你还要考虑数据存在哪的问题。起初，由于你有太多东西需要迅速掌握，在应用设计的过程中，会倾向于把数据库放在后面考虑（大概因为它对用户的使用体验没什么影响）。结果就是在处理数据库的时候，会发现很多不好的实践。这里举几个例子。1. Storing images 储存图片数据库里不应该放图片。你可以做的事情并不代表你就应该去做。图片会占用数据库里相当大的空间，吃掉不必要的 IO 资源从而拖慢应用。这个错误最常出现的情况，就是新人将图片用 base64 编码，然后将其储存在很大的 text/blob 字段当中。更好的办法是直接将图片上传至像 Amazon S3 这样的云服务上，然后用数据库里用 text 字段储存图片的 URL。每次要加载一张图片的时候，只要把图片的 URL 输出到有效的标签里就可以了。这会极大地提升网页的响应速度，对大规模 Web 应用非常有帮助。2. Limit/Offset分页在很多应用中都非常常见。从你开始学习 SQL，（你就该知道）最直接的分页方法就是先用 ORDER BY 对数据库的一些列进行排序，然后 LIMIT 返回的结果数，对除第一页外的每一页使用 OFFSET。这看起来很符合逻辑，直到你处理中等规模应用 ...继续阅读 (35)

全球最大的 IT 咨询公司高德纳（Gartner），有一个“技术热门度曲线”模型（Gartner Hype Cycle）。该模型认为，一门技术的发展要经历五个阶段。（1）启动期（Innovation Trigger）该技术刚刚诞生，还只是一个概念，不具有可用性，无法评估商业潜力。媒体有所报道，引起了外界的兴趣。（2）泡沫期（Peak of Inflated Expectations）该技术逐步成型，出现了个别成功的案例，一些激进的公司开始跟进。媒体开始大肆报导，伴有各种非理性的渲染，产品的知名度达到高峰。（3）低谷期（Trough of Disillusionment）该技术的局限和缺点逐步暴露，对它的兴趣开始减弱。基于它的产品，大部分被市场淘汰或者失败，只有那些找到早期用户的公司艰难地活了下来。媒体对它的报道逐步冷却，前景不明。（4）爬升期（Slope of Enlightenment）该技术的优缺点越来越明显，细节逐渐清晰，越来越多的人开始理解它。基于它的第二代和第三代产品出现，更多的企业开始尝试，可复制的成功使用模式出现。媒体重新认识它，业界这一次给予了高度的理性的关注。（5）高原期（Plateau of Productivity）经过不断发展，该技术慢慢成为了主流。技术标准得到了清晰定义，使用起来越发方便好用，市场占有率越来越高，进入稳定应用阶段。配 ...继续阅读 (23)

最近从老东家离职，跳出来跟这几个以前的老同事，拉了一个创业团队，准备干一票，去之前也了解了一番，此次将使用C语言来开发，对于毕业之后一直从事C++面向对象思维编码的我来说，虽然不舍，但是仔细想了下，这都不是事，谁说用C语言写不了面向对象？众所周知面向对象的三个特性：封装性、继承性、多态性。这几个特性的具体含义我等会会班门弄斧讲一下含义，下面，请允许我先用C++面向对象思维将设计模式中最常用的简单工厂模式写一边，相信这三个特性不言而喻。以下我将用一个工厂类实现具体汽车的生产，奔驰车、宝马车、奥迪车都将通过工厂类来生产，由父类指针指向具体的汽车实例：头文件：//Car.h #ifndef CAR_H_ #define CAR_H_ typedef enum CarType_E { CAR_TYPE_BENZE = 0, CAR_TYPE_BMW , CAR_TYPE_AUDI , CAR_TYPE_NONE , }CarType_E; class BaseCar { public: BaseCar(CarType_E CarType); virtual ~BaseCar(); virtual void CarSpeaker(); CarType_E _CarType; }; class BenzeCar : public BaseCar { publ ...继续阅读 (15)

伯乐在线提醒：英文原文写于 2009 年 5 月，所以下文中的数字，皆为当年的数据。完全自有的、自创的消费者品牌能赢得长远的成功“我们是用现有的词取名，还是造个新词？” 经常有做消费者产服务的企业家这样问我。2009 年，微软公司重新推出的微软 MSN 即时搜索——“Bing”，我想是时候更新一下我对于起名、造词和品牌的一些旧想法了。我相信比起使用字面意思（例如 Travel.com ，RealEstate.com ，或者 JobReviews.com），造一个新词（例如我的团队创造的 Expedia ，Zillow，或者最近的 Glassdoor ）从长远来看是更强有力的，这应该不足为奇。为什么？一个简短的答案就是：当你成功地创造了一个新词，并且能用日常用语来介绍解释，那么你就拥有了它。它变成了一个不会和任何其他名字混淆，并且不会被竞争者侵占的主要区分资产。在最好的情况下，你最终会定义一个全新的类别——Kleenex、Levis、Polaroids、Nike、Ebay。自己创造一个品牌的劣势，就是它很难，而且大多数时候要把一个新词烙进消费者的脑中时，需要很大代价并且很费时的。一个用现有词汇演化而来的品牌名称的诱惑是很难抗拒的，它不需要很多的品牌推广预算，因为根本不需要过多的解释去描述 Photos.com 是干什么的。它已经是一个词，对大家来说已经有了充分的意义。然而，也正是因为 ...继续阅读 (28)

【伯乐在线导读】：Quora 上有个的问答贴：《早在 25 年前微软员工超过 10 万人，当 Google 员工数量也突破这个数字时，她所面临的成长阵痛的最佳例子是什么样的？》。2015 年女程序员 Olga Chotinun 的回答分享，2000+ 顶。伯乐在线/nemoo 编译如下：我在微软工作多年后加入了谷歌，一年后又离开谷歌去了一家创业公司 Box（现在已不再是创业公司）。原因很简单：绩效考核体系。当开发人员的薪酬几乎不取决于产品质量，而是在很大程度上取决于他与同行相比表现如何时，工程师文化就会受损。开发人员合作的可能性更小，相互竞争的可能性更大了，他们会使用会议/邮件压迫别人并显示自己的优势，甚至用一些不易察觉的办法将别人的想法说成是他的。当你加入一家还没 IPO（首次公开募股）的创业公司时，会立即观察到差异：开发人员很乐于坐下来与你合作，用大家都可以接受的语言，以建设性的方式举行会议和讨论，唯一的目标就是要解决问题。大家都兴奋地分享自己的想法，不必担心自己的想法会被他人“据为己有”。当同伴获得成功时，人们会发自内心地感到高兴。如果看到别人的想法更有益于这个项目，他们会很乐意放弃自己的想法，并支持新想法。重要的是，一个好的产品可以准时发布。公司的整个氛围是愉快的，周围都是想要为你的成功积极贡献力量的好心人。因为这样能使他们的工作更容易，公司更成功，也能帮他们赚到钱。随着公 ...继续阅读 (34)

在Stack Overflow，我们经常会谈论为什么我们信仰远程工作。与此同时，我们已经在远程工作方面取得了非常棒的成绩。事实上，在我们2016年的公司敬业度调查中显示，88%的远程工作人员认为他们有很高的参与感。就整个公司而言，这一比例是85%。对于我们这个行业中的其他公司而言，平均比例为71%。此外，远程工作人员在“工作与生活融合”及“社会联系”方面，较总体水平而言有着更高的评价。所以我们是怎样进行正确的远程工作的呢？远程工作可不是你在公司里听到的“你可以在家工作”这种并无新意的政策。就像一些公司在他们的产品中采取移动优先政策一样，我们在公司文化中采取了远程优先的策略。远程优先意味着，远程工作是你的默认选项。这就意味着我们要确保远程工作人员和在办公室里的工作人员一样是团队的一部分。我说的这些能否吸引你和你的团队呢？如果答案是肯定的，我们在这里整理了一些最佳实践供你参考。会议我们有三百名多名员工，分布在我们的纽约总部，丹佛和伦敦的办公室，以及85名远程工作人员。为此我们精心设计了有关开会的最佳实践。对我们来说远程工作优先意味着，当有人置身于会场之外时，我们使用谷歌环聊（Google Hangouts）来进行“面对面”的交流。如果你坐在办公室，那你就在办公室里开会。如果你的办公桌在家里，你就在家里开会。我们早已习惯了这样做，以至于处在同一个办公室的人们也会使用谷歌环聊来开会。最近我 ...继续阅读 (28)

此项目是自己学习搜索引擎过程中的一些心得，在使用 Go 语言的时候，发现了悟空这个搜索引擎项目，结合此项目代码以及《信息检索导论》，自己对搜索引擎的原理是实现都有了一个初步的认识，然后结合工作中可能遇到的场景，做了一个简单的 Demo。写下这篇文章，可能比较啰嗦，希望帮助到需要的人。项目代码地址:https://github.com/LiuRoy/sakura基础知识一个简单例子假如有四个文档，分别代表四部电影的名字：The Shawshank RedemptionForrest GumpThe GodfatherThe Dark Knight如果我们想根据这四个文档建立信息检索，即输入查找词就可以找到包含此词的所有电影，最直观的实现方式是建立一个矩阵，每一行代表一个词，每一列代表一个文档，取值1/0代表该此是否在该文档中。如下：如果输入是Dark，只需要找到Dark对应的行，选出值为1对应的文档即可。当输入是多个单词的时候，例如：The Gump，我们可以分别找到The和Gump对应的行：1011和0100，如果是想做AND运算（既包括The也包括Gump的电影），1011和0100按位与操作返回0000，即没有满足查询的电影；如果是OR运算（包括The或者包括Gump的电影），1011和0100按位与操作返回1111，这四部电影都满足查询。实际情况是我们需要检索的文档很多，一个 ...继续阅读 (18)

程序员这个职业究竟可以干多少年，在中国这片神奇的土地上，很多人都说只能干到30岁，然后就需要转型，就像《程序员技术练级攻略》这篇文章很多人回复到这种玩法会玩死人的一样。我在很多面试中，问到应聘者未来的规划都能听到好些应聘都说程序员是个青春饭。因为，大多数程序员都认为，编程这个事只能干到30岁，最多35岁吧。每每我听到这样的言论，都让我感到相当的无语，大家都希望能像《21天速成C++》那样速成，好多时候超级有想和他们争论的冲动，但后来想想算了，因为你无法帮助那些只想呆在井底思维封闭而且想走捷径速成的人。今天，我们又来谈这个老话题，因为我看到一篇论文，但是也一定会有很多人都会找出各种理由来论证这篇论文的是错的，无所谓了，我把这篇文章送给那些和我一样准备为技术和编程执着和坚持的人。论文首先，我们先来看一篇论文《Is Programming Knowledge Related to Age?》（PDF链接），这篇论文是两个北卡罗莱纳州立大学计算机科学系的两个人Patrick Morrison 和 Emerson Murphy-Hill 对StackOverflow.com上的用户做了相关的数据挖掘得出来的一些数据。（我们知道StackOverflow.com上的数据是公开的，任何人都可以用来分析和统计，所以这篇论文的真实性是有的）数据采样和清洗条件如下：（数据全量是1694981用户，平均 ...继续阅读 (25)

我喜欢优秀的技术演讲。我不仅喜欢观看这类演讲，并乐于与人分享。最近我有充足的空闲时间，于是整理出了一个“每个程序员必看”的技术演讲列表。在选材时，我并没有把演讲的主题局限于具体的语言或库，而是选择了一些有宏观视野的内容，希望更能够被更多人所接受。如果你觉得我漏掉了哪些你喜欢的演讲，请留言告诉我。Happy watching!一、The future of technology | 科技的未来视频：https://youtu.be/gTAghAJcO1o关于科技的未来，Alan Kay有着比其他人更深刻的思考。在这个演讲中，Kay解释了施乐帕罗奥多研究中心是怎样在很短的一段时间内发明出如此多的新技术的。这些现在看来大名鼎鼎的技术包括了：个人电脑、位图显示、图形界面、桌面发布、文字处理、激光打印，以太网以及面向对象编程。（Alan Kay）在Kay看来，实现这一成就的关键在于一种专注于创新的企业文化。这种文化注重从最基础的研究做起，而不是仅在已有的创新的基础上升级和改良。这类创新通常需要大量的金钱投入，长时间的研究周期以及独辟蹊径的问题解决方式综合作用才能取得成功。关于未来科技趋势，另外一些重要的演讲：1.《The Mother of All Demos | 多媒体演示之祖》作者：Douglas Engelbart，鼠标之父的一个多媒体演示视频。其中包括了对超链接、计算机制图、视频会议 ...继续阅读 (21)