以下内容由[五四陈科学院]提供2017年，小视频分享成为风口的小猪，人工智能大行其道，然而并未见到什么特别的效果，所有最有意义的都在于推荐。手机方面，因为人脸解锁的流行，看上去第一次让深度学习的东西落了地。业务方面，国内似乎已经慢了，各大厂家纷纷出海，印度、印尼成了新的“”。另外，传统业务新零售热起来了。more展望2018，可能会有以下十件大事1.明年将会是科技企业海外IPO的集中年。2.人民日益增长的物质文化需要会导致继续出现人性丑陋的事件。3.企业海外开花，主战场移动到印度印尼。4.类似线上抓娃娃机的项目继续兴起。5.AI开始落地。6.房价可能会冷却到下半年后大涨。7.更加封闭，不论是网络还是经济。8.CRS影响基本悄无声息。9.python更加流行。10.人民币进入7时代。2017预测回顾1.国内污染比2016更加严重且封口更紧。- 准，帝都附近受北风影响，似乎是好点的。2.公共安全事件再一次出现。- 准，杭州保姆纵火案，别以为不是公共安全事件，涉及所有消防、物业，不敢多想。3.微信支付在国内全方位超越支付宝。- 一般准，没有全方位，至少是大范围。4.小米生态链企业要雄起一两个（出名或者IPO）。- 准，紫米和华米 都挺出名了。5.人工智能的项目依旧不产生实际超大收益。- 准。6.电子支付开始作为大鱼抢占的关键制高点。- 一般准。7.开始有国产手机厂商关门或被并购。- 准， ...继续阅读 (4)

以下内容由[五四陈科学院]提供由于上个月推出第一篇《生娃指北》https://www.54chen.com/blog/2017/07/14/born-in-beijing/后，收到了广大人民群众的反馈，特更新第二篇－采购篇。more看表物品名品牌名备注奶瓶150mlcomotomo玻璃奶瓶150mlbetta塑料250mlbetta宽口奶瓶250ml布朗博士宽口奶瓶150ml布朗博士婴儿车SilverCross大气好用，主流车型婴儿车好孩子口袋车折起来很小，但是还没用过就送人了婴儿车quintus伞车奶粉德国爱他美白金版一段出生入量不如喝了两次沐浴露加州宝宝保湿乳液加州宝宝驱蚊液加州宝宝抚触油妙思乐维生素D3Ddrops母乳宝宝出生2周后开始补d3促进钙吸收西甲硅油little remedies解决肠绞痛莫名哭闹放屁的盐水滴鼻剂little remedies买了没用过乳钙bioland半岁前只吃D3,乳钙半岁后考虑吃安抚奶嘴×4苏维妮利器，必备安抚奶嘴链*1苏维妮指甲刀苏维妮从小剪指甲，否则自己抠自己梳子苏维妮餐具套装苏维妮勺子苏维妮安抚玩具jellycat邦尼兔、小熊用处不大安抚巾 ×2麦侬贝儿流口水啃这个比啃手强婴儿床可优比早买散味餐椅可优比床垫可优比腰凳可优比能扶坐了才有用牙胶苏维小鹿不知道为啥，一咬就哭牙胶banana同上牙胶comotomo×2保温壶tiger尚未启封耳温 ...继续阅读 (7)

以下内容由[五四陈科学院]提供This is a quick guide explaining how to run GUI app in docker on mac osx.morestep 1.install two important tools#brew cask install xquartz#brew install socatstep 2.run socatsocatTCP-LISTEN:6001,reuseaddr,forkUNIX-CLIENT:\"$DISPLAY\"&step; 3.see what your real en* by ifconfig#ifconfigYou can see en0 en1 en2 and so on,choose a right one which has the right IP addrass.step 4.run dockerdockerrun-it-eXAUTHORITY=/tmp/xauth-v~/.Xauthority:/tmp/xauth-eDISPLAY=$(ifconfigen3|grep'inet'|awk'{print$2}'):1--nethost--volume=$(pwd):/workspacefastercnn/bin/bashattention: You must modify the DISP ...继续阅读 (9)

以下内容由[五四陈科学院]提供本篇纯属扯淡，技术性极高，学好社会流程之后，可以节省很多时间，也能有效减少被看不起的机会。more生娃前名词解释1.准生证这是俗称，自从放开二胎后，变名为《生育登记服务单》。这个高级，有官方网站http://syz.bjchfp.，填写对了居委会就会给你打电话。完了你自己下载打印就可以了。2.母子健康档案（也有人叫做 建卡）由卫生主管的社区卫生服务中心（这TM是个事业单位吧？），他们资料后，给你媳妇发3个册子：《母子健康档案》、《儿童保健记录》俗称体检本（有些地方要等娃生了才给）、《儿童保健健康教育手册》这本基本没卵用。3.医院建档建档是指，你媳妇怀上了，决定要去哪个医院产检和生产，这个医院要同意，首先要建立档案，简称建档。流程step 1.想生个娃了，上网站登记，准备打印准生证。step 2.一不小心怀上了，且大于42天，注意42天！step 3.带上医院验血、B超之类的能证明怀了的（验孕试纸不行）东西，和各种身份证明（具体打电话问居委会问卫生服务中心），办理母子健康档案。step 4.带上母子健康档案，排队挂号OR牛&金钱去你媳妇心宜的医院。step 5.为期十几次的产检后，生啦。注意事项step 1 里必须确定好居委会名称。step 2 里42天是很多社区的龟腚，小于这个时间人家懒得理你。step 3 人家会问你一堆的资料，提前打好电话。step ...继续阅读 (5)

以下内容由[五四陈科学院]提供Caffe is a deep learning framework made with expression, speed, and modularity in mind. It is developed by Berkeley AI Research (BAIR) and by community contributors.The official website ishttp://caffe.berkeleyvision.org/.It is easy to install it with python 2 and Ubuntu.But it is hard to install it with python 3 and centOs.moreHere are some records when I install it with Anaconda python3 on centos7.PlatformPrior to installing, have a glance through this blog and take note of the details for your platform.$cat/etc/redhat-releaseCentOSLinuxrelease7.*.*(Core)$python--versionPython3 ...继续阅读 (9)

以下内容由[五四陈科学院]提供以下是神经网络训练中经常会遇到的一些概念，进行了收集总结，供需要时查阅。LSE-最小二乘法按偏差平方和最小的原则选取拟合曲线，并且采取二项式方程为拟合曲线的方法,称为最小二乘法。它通过最小化误差的平方和寻找数据的最佳函数匹配。利用最小二乘法可以简便地求得未知的数据，并使得这些求得的数据与实际数据之间误差的平方和为最小。moreGD-梯度下降算法参考tf.train.GradientDescentOptimizer梯度下降（GD）是最小化风险函数、损失函数的一种常用方法，随机梯度下降和批量梯度下降是两种迭代求解思路。学习率是GD中最关键的参数，了每个梯度的大小，大了会反复振荡，小了会计算困难。SGD-随机梯度下降算法参考keras.optimizers.SGD为了解决GD里学习率的选择问题，SGD用随机的办法来减少计算学习率的次数。SGD伴随的一个问题是噪音较多，使得SGD并不是每次迭代都向着整体最优化方向。keras.optimizers.SGD(lr=0.01, momentum=0.0, decay=0.0, nesterov=False)参数：lr：大于0的浮点数，学习率momentum：大于0的浮点数，动量参，它模拟的是物体运动时的惯性，即更新的时候在一定程度上保留之前更新的方向，同时利用当前batch的梯度微调最终的更新方向。这样一来，可以在 ...继续阅读 (5)

以下内容由[五四陈科学院]提供前言在直播软件中，典型的过程是A用户充值，送花给B用户，B用户提现。正是有这样一条变现的道路，无数盗刷、退款、36技术的黑产人盯上了直播，报道见到映客的损失一度到了300万人民币(本文价值至少300万了:P)。外链https://www.douban.com/group/topic/89441680/本文介绍利用keras＋tensorflow，快速完成一个神经网络，从工程角度看深度学习带来的实际作用。more安装1.先升级pipchenzhen$pipinstall--upgradepip2.安装keraschenzhen$pipinstallkeras...installingcollectedpackages:numpy,scipy,six,theano,pyyaml,kerasSuccessfullyinstalledkeras-1.2.1numpy-1.12.0pyyaml-3.12scipy-0.18.1six-1.10.0theano-0.8.23.安装tensorflowchenzhen$exportTF_BINARY_URL=https://storage.apis.com/tensorflow/mac/cpu/tensorflow-1.0.0rc2-py2-none-any.whlchenzhen$pipinstall--upgra ...继续阅读 (11)

以下内容由[五四陈科学院]提供2016年，以映客为的个人直播行业从无到有，小视频行业如火如荼，GIF快手渗透到二三线城市，简单来讲，麻雀虽小也是赚钱的。相比而言，在移动互联网发展高峰到了顶点的时间点，微信和支付宝的支付相争才是年头大戏。汇总一句话，2016年，移动互联网大盘已定，大鱼只抢支付，小鱼小虾只走垂直方向，未来也机会多多。more个人方面，过去一年一直在各国支付和提现中了解细节，做一些收钱发钱的事情，关键还有一些如何防止黑产渗透到系统中进行套现的处理。映客没能处理好这个细节，一个月被人套现上百万。展望2017，可能会有以下十件大事1.国内污染比2016更加严重且封口更紧。2.公共安全事件再一次出现。3.微信支付在国内全方位超越支付宝。4.小米生态链企业要雄起一两个（出名或者IPO）。5.人工智能的项目依旧不产生实际超大收益。6.电子支付开始作为大鱼抢占的关键制高点。7.开始有国产手机厂商关门或被并购。8.直播行业常态化，变成所有应用都有的功能，收益下滑。9.云公司推出人工智能平台。10.人民币到7.2。明年见！2016预测回顾1.阿黎应该是要回来小米了。－准2.服务器行业应该不会出现啥大的热门技术了。－一般准，人工智能不算啥新技术，但的确又热了。3.的移动网络可能会有改善。－一般准，移动网络好了不少，2g用户少了许多。4.c/s结构的好用的框架开始出现。－准，微信开源的框架 ...继续阅读 (8)

以下内容由[五四陈科学院]提供近期多半时间在支付相关的业务上，特此记录一下接触到的各家情况，尽可能本着客观公正的态度进行点评（实在受不了的渠道才偏主观，见谅）。国内支付不用说，主要是微信、支付宝，另外不得不提到的还有苹果IAP、小米支付。分几部分， IAP主要在马来西亚、台湾等地使用的人不少（没接当地支付渠道的情况下）。paypal作为海外支付宝的角色，在很多外汇不管制的很方便。印度的话，商务不靠谱程度超乎想象，还是要提一提这几家mobikwiki、paytm。印尼、新马泰地区使用的话，讲一讲coda和doku。more微信支付排名是分先后的，把微信排在第一，表明了在我心中，他的江湖地位已经稳固。1) 接入方面如果是第一次接他们的用户付款，平台、公众平台、商户平台 三个的名字可以搞晕你。特别是当你发现平台的openid和公众账号的openid不是一个的时候，他们的文档会告诉你使用unionid，然后你会SB地发现线上的数据根本就TMD没有unionid，根本就TMD没有unionid！没有unionid！（重复三遍以示重要）然后，你不得不让所有的用户退出登录重新进来。总结一下三个平台的关系：平台可以得到app里的openid，确认用户的身份; 公众平台可以得到在微信里打开h5的openid，也能确认用户的身份，如果要与前一个身份对应上，需要在平台做关联，然后产生一个相等的union ...继续阅读 (5)

以下内容由[五四陈科学院]提供这是小米大树系列第三部分，前两部分见：https://www.54chen.com/blog/2016/08/06/mi2/《小米大树part2:测试之痛》https://www.54chen.com/blog/2016/08/01/mi1-dot-5/《小米大树part1.5:基础架构之痛答疑》https://www.54chen.com/blog/2016/07/29/mi/《小米大树part1:基础架构之痛》一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势。more作为开发人员，实在是难以启齿吐槽产品经理，以至于很久没有补上第三篇。－－题记引子十年前的互联网公司，大多数还没有这个岗位。如今人人都是产品经理的年代，烂大街的灵光一现的点子，不知所谓的需求描述，不着边际的实际作，无人问津的后续跟进，直接造就了产品太烂、进度缓慢的各种局面。一句话需求A君是产品，从业多年，下过海创过业，身经百战。A：我们的用户经常在这里出现了问题，我觉得要把这里拿掉，做成xxx的。开发B：好啊，我觉得也是。一个月过去了，A君遇到用户投诉，问B：当时说过的xxx怎么没有做啊？B一脸懵B：纳尼，我以为你只是随口说说。好的产品，不会提一句话需求，落实到文档到交互到协调到执行，才是好产品。老板的需求C ...继续阅读 (7)

以下内容由[五四陈科学院]提供痛点太多，竟无从下笔。–题记缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第二部分。测2010年，来自各大公司的ABCD君，都拥有良好的软件工程习惯，测试代码行行见血。即便如此，依旧不能耽搁产品的节奏，于是开始找来专门的测试人员。E君从事开发测试多年，测试经验丰富，开发只要给个连接服务的框架就可以开工，属于给了原子弹就能上天型。moreF君则一直专注在手工测试上，产生一些稀奇古怪的作方法来帮助找出问题。A:“我们可以放弃单元测试，只搞好冒烟测试bvt，每日对线上和测试环境发起测试。”E:“没问题，给我们测试时间，一定可以完成覆盖。”然后一直时间不够，就在缺少开发测试和覆盖不全的矛盾中度过了两三年。经常会出现一种情况，新功能上线了，忘记通知测试……或者通知了测试没有人力来写测试代码…不测测试工程师一直被赶着，本身招聘价位低于开发，再加上稍微能力强一点的测试工程师就想着转为开发，测试这个活就越来越没有动力了，从而矛盾开始加剧了，直到有一天，暴发。D:“开发的屁股要自己擦！”E:“测试只提供测试框架技术支持！”F:“手工测试要提前预约！”A:“MD现在真大公司！”于是 ...继续阅读 (9)

以下内容由[五四陈科学院]提供上周末发了第一篇，在微博收到了许多朋友的反馈，可能是写得匆忙，没能完整描述，特加1.5，专门针对各位的问题进行答疑。原文地址：《小米大树part1:基础架构之痛》|http://2014.54chen.com/blog/2016/07/29/mi/more问题一、中央集权Q:@浩松 …为啥我觉得博主还是没有找到原因。这个东西就和为什么要统一度量衡统一文字中央集权虽然不同地方的方言可能有差别一样的，和有没有腾讯的人一点关系都没有啊A:其实我想表达的，并非是统一度量衡这个问题，发展过程中，大家的度量衡其实是统一的。而更大的问题是，度量衡本身不科学，我们大多数时间在监控一个服务自身的qps\percentile等数值，却没有一个可用性的数值来监控和报警，这是根本点。问题二、吹腾讯Q:@咩罗 花式吹腾讯…A:完全是个无心之举，但从腾讯过去从来不参加开源到现在一点一点放出来技术细节，的确要高于行业水平。回忆一下，已经很久没有遇到QQ大规模故障了。问题三、git/memcahce也拿来说Q:@沧落海 我靠，git，memcache都能拿来说A:为什么不能拿来说，git现在是十岁多，我在讲的五六年前的事情，国内还在流行svn，我们的团队还有人连svn都没用过。而memcache，我们引入的实际上是zookeeper和memcache的合体 ...继续阅读 (25)

以下内容由[五四陈科学院]提供上周末发了第一篇，在微博收到了许多朋友的反馈，可能是写得匆忙，没能完整描述，特加1.5，专门针对各位的问题进行答疑。原文地址：《小米大树part1:基础架构之痛》|https://www.54chen.com/blog/2016/07/29/mi/more问题一、集权Q:@浩松 …为啥我觉得博主还是没有找到原因。这个东西就和为什么要统一度量衡统一文字集权虽然不同地方的方言可能有差别一样的，和有没有腾讯的人一点关系都没有啊A:其实我想表达的，并非是统一度量衡这个问题，发展过程中，大家的度量衡其实是统一的。而更大的问题是，度量衡本身不科学，我们大多数时间在监控一个服务自身的qps\percentile等数值，却没有一个可用性的数值来监控和报警，这是根本点。问题二、吹腾讯Q:@咩罗 花式吹腾讯…A:完全是个无心之举，但从腾讯过去从来不参加开源到现在一点一点放出来技术细节，的确要高于行业水平。回忆一下，已经很久没有遇到QQ大规模故障了。问题三、git/memcahce也拿来说Q:@沧落海 我靠，git，memcache都能拿来说A:为什么不能拿来说，git现在是十岁多，我在讲的五六年前的事情，国内还在流行svn，我们的团队还有人连svn都没用过。而memcache，我们引入的实际上是zookeeper和memcache的合体解决方法 ...继续阅读 (6)

以下内容由[五四陈科学院]提供题记无知和弱小不是生存的障碍，傲慢才是。 －－《三体》缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第一部分。基础2010年，第一批服务器工程师来自五湖四海，有金山、微软、谷歌、百度、人人，唯独，没有来自中国最大互联网公司－腾讯。A君（人物纯属虚构，以求表达效果）从业数年，经验丰富，说：“我觉得我们可以用一些php，简单好招人”，于是开始这样干了。B君说：“我们还可以用一些java，招人也不太难，现成的东西多”，于是这样操作了。moreC君说：“facebook的thrift也不错，我们需要一个这样的rpc框架”，于是用上了thrift。D君说：“与客户端最简单，还是用http请求吧，加上json，调起来方便”，于是就http+json了。E君和F君带来了先进的海外大公司经验，大家都深信不疑。G君带来了maven，H君带来了git，I君带来了zookeeper，J君带来了memcache，K君带来了scribe，L君带来了hadoop，M君带来了HBase，N君带来了spring。。。两年之后，诸君磨合成了以java为核心，诸多语言为辅助，看上去哪哪都大厂的基础体系。并且大 ...继续阅读 (16)

以下内容由[五四陈科学院]提供题记无知和弱小不是生存的障碍，傲慢才是。 －－《三体》缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第一部分。基础2010年，第一批服务器工程师来自五湖四海，有金山、微软、、百度、人人，唯独，没有来自最大互联网公司－腾讯。A君（人物纯属虚构，以求表达效果）从业数年，经验丰富，说：“我觉得我们可以用一些php，简单好招人”，于是开始这样干了。B君说：“我们还可以用一些java，招人也不太难，现成的东西多”，于是这样作了。moreC君说：“的thrift也不错，我们需要一个这样的rpc框架”，于是用上了thrift。D君说：“与客户端最简单，还是用http请求吧，加上json，调起来方便”，于是就http+json了。E君和F君带来了先进的海外大公司经验，大家都深信不疑。G君带来了maven，H君带来了git，I君带来了zookeeper，J君带来了memcache，K君带来了scribe，L君带来了hadoop，M君带来了HBase，N君带来了spring。。。两年之后，诸君磨合成了以java为核心，诸多语言为辅助，看上去哪哪都大厂的基础体系。并且大家都认为可以为各兄弟无脑使 ...继续阅读 (6)

以下内容由[五四陈科学院]提供有朋友在阿里云主机实现微信支付逻辑时，发现api.mch.weixin.qq.com的解析实在是太慢了。因此出现了手动修改/etc/hosts的情况，当然了，哪天微信支付要是换个机房肯定要挂。我们的机房也有相似的同题，专门记录一下。more表象代码里用curl来请求微信，经常超时，这时使用wget试验：[root@01tmp]#wgetapi.mch.weixin.qq.com--2016-06-1814:51:03--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...域名解析很久不出来测试确认是ipv6问题给wget加上-4，强制使用ipv4，如果很快，那基本上确定是ipv6惹的祸了。[root@01tmp]#wget-4api.mch.weixin.qq.com--2016-06-1817:03:52--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...123.151.71.149,123.151.79.109Connectingtoapi.mch.weixin.qq.com|123.151.71.149|:80...connected.代码分析专门写个代码来测试ipv6的解析，用到系统函数getadd ...继续阅读 (10)

以下内容由[五四陈科学院]提供这里记录了一种简单的办法，在遇到写c/c++找不到答案时的最简单找代码办法。方法是：找php怎么解决，大把的答案，然后看php源代码是怎么用c实现的。more提出我们server端在对接 play的时候，遇到了ras加密来验证参数的实现，官方也没有什么c的参考代码，java和php的网上倒是能找到一堆。java怎么解决java的实现和本文要说的内容无关，只是随带一列：publicstaticbooleanverify(StringpublicKey,byte[]data,Stringsign)throwsException{// 解密由base64编码的公钥byte[]keyBytes=Base64.decodeBase64(publicKey);System.out.println(keyBytes.length);// 构造X509EncodedKeySpec对象X509EncodedKeySpeckeySpec=newX509EncodedKeySpec(keyBytes);// KEY_ALGORITHM 指定的加密算法KeyFactorykeyFactory=KeyFactory.getInstance("RSA");// 取公钥匙对象PublicKeypubKey=keyFactory.generatePublic(keySpec);Sig ...继续阅读 (7)

以下内容由[五四陈科学院]提供2010年的时候，我们开始最早的一波做小米的服务器的同学，基本都很少互联网经验，七拼八凑的把米聊上了线，这么多年过去了，很多技术框架沉淀到了公司各处团队中去了。今天再来看，其实有很多细节，当时真的没考虑（现在也是坑）。more细节一 用nginx的proxy_pass代理java上线不平滑一个典型的架子，是nginx+resin/tomcat，然后在nginx上设置weight=1 max_fails=3 等等。在上线的时候，并没有平滑过度的手段（比如修改一下所有nginx配置拿掉一台之类的），所有的上线都是有损的。庆幸的是，移动互联网native的app，断个一两秒的不服务用户感觉不出来。细节二 监控数据很多，有用的很少线上故障的情况，不出意外就是一个模块和另一个模块之间发生了什么问题。过去的几年，我们始终没考虑过抽象出来这种数据。我们的监控数据全部是以单独一个模块自身的访问数据（qps、响应时长等），常见的问题是别人说访问你慢，访问老失败，你自己一看数据觉得还挺好。细节三 为android ios配备了http框架如果当时没有paoding-rose，我想我们会考虑做成一个标准的tcp server，中间用pb传输到手机。这样做的好处，在应对不好的移动网络的时候，http束手束脚，而tcp却得多。这一点我同样要点名嘲笑一个微博的客户端，在一样的坑里 ...继续阅读 (5)

以下内容由[五四陈科学院]提供前些天看到了老板的二十年前的文章《程序人生》，地址在这里http://t.cn/RqPJYHU，深有感触，于是也萌发了写一写的想法，看看二十年后，自己的认识是否会有所改变，当然了，即便作为职业码农近十年，很多观点依然不能构成一种完整且保证正确的人生观。题记如果一定要用几个词来形容程序员的人生观，我想那应该是：坚定、乐观、冷静、钻研。坚定//如果不能坚定地知道自己喜欢计算机这个事情，早就干点别的什么去了，码农这个事情常人看来无味极了。与上一辈程序员相比，时代留给这一辈的机会不同，裕兴、小霸王、步步高成为我们很早就启蒙计算机知识的最佳方式，从小学或者初中起，脑洞大开。在接触过的好朋友中，凡是从小接触计算机的，在初中高中已经基本可以完成一些诸如pascal\c\basic\asp之类的流行技能。他们大多干过如下的事情：1.做个人网站 2.帮教务处做报课系统 3.维护学校bbs（当然了，雷老板是这事情的鼻祖了） 4.接些外包小系统赚点外快。more上述这些枯燥的事情中，每件事情，都需要投入极大的兴趣，不计得失，才能取得一点点的成就感。如果没有坚定的想法，多半都半途而废了。乐观//如果不是乐观的态度，早被遇到的困难和歧视折磨死了。一个同学，在大连做外包行业的开发工作，毕业后干了两年到了结婚生子的年龄了，什么积蓄也没有，对整个行业失望至极，完全没有方向，回家随便找 ...继续阅读 (10)

以下内容由[五四陈科学院]提供在c++中使用protobuf的时候，大多数元素，我们可以直接set_xxx，如果有嵌套进去一个对象，会有set_allocated_xxx的方法和mutable_xxx的方法。这里有一个坑。现象首先，看pb定义：morepackagetest;messagea{requireduint32aa=1;}messageb{requiredaaaa=1;}如果使用set_allocated_aaa，同时传入了一个定义好的a，而不是new的a，如下：voidbad_case(){aaa;bbb;aa.set_aa(1);bb.set_allocated_aaa(&aa;);}编译的时候不会有错误，一运行就出问题了：***glibcdetected***./test.run:doublefreeorcorruption(out):0x00007fffc65ade20***正确的写法下面的写法，不会有问题：intgood_case1(){a*aa=newa();bbb;aa->set_aa(1);bb.set_allocated_aaa(aa);return0;}下面的写法，也不会有问题：voidgood_case2(){aaa;bbb;aa.set_aa(1);bb.mutable_aaa()->MergeFrom(aa);}原因在pb生成的对象中，析构函数统 ...继续阅读 (6)

以下内容由[五四陈科学院]提供马上过年了，先祝大家新快乐、万事如意！一群错综复杂的服务，如何去衡量质量，如何去快速找到问题，如何每个环节都有“眼线”？more一、抽象的数据yammer的metrics项目，可能算是大家用得最多的一个了，可以算qps，可以算99.9％的请求时长。这些在线上故障的发现和定位有用吗？够用吗？通过线上的事故积累，答案是，故障的发现，仅通过一个qps和percentile的绝对值来报警，误报非常高，真正的故障往往被掩盖。:(经过前辈们的探索，下面的实践的确是最佳的：1.服务抽象为主调方和被调方。2.提前商定好超时，以一分钟为单位计算成功率。3.连续三分钟的成功率低于三个九，报警。实践中从来没有误报过。:)二、抽象的返回服务在告诉监控系统成功率的时候，随带就告诉了系统，是因为1（超时）、2（用户不存在）、3（xx服务不响应）、4（存储异常）等等。出现故障的时候，报警直接会告诉你，“90％原因是超时”，连服务器上的日志都不用去看！三、抽象的调查过程通过抽象的数据，我们可以再按照每天的成功率进行统计，“天三个九”的要求会低于“分钟三个九”（不信你算一下）。日报里大致会标出 A->B 99.1% B->C 98.9% C->D 99%，很明显了，D服务有问题了，导致上面每一层都有问题。再单独看C->D抽象返回的结果统计，1占88% 2占1%等等，定位为超时原因。 ...继续阅读 (10)

以下内容由[五四陈科学院]提供2015年，是一直在学习的一年，来自腾讯小伙伴们的多年经验要在一年里吸收，包括方式方法技术方案，着实不是一件容易的事情。在这一年大部分时间，都在围绕着用户的网络问题进行着努力，让问题从出现到解决成为闭环，环环相扣，直到找不到漏洞所在。汇总一句话，2015是充实忙碌的一年，也是完全解开了前三年的一些技术疑问的一年。more生活方面，这一年搬了新家，学习了装修的过程，端午在在塞班了解了一下苦逼的帝国人民都是如何浪费生命的，年底又去了一趟大连办档案，然后在小米满了五年，签了第一份无固定期劳动合同。展望2016，可能会有以下十件大事：1.阿黎应该是要回来小米了。2.服务器行业应该不会出现啥大的热门技术了。3.的移动网络可能会有改善。4.c/s结构的好用的框架开始出现。5.进入资本冬天，各种小公司不好融资。6.国内的污染进一步加剧。7.安全生产事故再一次出现。8.造开始追求品质。9.更多的有钱人。10.人民币汇率到7。明年见！想快点找到作者也可以到weibo上留言:@54chen或者你懒得带上，请到新浪微博：@54chen ...继续阅读 (7)

以下内容由[五四陈科学院]提供本文纯粹是鸡汤，里面的内容也全是胡扯，如果觉得有点用，有可能是你经历过或者正在经历。风格迥异的团队文化，可以让在一个团队不可能发生的事情，在另一群人眼里变得十分简单。不要猜在A团队，线上故障了，或者遇到了一个什么问题，经常遇到的对话如下：— 这应该是xxx的问题，和我们这边没有关系。— 这可能由于xxx超时引起的，我们也没有办法。很多很容易发现的问题就这样放松了警惕，慢慢积累成了重大问题。more在B团队，线上故障，也有类似的对话：— 这可能是YYY的问题，我们没有办法。— 这大把握是YYY的原因，和某某没有关系。— 不要猜。（老大发话，很关键）然后B团队各部门协作起来，层层剥皮，剥洋葱一样的找到了问题在哪里，防患于未然。运维开发团队在剥皮过程中，尝试积累成工具。时间长了，在B团队再也没有人在猜问题原因了，一方面大家不要猜已经是默认，另一方面因为有各种总结出来的运营工具，让问题原因直接暴露。can do在A团队，线上发现问题，有人问起，会有如下的对话：— 这个不是我负责的，我也不清楚细节。— 这个事情需要修改代码上线才行。— 这个项目我没有参与。然后这个问题被踢来踢去，直到找到会解决的人，问题才有所缓解。在B团队，也有类似的对话：— 这个不是我负 ...继续阅读 (20)

以下内容由[五四陈科学院]提供当愤怒的用户，张牙舞爪地告诉你他遇到问题的时候，往往已经病入膏肓。－－题记作者同全国各地愤怒的用户亲密接触了很长的时间之后，做出了以下总结，希望对后来的人们能够有一点启发。一、用户IP是个不可靠的东西在实际的案例中，使用用户的IP地址去IP库里找用户属于哪个地域哪个运营商。不幸的是，IP库有可能不准。更不幸的是，连IP地址都可能是错的。实际案例中，我们遇到了运营商级别的流量劫持，用户本来是浙江移动，在某些服务器取得的IP居然是江苏电信。解决的办法：尽量不依赖IP，用smartDNS。或者多渠道纠正IP地址，使用本地客户端的运营商识别能力＋电话号码地域识别。more二、用户不是傻子，他其实都知道自己网络是好是坏许多案例，用户都会告诉你，他的QQ是好的、微信是好的，为什么你不行？你不行！看用户日志，感觉用户在撒谎。然而这并没有什么卵用。知道真相眼泪掉下来：用户在坏网络下时并不会反馈，而从坏网络－>好网络时，你如果还在原来的状态下，你不行，用户就愤怒了。解决的办法：维护好socket的connect init->connecting->connected状态，任何用户的手动操作，1）天线没变，除了connected状态外，都要转圈; 2）天线变了，除了connected状态外，都要重新开始。三、用户的愤怒，还因为反应慢当socket正在创建时，用户手动重发一 ...继续阅读 (34)

以下内容由[五四陈科学院]提供大比小好开发阶段，服务不稳定，一个大服务不如一堆小服务; 运维阶段，服务都稳定了，一堆小服务又不如一个大服务。大规模的时候了，如果能够一个进程搞定的，尽量不要拆两个进程。more少比多好如果都是大服务，自然而然地，服务数量就少。服务数量少，运维成本就相应低。快比慢好一个进程，跑得越快，qps越高，所能使用的资源越多，越能“物尽其用”。直连比队列好常见的进程间内网通讯，一般会使用直接的rpc或者是mq来中转。然而，在一般的情况下，引入mq会给服务化带来复杂度，使容量问题更加隐藏。特例监控比共性监控好强烈要报警的监控一定要是开发手工加到代码里去的，只要报警，一定是代表了可用性降低，不应该有二义性。共性监控如cpu、硬盘、内存等，只能算是知会性的报警，一般不会影响业务的可用性。进程外负载均衡比进程内好负载均衡逻辑放到一个独立进程的好处在于，这部分逻辑不常改动，同时不应该受经常上线的影响，最好是724365全天候足够稳健的服务。进程内的问题在于，当业务代码与负载均衡代码改动频率完全不是一个量级时，双方都将在上线，同时任何一方的问题都将相互影响; 更大的一个问题是，推动所有服务一起更新负载均衡策略难度远大于更新一个专门的进程。有层级的服务比普通SOA好SOA要求我们把各业务逻辑服务化，没有层级的服务化就是噩梦。主要服务之间一定要有金字塔一样的规则，否则会对各种跨 ...继续阅读 (15)

以下内容由[五四陈科学院]提供用ports升级，比较容易。123456789101112131415161718192021222324252627localhost:hello chenzhen$ port search gccapple-gcc40 @5494 (lang)Apple's version of gcc 4.0apple-gcc42 @5666.3_14 (lang)Apple's version of gcc 4.2arm-aout-gcc @3.3.6 (cross, devel)gcc cross-compilers for arm-aout, with newlib runtime library.arm-elf-gcc @4.7.3 (cross, devel)gcc cross-compilers for arm-elf, with newlib runtime library.arm-elf-gcc3 @3.4.6_2 (cross, devel)gcc 3.x cross-compilers for arm-elf, with newlib runtime library.arm-none-eabi-gcc @4.7.3_1 (cross, devel)The GNU compiler collection for arm-none-eabiarm ...继续阅读 (35)

以下内容由[五四陈科学院]提供JDK8中的提高在标准的（java.nio.charset.Charset）和扩展的charset实现方面，有许多改进。包括：SelectorProvider在Solaris上有新实现（基于Solaris事件端口机制）。这种SelectorProvider有可能在一些工作负荷下有可能会提升性能和扩展性。/dev/poll这种SelectorProvider依旧是默认的。要使用Solaris事件端口机制，启动的时候要设置系统属性java.nio.channels.spi.Selector为sun.nio.ch.EventPortSelectorProvider。将/jre/lib/charsets.jar文件大小减小。java.lang.String(byte[], *)构造函数和java.lang.String.getBytes()方法的性能改善。moreJDK7中的提高java.nio.file包和相关包，java.nio.file.attribute，提供了对文件I/O和进入文件系统全面的支持。Zip文件系统在JDK7也可用了。下面的资源提供了更多信息。手册中加入File I/O (NIO 2.0特性)。NIO是指non-blocking I/O。可以开发自定义的File System Provider。可直接使用的Zip File System ...继续阅读 (18)

以下内容由[五四陈科学院]提供一、环境及安装server: centos 6.3 （kvm虚拟机）。client: ubuntu 10.04。server上yum install安装pptpd，常规设置好ip分配、用户名密码，添加iptables set mss的参数。设置/etc/pptpd.conf中的localip与remoteip，分别表示虚拟出来的双方ip范围。设置/etc/ppp/chap-secrets中的用户名密码和连接ip等。service pptpd startiptables -A FORWARD -p tcp —syn -s 172.16.36.0/24 -j TCPMSS —set-mss 1356client上apt-get install安装的pptpsetup，设置好用户名密码，启动vpn连接。/usr/sbin/pptpsetup —create vpn —server...(server ip) —username vpn —password ASDF —encrypt —startpptpd v1.4.0二、遇到困难scp client_file server 时，速度先很快，级数变慢，最后不动了。scp server_file client 时，同 ...继续阅读 (20)

以下内容由[五四陈科学院]提供受《精益创业》http://www.duokan.com/book/35802这本书影响甚多，然而在思考和实施的过程中，却又遇到各种各样的问题。不仅仅是一些令人苦恼的“人的问题”，还有一些，是无从下手、或者不知道未来是怎样的疑惑。以下，列出一些“看得见的未来”，因为是一些系统已经在线上服务过亿的用户，如果你在思考相同的问题，也许会有一些用处。一.流程与制度1.代码质量没有经过适量单元测试的代码，不能发起code review。codereview:每行code都经过超过两双眼睛阅读。没有经过code review的代码不能进入代码库。没有经过完整bvt测试的代码，不能merge到线上分支。没有完成上述流程的代码，不应该被用户访问到。2.故障报告实际上最有效的制度是postmortem制度，但往往在国内被称为“故障报告”。如果在你的公司里，《故障报告》与工资是挂钩的，恭喜你，制度用错了。故障报告的本意，是让发生的故障告诉所有的人，让所有的工程师都学到，这次故障的起因是什么、如何避免。故障报告绝对不是用来惩罚和警告你犯错了。不情愿的故障报告，宣告了这个制度在你司实施的失败。经常性的重复的故障报告，一定是制度没有彻底实施或者招聘人员眼神错了（眼神错的几率小之又小）。more总结做一个让所有工程师（包括开发测试运维）勇于出来告诉大家我哪里错了的制度。不断去总结 ...继续阅读 (19)

以下内容由[五四陈科学院]提供实际开发中，网络程序最可能遇到的就是数据没收到、收到错误数据这样诡异的问题.很多时候，都是由于对socket read的细节理解的不一致，导致了程序前后的矛盾。下面详细阐述整个read的过程。more一、从c的角度ssize_t read(int fd,void *buf,size_t nbyte)read函数是负责从fd中读取内容.当读成功时, read返回实际所读的字节数如果返回的值是0 表示已经读到文件的结束了,小于0表示出现了错误。可以同时检查errno:如果错误为EINTR(值为4)说明读是由中断引起的如果是ECONNREST表示网络连接出了问题二、从协议角度TCP协议是面向流的read和write调用的返回值往往小于参数指定的字节数。对于read调用，如果接收缓冲区中有20字节，请求读100个字节，就会返回20。对于write调用，如果请求写100个字节，而发送缓冲区中只有20个字节的空闲位置，那么write会阻塞，直到把100个字节全部交给发送缓冲区才返回，但如果socket文件描述符有O_NONBLOCK标志，则write不阻塞，直接返回20。三、从java的角度SocketChannel sc = (SocketChannel) sk.channel(); int i = sc.read(buff)SocketChannel.read ...继续阅读 (12)