以下内容由[五四陈科学院]提供2017年，小视频分享成为风口的小猪，人工智能大行其道，然而并未见到什么特别的效果，所有最有意义的都在于推荐。手机方面，因为人脸解锁的流行，看上去第一次让深度学习的东西落了地。业务方面，国内似乎已经慢了，各大厂家纷纷出海，印度、印尼成了新的“”。另外，传统业务新零售热起来了。more展望2018，可能会有以下十件大事1.明年将会是科技企业海外IPO的集中年。2.人民日益增长的物质文化需要会导致继续出现人性丑陋的事件。3.企业海外开花，主战场移动到印度印尼。4.类似线上抓娃娃机的项目继续兴起。5.AI开始落地。6.房价可能会冷却到下半年后大涨。7.更加封闭，不论是网络还是经济。8.CRS影响基本悄无声息。9.python更加流行。10.人民币进入7时代。2017预测回顾1.国内污染比2016更加严重且封口更紧。- 准，帝都附近受北风影响，似乎是好点的。2.公共安全事件再一次出现。- 准，杭州保姆纵火案，别以为不是公共安全事件，涉及所有消防、物业，不敢多想。3.微信支付在国内全方位超越支付宝。- 一般准，没有全方位，至少是大范围。4.小米生态链企业要雄起一两个（出名或者IPO）。- 准，紫米和华米 都挺出名了。5.人工智能的项目依旧不产生实际超大收益。- 准。6.电子支付开始作为大鱼抢占的关键制高点。- 一般准。7.开始有国产手机厂商关门或被并购。- 准， ...继续阅读 (10)

以下内容由[五四陈科学院]提供由于上个月推出第一篇《生娃指北》https://www.54chen.com/blog/2017/07/14/born-in-beijing/后，收到了广大人民群众的反馈，特更新第二篇－采购篇。more看表物品名品牌名备注奶瓶150mlcomotomo玻璃奶瓶150mlbetta塑料250mlbetta宽口奶瓶250ml布朗博士宽口奶瓶150ml布朗博士婴儿车SilverCross大气好用，主流车型婴儿车好孩子口袋车折起来很小，但是还没用过就送人了婴儿车quintus伞车奶粉德国爱他美白金版一段出生入量不如喝了两次沐浴露加州宝宝保湿乳液加州宝宝驱蚊液加州宝宝抚触油妙思乐维生素D3Ddrops母乳宝宝出生2周后开始补d3促进钙吸收西甲硅油little remedies解决肠绞痛莫名哭闹放屁的盐水滴鼻剂little remedies买了没用过乳钙bioland半岁前只吃D3,乳钙半岁后考虑吃安抚奶嘴×4苏维妮利器，必备安抚奶嘴链*1苏维妮指甲刀苏维妮从小剪指甲，否则自己抠自己梳子苏维妮餐具套装苏维妮勺子苏维妮安抚玩具jellycat邦尼兔、小熊用处不大安抚巾 ×2麦侬贝儿流口水啃这个比啃手强婴儿床可优比早买散味餐椅可优比床垫可优比腰凳可优比能扶坐了才有用牙胶苏维小鹿不知道为啥，一咬就哭牙胶banana同上牙胶comotomo×2保温壶tiger尚未启封耳温 ...继续阅读 (10)

以下内容由[五四陈科学院]提供This is a quick guide explaining how to run GUI app in docker on mac osx.morestep 1.install two important tools#brew cask install xquartz#brew install socatstep 2.run socatsocatTCP-LISTEN:6001,reuseaddr,forkUNIX-CLIENT:\"$DISPLAY\"&step; 3.see what your real en* by ifconfig#ifconfigYou can see en0 en1 en2 and so on,choose a right one which has the right IP addrass.step 4.run dockerdockerrun-it-eXAUTHORITY=/tmp/xauth-v~/.Xauthority:/tmp/xauth-eDISPLAY=$(ifconfigen3|grep'inet'|awk'{print$2}'):1--nethost--volume=$(pwd):/workspacefastercnn/bin/bashattention: You must modify the DISP ...继续阅读 (10)

以下内容由[五四陈科学院]提供本篇纯属扯淡，技术性极高，学好社会流程之后，可以节省很多时间，也能有效减少被看不起的机会。more生娃前名词解释1.准生证这是俗称，自从放开二胎后，变名为《生育登记服务单》。这个高级，有官方网站http://syz.bjchfp.，填写对了居委会就会给你打电话。完了你自己下载打印就可以了。2.母子健康档案（也有人叫做 建卡）由卫生主管的社区卫生服务中心（这TM是个事业单位吧？），他们资料后，给你媳妇发3个册子：《母子健康档案》、《儿童保健记录》俗称体检本（有些地方要等娃生了才给）、《儿童保健健康教育手册》这本基本没卵用。3.医院建档建档是指，你媳妇怀上了，决定要去哪个医院产检和生产，这个医院要同意，首先要建立档案，简称建档。流程step 1.想生个娃了，上网站登记，准备打印准生证。step 2.一不小心怀上了，且大于42天，注意42天！step 3.带上医院验血、B超之类的能证明怀了的（验孕试纸不行）东西，和各种身份证明（具体打电话问居委会问卫生服务中心），办理母子健康档案。step 4.带上母子健康档案，排队挂号OR牛&金钱去你媳妇心宜的医院。step 5.为期十几次的产检后，生啦。注意事项step 1 里必须确定好居委会名称。step 2 里42天是很多社区的龟腚，小于这个时间人家懒得理你。step 3 人家会问你一堆的资料，提前打好电话。step ...继续阅读 (8)

以下内容由[五四陈科学院]提供Caffe is a deep learning framework made with expression, speed, and modularity in mind. It is developed by Berkeley AI Research (BAIR) and by community contributors.The official website ishttp://caffe.berkeleyvision.org/.It is easy to install it with python 2 and Ubuntu.But it is hard to install it with python 3 and centOs.moreHere are some records when I install it with Anaconda python3 on centos7.PlatformPrior to installing, have a glance through this blog and take note of the details for your platform.$cat/etc/redhat-releaseCentOSLinuxrelease7.*.*(Core)$python--versionPython3 ...继续阅读 (13)

以下内容由[五四陈科学院]提供以下是神经网络训练中经常会遇到的一些概念，进行了收集总结，供需要时查阅。LSE-最小二乘法按偏差平方和最小的原则选取拟合曲线，并且采取二项式方程为拟合曲线的方法,称为最小二乘法。它通过最小化误差的平方和寻找数据的最佳函数匹配。利用最小二乘法可以简便地求得未知的数据，并使得这些求得的数据与实际数据之间误差的平方和为最小。moreGD-梯度下降算法参考tf.train.GradientDescentOptimizer梯度下降（GD）是最小化风险函数、损失函数的一种常用方法，随机梯度下降和批量梯度下降是两种迭代求解思路。学习率是GD中最关键的参数，代表了每个梯度的大小，大了会反复振荡，小了会计算困难。SGD-随机梯度下降算法参考keras.optimizers.SGD为了解决GD里学习率的选择问题，SGD用随机的办法来减少计算学习率的次数。SGD伴随的一个问题是噪音较多，使得SGD并不是每次迭代都向着整体最优化方向。keras.optimizers.SGD(lr=0.01, momentum=0.0, decay=0.0, nesterov=False)参数：lr：大于0的浮点数，学习率momentum：大于0的浮点数，动量参，它模拟的是物体运动时的惯性，即更新的时候在一定程度上保留之前更新的方向，同时利用当前batch的梯度微调最终的更新方向。这样一来，可 ...继续阅读 (3)

以下内容由[五四陈科学院]提供以下是神经网络训练中经常会遇到的一些概念，进行了收集总结，供需要时查阅。LSE-最小二乘法按偏差平方和最小的原则选取拟合曲线，并且采取二项式方程为拟合曲线的方法,称为最小二乘法。它通过最小化误差的平方和寻找数据的最佳函数匹配。利用最小二乘法可以简便地求得未知的数据，并使得这些求得的数据与实际数据之间误差的平方和为最小。moreGD-梯度下降算法参考tf.train.GradientDescentOptimizer梯度下降（GD）是最小化风险函数、损失函数的一种常用方法，随机梯度下降和批量梯度下降是两种迭代求解思路。学习率是GD中最关键的参数，了每个梯度的大小，大了会反复振荡，小了会计算困难。SGD-随机梯度下降算法参考keras.optimizers.SGD为了解决GD里学习率的选择问题，SGD用随机的办法来减少计算学习率的次数。SGD伴随的一个问题是噪音较多，使得SGD并不是每次迭代都向着整体最优化方向。keras.optimizers.SGD(lr=0.01, momentum=0.0, decay=0.0, nesterov=False)参数：lr：大于0的浮点数，学习率momentum：大于0的浮点数，动量参，它模拟的是物体运动时的惯性，即更新的时候在一定程度上保留之前更新的方向，同时利用当前batch的梯度微调最终的更新方向。这样一来，可以在 ...继续阅读 (9)

以下内容由[五四陈科学院]提供前言在直播软件中，典型的过程是A用户充值，送花给B用户，B用户提现。正是有这样一条变现的道路，无数盗刷、退款、36技术的黑产人盯上了直播，报道见到映客的损失一度到了300万人民币(本文价值至少300万了:P)。外链https://www.douban.com/group/topic/89441680/本文介绍利用keras＋tensorflow，快速完成一个神经网络，从工程角度看深度学习带来的实际作用。more安装1.先升级pipchenzhen$pipinstall--upgradepip2.安装keraschenzhen$pipinstallkeras...installingcollectedpackages:numpy,scipy,six,theano,pyyaml,kerasSuccessfullyinstalledkeras-1.2.1numpy-1.12.0pyyaml-3.12scipy-0.18.1six-1.10.0theano-0.8.23.安装tensorflowchenzhen$exportTF_BINARY_URL=https://storage.googleapis.com/tensorflow/mac/cpu/tensorflow-1.0.0rc2-py2-none-any.whlchenzhen$pipinstall- ...继续阅读 (19)

以下内容由[五四陈科学院]提供前言在直播软件中，典型的过程是A用户充值，送花给B用户，B用户提现。正是有这样一条变现的道路，无数盗刷、退款、36技术的黑产人盯上了直播，报道见到映客的损失一度到了300万人民币(本文价值至少300万了:P)。外链https://www.douban.com/group/topic/89441680/本文介绍利用keras＋tensorflow，快速完成一个神经网络，从工程角度看深度学习带来的实际作用。more安装1.先升级pipchenzhen$pipinstall--upgradepip2.安装keraschenzhen$pipinstallkeras...installingcollectedpackages:numpy,scipy,six,theano,pyyaml,kerasSuccessfullyinstalledkeras-1.2.1numpy-1.12.0pyyaml-3.12scipy-0.18.1six-1.10.0theano-0.8.23.安装tensorflowchenzhen$exportTF_BINARY_URL=https://storage.apis.com/tensorflow/mac/cpu/tensorflow-1.0.0rc2-py2-none-any.whlchenzhen$pipinstall--upgra ...继续阅读 (13)

以下内容由[五四陈科学院]提供2016年，以映客为代表的个人直播行业从无到有，小视频行业如火如荼，GIF快手渗透到二三线城市，简单来讲，麻雀虽小也是赚钱的。相比而言，在移动互联网发展高峰到了顶点的时间点，微信和支付宝的支付相争才是年头大戏。汇总一句话，2016年，移动互联网大盘已定，大鱼只抢支付，小鱼小虾只走垂直方向，未来也机会多多。more个人方面，过去一年一直在各国支付和提现中了解细节，做一些收钱发钱的事情，关键还有一些如何防止黑产渗透到系统中进行套现的处理。映客没能处理好这个细节，一个月被人套现上百万。展望2017，可能会有以下十件大事1.国内污染比2016更加严重且封口更紧。2.公共安全事件再一次出现。3.微信支付在国内全方位超越支付宝。4.小米生态链企业要雄起一两个（出名或者IPO）。5.人工智能的项目依旧不产生实际超大收益。6.电子支付开始作为大鱼抢占的关键制高点。7.开始有国产手机厂商关门或被并购。8.直播行业常态化，变成所有应用都有的功能，收益下滑。9.云公司推出人工智能平台。10.人民币到7.2。明年见！2016预测回顾1.阿黎应该是要回来小米了。－准2.服务器行业应该不会出现啥大的热门技术了。－一般准，人工智能不算啥新技术，但的确又热了。3.中国的移动网络可能会有改善。－一般准，移动网络好了不少，2g用户少了许多。4.c/s结构的好用的框架开始出现。－准，微信开 ...继续阅读 (12)

以下内容由[五四陈科学院]提供2016年，以映客为的个人直播行业从无到有，小视频行业如火如荼，GIF快手渗透到二三线城市，简单来讲，麻雀虽小也是赚钱的。相比而言，在移动互联网发展高峰到了顶点的时间点，微信和支付宝的支付相争才是年头大戏。汇总一句话，2016年，移动互联网大盘已定，大鱼只抢支付，小鱼小虾只走垂直方向，未来也机会多多。more个人方面，过去一年一直在各国支付和提现中了解细节，做一些收钱发钱的事情，关键还有一些如何防止黑产渗透到系统中进行套现的处理。映客没能处理好这个细节，一个月被人套现上百万。展望2017，可能会有以下十件大事1.国内污染比2016更加严重且封口更紧。2.公共安全事件再一次出现。3.微信支付在国内全方位超越支付宝。4.小米生态链企业要雄起一两个（出名或者IPO）。5.人工智能的项目依旧不产生实际超大收益。6.电子支付开始作为大鱼抢占的关键制高点。7.开始有国产手机厂商关门或被并购。8.直播行业常态化，变成所有应用都有的功能，收益下滑。9.云公司推出人工智能平台。10.人民币到7.2。明年见！2016预测回顾1.阿黎应该是要回来小米了。－准2.服务器行业应该不会出现啥大的热门技术了。－一般准，人工智能不算啥新技术，但的确又热了。3.的移动网络可能会有改善。－一般准，移动网络好了不少，2g用户少了许多。4.c/s结构的好用的框架开始出现。－准，微信开源的框架 ...继续阅读 (9)

以下内容由[五四陈科学院]提供近期多半时间在支付相关的业务上，特此记录一下接触到的各家情况，尽可能本着客观公正的态度进行点评（实在受不了的渠道才偏主观，见谅）。国内支付不用说，主要是微信、支付宝，另外不得不提到的还有苹果IAP、小米支付。分几部分， IAP主要在马来西亚、台湾等地使用的人不少（没接当地支付渠道的情况下）。paypal作为海外支付宝的角色，在很多外汇不管制的很方便。印度的话，商务不靠谱程度超乎想象，还是要提一提这几家mobikwiki、paytm。印尼、新马泰地区使用的话，讲一讲coda和doku。more微信支付排名是分先后的，把微信排在第一，表明了在我心中，他的江湖地位已经稳固。1) 接入方面如果是第一次接他们的用户付款，平台、公众平台、商户平台 三个的名字可以搞晕你。特别是当你发现平台的openid和公众账号的openid不是一个的时候，他们的文档会告诉你使用unionid，然后你会SB地发现线上的数据根本就TMD没有unionid，根本就TMD没有unionid！没有unionid！（重复三遍以示重要）然后，你不得不让所有的用户退出登录重新进来。总结一下三个平台的关系：平台可以得到app里的openid，确认用户的身份; 公众平台可以得到在微信里打开h5的openid，也能确认用户的身份，如果要与前一个身份对应上，需要在平台做关联，然后产生一个相等的union ...继续阅读 (49)

以下内容由[五四陈科学院]提供近期多半时间在支付相关的业务上，特此记录一下接触到的各家情况，尽可能本着客观公正的态度进行点评（实在受不了的渠道才偏主观，见谅）。国内支付不用说，主要是微信、支付宝，另外不得不提到的还有苹果IAP、小米支付。国外分几部分，Google IAP主要在马来西亚、台湾等地使用的人不少（没接当地支付渠道的情况下）。paypal作为海外支付宝的角色，在很多外汇不管制的国家很方便。印度的话，商务不靠谱程度超乎想象，还是要提一提这几家mobikwiki、paytm。印尼、新马泰地区使用的话，讲一讲coda和doku。more微信支付排名是分先后的，把微信排在第一，表明了在我心中，他的江湖地位已经稳固。1) 接入方面如果是第一次接他们的用户付款，开放平台、公众平台、商户平台 三个部门的名字可以搞晕你。特别是当你发现开放平台的openid和公众账号的openid不是一个的时候，他们的文档会告诉你使用unionid，然后你会SB地发现线上的数据根本就TMD没有unionid，根本就TMD没有unionid！没有unionid！（重复三遍以示重要）然后，你不得不让所有的用户退出登录重新进来。总结一下三个平台的关系：开放平台可以得到app里的openid，确认用户的身份; 公众平台可以得到在微信里打开h5的openid，也能确认用户的身份，如果要与前一个身份对应上，需要在开放 ...继续阅读 (6)

以下内容由[五四陈科学院]提供这是小米大树系列第三部分，前两部分见：http://2014.54chen.com/blog/2016/08/06/mi2/《小米大树part2:测试之痛》http://2014.54chen.com/blog/2016/08/01/mi1-dot-5/《小米大树part1.5:基础架构之痛答疑》http://2014.54chen.com/blog/2016/07/29/mi/《小米大树part1:基础架构之痛》一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势。more作为开发人员，实在是难以启齿吐槽产品经理，以至于很久没有补上第三篇。－－题记引子十年前的互联网公司，大多数还没有这个岗位。如今人人都是产品经理的年代，烂大街的灵光一现的点子，不知所谓的需求描述，不着边际的实际操作，无人问津的后续跟进，直接造就了产品太烂、进度缓慢。一句话需求A君是产品，从业多年，下过海创过业，身经百战。A：我们的用户经常在这里出现了问题，我觉得要把这里拿掉，做成xxx的。开发B：好啊，我觉得也是。一个月过去了，A君遇到用户投诉，问B：当时说过的xxx怎么没有做啊？B一脸懵B：纳尼，我以为你只是随口说说。好的产品，不会提一句话需求，落实到文档到交互到协调到执行，才是好产品。老板的需求C君刚从某 ...继续阅读 (8)

以下内容由[五四陈科学院]提供这是小米大树系列第三部分，前两部分见：https://www.54chen.com/blog/2016/08/06/mi2/《小米大树part2:测试之痛》https://www.54chen.com/blog/2016/08/01/mi1-dot-5/《小米大树part1.5:基础架构之痛答疑》https://www.54chen.com/blog/2016/07/29/mi/《小米大树part1:基础架构之痛》一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势。more作为开发人员，实在是难以启齿吐槽产品经理，以至于很久没有补上第三篇。－－题记引子十年前的互联网公司，大多数还没有这个岗位。如今人人都是产品经理的年代，烂大街的灵光一现的点子，不知所谓的需求描述，不着边际的实际作，无人问津的后续跟进，直接造就了产品太烂、进度缓慢的各种局面。一句话需求A君是产品，从业多年，下过海创过业，身经百战。A：我们的用户经常在这里出现了问题，我觉得要把这里拿掉，做成xxx的。开发B：好啊，我觉得也是。一个月过去了，A君遇到用户投诉，问B：当时说过的xxx怎么没有做啊？B一脸懵B：纳尼，我以为你只是随口说说。好的产品，不会提一句话需求，落实到文档到交互到协调到执行，才是好产品。老板的需求C ...继续阅读 (15)

以下内容由[五四陈科学院]提供痛点太多，竟无从下笔。–题记缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第二部分。测2010年，来自各大公司的ABCD君，都拥有良好的软件工程习惯，测试代码行行见血。即便如此，依旧不能耽搁产品的节奏，于是开始找来专门的测试人员。E君从事开发测试多年，测试经验丰富，开发只要给个连接服务的框架就可以开工，属于给了原子弹就能上天型。moreF君则一直专注在手工测试上，产生一些稀奇古怪的操作方法来帮助找出问题。A:“我们可以放弃单元测试，只搞好冒烟测试bvt，每日对线上和测试环境发起测试。”E:“没问题，给我们测试时间，一定可以完成覆盖。”然后一直时间不够，就在缺少开发测试和覆盖不全的矛盾中度过了两三年。经常会出现一种情况，新功能上线了，忘记通知测试……或者通知了测试没有人力来写测试代码…不测测试工程师一直被赶着，本身招聘价位低于开发，再加上稍微能力强一点的测试工程师就想着转为开发，测试这个活就越来越没有动力了，从而矛盾开始加剧了，直到有一天，暴发。D:“开发的屁股要自己擦！”E:“测试只提供测试框架技术支持！”F:“手工测试要提前预约！”A:“MD现在真大公司！”于 ...继续阅读 (23)

以下内容由[五四陈科学院]提供痛点太多，竟无从下笔。–题记缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第二部分。测2010年，来自各大公司的ABCD君，都拥有良好的软件工程习惯，测试代码行行见血。即便如此，依旧不能耽搁产品的节奏，于是开始找来专门的测试人员。E君从事开发测试多年，测试经验丰富，开发只要给个连接服务的框架就可以开工，属于给了原子弹就能上天型。moreF君则一直专注在手工测试上，产生一些稀奇古怪的作方法来帮助找出问题。A:“我们可以放弃单元测试，只搞好冒烟测试bvt，每日对线上和测试环境发起测试。”E:“没问题，给我们测试时间，一定可以完成覆盖。”然后一直时间不够，就在缺少开发测试和覆盖不全的矛盾中度过了两三年。经常会出现一种情况，新功能上线了，忘记通知测试……或者通知了测试没有人力来写测试代码…不测测试工程师一直被赶着，本身招聘价位低于开发，再加上稍微能力强一点的测试工程师就想着转为开发，测试这个活就越来越没有动力了，从而矛盾开始加剧了，直到有一天，暴发。D:“开发的屁股要自己擦！”E:“测试只提供测试框架技术支持！”F:“手工测试要提前预约！”A:“MD现在真大公司！”于是 ...继续阅读 (9)

以下内容由[五四陈科学院]提供上周末发了第一篇，在微博收到了许多朋友的反馈，可能是写得匆忙，没能完整描述，特加1.5，专门针对各位的问题进行答疑。原文地址：《小米大树part1:基础架构之痛》|http://2014.54chen.com/blog/2016/07/29/mi/more问题一、中央集权Q:@浩松 …为啥我觉得博主还是没有找到原因。这个东西就和为什么要统一度量衡统一文字中央集权虽然不同地方的方言可能有差别一样的，和有没有腾讯的人一点关系都没有啊A:其实我想表达的，并非是统一度量衡这个问题，发展过程中，大家的度量衡其实是统一的。而更大的问题是，度量衡本身不科学，我们大多数时间在监控一个服务自身的qps\percentile等数值，却没有一个可用性的数值来监控和报警，这是根本点。问题二、吹腾讯Q:@咩罗 花式吹腾讯…A:完全是个无心之举，但从腾讯过去从来不参加开源到现在一点一点放出来技术细节，的确要高于行业水平。回忆一下，已经很久没有遇到QQ大规模故障了。问题三、git/memcahce也拿来说Q:@沧落海 我靠，git，memcache都能拿来说A:为什么不能拿来说，git现在是十岁多，我在讲的五六年前的事情，国内还在流行svn，我们的团队还有人连svn都没用过。而memcache，我们引入的实际上是zookeeper和memcache的合体 ...继续阅读 (15)

以下内容由[五四陈科学院]提供上周末发了第一篇，在微博收到了许多朋友的反馈，可能是写得匆忙，没能完整描述，特加1.5，专门针对各位的问题进行答疑。原文地址：《小米大树part1:基础架构之痛》|https://www.54chen.com/blog/2016/07/29/mi/more问题一、集权Q:@浩松 …为啥我觉得博主还是没有找到原因。这个东西就和为什么要统一度量衡统一文字集权虽然不同地方的方言可能有差别一样的，和有没有腾讯的人一点关系都没有啊A:其实我想表达的，并非是统一度量衡这个问题，发展过程中，大家的度量衡其实是统一的。而更大的问题是，度量衡本身不科学，我们大多数时间在监控一个服务自身的qps\percentile等数值，却没有一个可用性的数值来监控和报警，这是根本点。问题二、吹腾讯Q:@咩罗 花式吹腾讯…A:完全是个无心之举，但从腾讯过去从来不参加开源到现在一点一点放出来技术细节，的确要高于行业水平。回忆一下，已经很久没有遇到QQ大规模故障了。问题三、git/memcahce也拿来说Q:@沧落海 我靠，git，memcache都能拿来说A:为什么不能拿来说，git现在是十岁多，我在讲的五六年前的事情，国内还在流行svn，我们的团队还有人连svn都没用过。而memcache，我们引入的实际上是zookeeper和memcache的合体解决方法 ...继续阅读 (8)

以下内容由[五四陈科学院]提供题记无知和弱小不是生存的障碍，傲慢才是。 －－《三体》缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第一部分。基础2010年，第一批服务器工程师来自五湖四海，有金山、微软、谷歌、百度、人人，唯独，没有来自中国最大互联网公司－腾讯。A君（人物纯属虚构，以求表达效果）从业数年，经验丰富，说：“我觉得我们可以用一些php，简单好招人”，于是开始这样干了。B君说：“我们还可以用一些java，招人也不太难，现成的东西多”，于是这样操作了。moreC君说：“facebook的thrift也不错，我们需要一个这样的rpc框架”，于是用上了thrift。D君说：“与客户端最简单，还是用http请求吧，加上json，调起来方便”，于是就http+json了。E君和F君带来了先进的海外大公司经验，大家都深信不疑。G君带来了maven，H君带来了git，I君带来了zookeeper，J君带来了memcache，K君带来了scribe，L君带来了hadoop，M君带来了HBase，N君带来了spring。。。两年之后，诸君磨合成了以java为核心，诸多语言为辅助，看上去哪哪都大厂的基础体系。并且大 ...继续阅读 (29)

以下内容由[五四陈科学院]提供题记无知和弱小不是生存的障碍，傲慢才是。 －－《三体》缘起一直想写一系列的笔记，记录整个小米六年的研发工作中实际遇到的困难，以及这一大群人如何不可避免的走向大公司氛围，又如何慢慢打破定势，苦于自己拖延症影响，现在才开始总结。共分三个部分：基础架构之痛、测试之痛、产品进度之痛。本篇是第一部分。基础2010年，第一批服务器工程师来自五湖四海，有金山、微软、、百度、人人，唯独，没有来自最大互联网公司－腾讯。A君（人物纯属虚构，以求表达效果）从业数年，经验丰富，说：“我觉得我们可以用一些php，简单好招人”，于是开始这样干了。B君说：“我们还可以用一些java，招人也不太难，现成的东西多”，于是这样作了。moreC君说：“的thrift也不错，我们需要一个这样的rpc框架”，于是用上了thrift。D君说：“与客户端最简单，还是用http请求吧，加上json，调起来方便”，于是就http+json了。E君和F君带来了先进的海外大公司经验，大家都深信不疑。G君带来了maven，H君带来了git，I君带来了zookeeper，J君带来了memcache，K君带来了scribe，L君带来了hadoop，M君带来了HBase，N君带来了spring。。。两年之后，诸君磨合成了以java为核心，诸多语言为辅助，看上去哪哪都大厂的基础体系。并且大家都认为可以为各兄弟无脑使 ...继续阅读 (11)

以下内容由[五四陈科学院]提供有朋友在阿里云主机实现微信支付逻辑时，发现api.mch.weixin.qq.com的解析实在是太慢了。因此出现了手动修改/etc/hosts的情况，当然了，哪天微信支付要是换个机房肯定要挂。我们的机房也有相似的同题，专门记录一下。more表象代码里用curl来请求微信，经常超时，这时使用wget试验：[root@01tmp]#wgetapi.mch.weixin.qq.com--2016-06-1814:51:03--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...域名解析很久不出来测试确认是ipv6问题给wget加上-4，强制使用ipv4，如果很快，那基本上确定是ipv6惹的祸了。[root@01tmp]#wget-4api.mch.weixin.qq.com--2016-06-1817:03:52--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...123.151.71.149,123.151.79.109Connectingtoapi.mch.weixin.qq.com|123.151.71.149|:80...connected.代码分析专门写个代码来测试ipv6的解析，用到系统函数getadd ...继续阅读 (40)

以下内容由[五四陈科学院]提供有朋友在阿里云主机实现微信支付逻辑时，发现api.mch.weixin.qq.com的解析实在是太慢了。因此出现了手动修改/etc/hosts的情况，当然了，哪天微信支付要是换个机房肯定要挂。我们的机房也有相似的同题，专门记录一下。more表象代码里用curl来请求微信，经常超时，这时使用wget试验：[root@01tmp]#wgetapi.mch.weixin.qq.com--2016-06-1814:51:03--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...域名解析很久不出来测试确认是ipv6问题给wget加上-4，强制使用ipv4，如果很快，那基本上确定是ipv6惹的祸了。[root@01tmp]#wget-4api.mch.weixin.qq.com--2016-06-1817:03:52--http://api.mch.weixin.qq.com/Resolvingapi.mch.weixin.qq.com...123.151.71.149,123.151.79.109Connectingtoapi.mch.weixin.qq.com|123.151.71.149|:80...connected.代码分析专门写个代码来测试ipv6的解析，用到系统函数getadd ...继续阅读 (9)

以下内容由[五四陈科学院]提供这里记录了一种简单的办法，在遇到写c/c++找不到答案时的最简单找代码办法。方法是：google找php怎么解决，大把的答案，然后看php源代码是怎么用c实现的。more提出我们server端在对接google play的时候，遇到了ras加密来验证参数的实现，官方也没有什么c的参考代码，java和php的网上倒是能找到一堆。java怎么解决java的实现和本文要说的内容无关，只是随带一列：publicstaticbooleanverify(StringpublicKey,byte[]data,Stringsign)throwsException{// 解密由base64编码的公钥byte[]keyBytes=Base64.decodeBase64(publicKey);System.out.println(keyBytes.length);// 构造X509EncodedKeySpec对象X509EncodedKeySpeckeySpec=newX509EncodedKeySpec(keyBytes);// KEY_ALGORITHM 指定的加密算法KeyFactorykeyFactory=KeyFactory.getInstance("RSA");// 取公钥匙对象PublicKeypubKey=keyFactory.gener ...继续阅读 (16)

以下内容由[五四陈科学院]提供这里记录了一种简单的办法，在遇到写c/c++找不到答案时的最简单找代码办法。方法是：找php怎么解决，大把的答案，然后看php源代码是怎么用c实现的。more提出我们server端在对接 play的时候，遇到了ras加密来验证参数的实现，官方也没有什么c的参考代码，java和php的网上倒是能找到一堆。java怎么解决java的实现和本文要说的内容无关，只是随带一列：publicstaticbooleanverify(StringpublicKey,byte[]data,Stringsign)throwsException{// 解密由base64编码的公钥byte[]keyBytes=Base64.decodeBase64(publicKey);System.out.println(keyBytes.length);// 构造X509EncodedKeySpec对象X509EncodedKeySpeckeySpec=newX509EncodedKeySpec(keyBytes);// KEY_ALGORITHM 指定的加密算法KeyFactorykeyFactory=KeyFactory.getInstance("RSA");// 取公钥匙对象PublicKeypubKey=keyFactory.generatePublic(keySpec);Sig ...继续阅读 (10)

以下内容由[五四陈科学院]提供2010年的时候，我们开始最早的一波做小米的服务器的同学，基本都很少互联网经验，七拼八凑的把米聊上了线，这么多年过去了，很多技术框架沉淀到了公司各处团队中去了。今天再来看，其实有很多细节，当时真的没考虑（现在也是坑）。more细节一 用nginx的proxy_pass代理java上线不平滑一个典型的架子，是nginx+resin/tomcat，然后在nginx上设置weight=1 max_fails=3 等等。在上线的时候，并没有平滑过度的手段（比如修改一下所有nginx配置拿掉一台之类的），所有的上线都是有损的。庆幸的是，移动互联网native的app，断个一两秒的不服务用户感觉不出来。细节二 监控数据很多，有用的很少线上故障的情况，不出意外就是一个模块和另一个模块之间发生了什么问题。过去的几年，我们始终没考虑过抽象出来这种数据。我们的监控数据全部是以单独一个模块自身的访问数据（qps、响应时长等），常见的问题是别人说访问你慢，访问老失败，你自己一看数据觉得还挺好。细节三 为android ios配备了http框架如果当时没有paoding-rose，我想我们会考虑做成一个标准的tcp server，中间用pb传输到手机。这样做的好处，在应对不好的中国移动网络的时候，http束手束脚，而tcp却自由得多。这一点我同样要点名嘲笑一个微博的客户端，在一 ...继续阅读 (16)

以下内容由[五四陈科学院]提供2010年的时候，我们开始最早的一波做小米的服务器的同学，基本都很少互联网经验，七拼八凑的把米聊上了线，这么多年过去了，很多技术框架沉淀到了公司各处团队中去了。今天再来看，其实有很多细节，当时真的没考虑（现在也是坑）。more细节一 用nginx的proxy_pass代理java上线不平滑一个典型的架子，是nginx+resin/tomcat，然后在nginx上设置weight=1 max_fails=3 等等。在上线的时候，并没有平滑过度的手段（比如修改一下所有nginx配置拿掉一台之类的），所有的上线都是有损的。庆幸的是，移动互联网native的app，断个一两秒的不服务用户感觉不出来。细节二 监控数据很多，有用的很少线上故障的情况，不出意外就是一个模块和另一个模块之间发生了什么问题。过去的几年，我们始终没考虑过抽象出来这种数据。我们的监控数据全部是以单独一个模块自身的访问数据（qps、响应时长等），常见的问题是别人说访问你慢，访问老失败，你自己一看数据觉得还挺好。细节三 为android ios配备了http框架如果当时没有paoding-rose，我想我们会考虑做成一个标准的tcp server，中间用pb传输到手机。这样做的好处，在应对不好的移动网络的时候，http束手束脚，而tcp却得多。这一点我同样要点名嘲笑一个微博的客户端，在一样的坑里 ...继续阅读 (12)

以下内容由[五四陈科学院]提供前些天看到了老板的二十年前的文章《程序人生》，地址在这里http://t.cn/RqPJYHU，深有感触，于是也萌发了写一写的想法，看看二十年后，自己的认识是否会有所改变，当然了，即便作为职业码农近十年，很多观点依然不能构成一种完整且保证正确的人生观。题记如果一定要用几个词来形容程序员的人生观，我想那应该是：坚定、乐观、冷静、钻研。坚定//如果不能坚定地知道自己喜欢计算机这个事情，早就干点别的什么去了，码农这个事情常人看来无味极了。与上一辈程序员相比，时代留给这一辈的机会不同，裕兴、小霸王、步步高成为我们很早就启蒙计算机知识的最佳方式，从小学或者初中起，脑洞大开。在接触过的好朋友中，凡是从小接触计算机的，在初中高中已经基本可以独立完成一些诸如pascal\c\basic\asp之类的流行技能。他们大多干过如下的事情：1.做个人网站 2.帮教务处做报课系统 3.维护学校bbs（当然了，雷老板是这事情的笔祖了） 4.接些外包小系统赚点外快。more上述这些枯燥的事情中，每件事情，都需要投入极大的兴趣，不计得失，才能取得一点点的成就感。如果没有坚定的想法，多半都半途而废了。乐观//如果不是乐观的态度，早被遇到的困难和歧视折磨死了。一个同学，在大连做外包行业的开发工作，毕业后干了两年到了结婚生子的年龄了，什么积蓄也没有，对整个行业失望至极，完全没有方向，回家随 ...继续阅读 (9)

以下内容由[五四陈科学院]提供前些天看到了老板的二十年前的文章《程序人生》，地址在这里http://t.cn/RqPJYHU，深有感触，于是也萌发了写一写的想法，看看二十年后，自己的认识是否会有所改变，当然了，即便作为职业码农近十年，很多观点依然不能构成一种完整且保证正确的人生观。题记如果一定要用几个词来形容程序员的人生观，我想那应该是：坚定、乐观、冷静、钻研。坚定//如果不能坚定地知道自己喜欢计算机这个事情，早就干点别的什么去了，码农这个事情常人看来无味极了。与上一辈程序员相比，时代留给这一辈的机会不同，裕兴、小霸王、步步高成为我们很早就启蒙计算机知识的最佳方式，从小学或者初中起，脑洞大开。在接触过的好朋友中，凡是从小接触计算机的，在初中高中已经基本可以完成一些诸如pascal\c\basic\asp之类的流行技能。他们大多干过如下的事情：1.做个人网站 2.帮教务处做报课系统 3.维护学校bbs（当然了，雷老板是这事情的鼻祖了） 4.接些外包小系统赚点外快。more上述这些枯燥的事情中，每件事情，都需要投入极大的兴趣，不计得失，才能取得一点点的成就感。如果没有坚定的想法，多半都半途而废了。乐观//如果不是乐观的态度，早被遇到的困难和歧视折磨死了。一个同学，在大连做外包行业的开发工作，毕业后干了两年到了结婚生子的年龄了，什么积蓄也没有，对整个行业失望至极，完全没有方向，回家随便找 ...继续阅读 (8)

以下内容由[五四陈科学院]提供在c++中使用protobuf的时候，大多数元素，我们可以直接set_xxx，如果有嵌套进去一个对象，会有set_allocated_xxx的方法和mutable_xxx的方法。这里有一个坑。现象首先，看pb定义：morepackagetest;messagea{requireduint32aa=1;}messageb{requiredaaaa=1;}如果使用set_allocated_aaa，同时传入了一个定义好的a，而不是new的a，如下：voidbad_case(){aaa;bbb;aa.set_aa(1);bb.set_allocated_aaa(&aa);}编译的时候不会有错误，一运行就出问题了：***glibcdetected***./test.run:doublefreeorcorruption(out):0x00007fffc65ade20***正确的写法下面的写法，不会有问题：intgood_case1(){a*aa=newa();bbb;aa->set_aa(1);bb.set_allocated_aaa(aa);return0;}下面的写法，也不会有问题：voidgood_case2(){aaa;bbb;aa.set_aa(1);bb.mutable_aaa()->MergeFrom(aa);}原因在pb生成的 ...继续阅读 (16)