网上针对 Erlang 可以热升级的特性是各种吹捧，真的有那么好用吗？在一个关于 Erlang 的邮件列表里有一段关于热升级的讨论:[erlang-questions] Best practice to hot update .hrlQ:OTP 设计原则里针对如何做发布讲了很多。但是没见针对如何升级 `.hrl` 的说明。 举个例子，如何处理下列的情况： 1. 添加一个新的 Record 2. 从 Record 里添加/删除一个元素 3. 宏变了A:`.hrl` 文件里的定义是在预编译阶段直接插入 `.erl` 文件里的。 (我不认为 Erlang 的运行时定义了什么是"头文件"，如果我错了，请指出我的错误) 所以最简单的做法就是重新编译所有依赖了更新后头文件的模块，之后 Reload 它们。A:1. 你需要先找出所有依赖更新后头文件的 `.erl`文件 2. 找出所有和这些 `.erl` 文件相关的进程 3. a. 挂起进程；b. 更新数据结构；c. 恢复进程A:头文件是直接被编译器插入 `.erl` 文件中的。 重新编译/加载所有的 `·.erl` 文件这种操作方式可以覆盖大部分简单的场景。 比如说没有进程在使用老版本的 Record/Macro。 这也是为啥所有的 `long-lived` 进程都需要使用 gen_server， 你可以使用 `code_change` ...继续阅读 (21)

multiple-cursors是个神奇好用的插件，它可以让你同时编辑多行。还记得小时候老师罚抄书的场景吗？(global-set-key(kbd"C-S-c C-S-c")'mc/edit-lines)(global-set-key(kbd"C->")'mc/mark-next-like-this)(global-set-key(kbd"C-<")'mc/mark-previous-like-this)(global-set-key(kbd"C-c C-<")'mc/mark-all-like-this)增加几个默认快捷键就可以方便的使用了，可能还会遇到些问题，在multiple-cursors-mode下，第一次使用的组合键会被提示是否对每一个cursor都进行操作，这时只用回答yes,no就行了。如果没注意选错了，可以将~/.emacs.d/.mc-lists.el文件删掉，重启emacs。它会在你下次使用时再次提示的。 ...继续阅读 (15)

用 Emacs 的同学多多少少也都使用过 org-mode。用它来管理时间的文章也有不少，其TODO的功能还是很强大的。但是相比互联网产品少了手机同步什么的简直是太不爽了。好在有这么一个插件：org-caldav来将 org-mode 的文本形式同步到 google calander。(require'org-caldav)(setqorg-caldav-url"https://www.google.com/calendar/dav")(setqorg-caldav-calendar-id"user@gmail.com")(setqorg-caldav-inbox"/path/to/org/caldav.org")(setqorg-caldav-filesorg-agenda-files)(setqorg-icalendar-date-time-format";TZID=%Z:%Y%m%dT%H%M%S")配置好后重新加载配置。M-x执行org-caldav-sync,提升输入用户名，密码。就可以将TODO同步到google calendar了。EOFHava fun. : ) ...继续阅读 (15)

吐槽最近在学习一些WAF相关的内容，学习一些开源出来的 WAF 产品。搜索支持 Nginx 的 WAF 相关内容，开源实现并不多，Mod security, ironbee, Naxsi。前两个产品是支持多种 Web Server 的，这里 Naxsi 也就显示出独特之处了，它支持 Nginx，搜索时也会发现有不少文档和使用说明了。那我们也先从代码最短的 Naxsi 开始吧，打开它的源代码你不得不惊叹作者代码写的真是丑啊！网上也有些文章是这样描述 Naxsi 的："Naxsi 是一款优秀的基于白名单的主动防御模块，bla..bla.."。代码缩进，格式混乱，命名怪异，不得不让博主怀疑其作者是中国名牌大学参加 ACM 的高阶选手。这东西跑起来，默认不加各种"#define xxx"的话，是任何日志都不打的，加上混乱的代码，作者的手法应该是希望没人能忍着恶心看下去吧，但是！博主做到了！示例我们还是先跑起来吧，网上瞎扯各种配置也没个完整的，且看这里：worker_processes 1;events{}error_log ./logs/error.log debug;daemon off;http{root html;MainRule"str:/*""msg:mysql comment (/*)""mz:BODY|URL|ARGS|$HEADERS_VAR:Cookie""s:$SQL: ...继续阅读 (45)

VIA:https://github.com/nathanmarz/storm/wiki/Tutorial教程通过这个手册，你可以了解到如何去创建Storm topologies并把它们部署到一个Storm集群。主要用到了Java语言，但是为了说明Storm的多语言支持的特性也使用了Python去实现一些例子。准备这个手册中使用的例子来自于storm-starter工程。建议你同步下来此项目，并根据例子来学习。阅读Setting up development environment和Creating a new Storm project两篇文章去搭建你的环境。Storm集群组件一个Sotrm集群表面上看起来和Hadoop集群很像。在Hadoop上你运行的时"MapReduce Job"，在Storm上运行的是"topologies"。"Job"和"topologies"之间还是有很大不同的 --最关键的一点是Mapreduce job最终是会完成的，而topology将会持续的执行(直到你终止它)。Storm集群中有两种不同的节点:Master和Worker。Master节点启动的守护进程叫做"Numbus"，这点和Hadoop的"JobTracker"很相似。Nimbus在集群众发布指令，给其他机器分配作业，并且监控失败。每一个Worker启动的守护进程叫做"Superviso ...继续阅读 (20)

操作系统：Mac OS X 10.8 使用版本：Lua-5.2.0照旧输出lua所有的执行过程:http://yzprofile.me/2011/09/25/step-into-source-code.html修改后的Makefile# Makefile for building Lua# See ../doc/readme.html for installation and customization instructions.# == CHANGE THE SETTINGS BELOW TO SUIT YOUR ENVIRONMENT =======================# Your platform. See PLATS for possible values.PLAT=noneCC=gcc-mp-4.7CFLAGS=-Wall -DLUA_COMPAT_ALL$(SYSCFLAGS)$(MYCFLAGS)-g3LDFLAGS=$(SYSLDFLAGS)$(MYLDFLAGS)LIBS=-lm$(SYSLIBS)$(MYLIBS)AR=ar rcuRANLIB=ranlibRM=rm -fSYSCFLAGS=SYSLDFLAGS=SYSLIBS=MYCFLAGS=-finstrument-functionsMYLDFLAGS=-finstrument-functio ...继续阅读 (24)

刚开始读大学那会儿还喜欢写些日志什么的，流水账，谈生活，谈感情，吹牛逼。后来觉得傻就全删了，导致现在除了人人网里的还存在的几张照片儿和一本毕业证证明过我在那个破学校里“天真无邪”地晃荡了四年。拿到taobao的offer之后，我心里就清楚了一件事情，近十多年我可能可以衣食无忧独自存活在这个世界上了，而且还是相对来说不错的生活。当然不是说taobao给了很多钱，而是无论走到哪里从我手下流出去地代码可以换来一个还算不错地经济收入。这时候你就开始想的更多了，当你在这个世界上饿不死的时候你会期望去做些什么？有的人会告诉你要好好享受生活，有的人会告诉你要趁着年轻好好努力。但在你还没有来得及思辨哪一个说法更有力的情况下，世俗无形的推力就让你不得不去考虑如何收获更多的利益。有人会说努力学习，持续进步你的收获会比金钱更有价值。似乎每一条都有道理，它们可能来自于你的朋友，家人，同事，Team Leader，再抑或一些孜孜不倦普及人生道义的公知，再再抑或现在看来他们是成功人士的某某某。当你觉得自己应该有独立的人格，不屑于他们的絮絮叨叨时，又有一个声音响起：“follow your heart”。不幸的又被乔帮主补了刀。我花了很长的时间去想上面的问题，去评估可失和想得，无奈限于人生阅历有限以及年轻人旺盛的荷尔蒙分泌让自我的认知和判断力极度受到自己的怀疑。话又说回来，在一个不用为生存担忧的环境里想这些乱七 ...继续阅读 (17)

原文链接:http://iphonedevwiki.net/index.php/Theos/Getting_StartedTheos入门目标这章包含了Theos的安装和用其创建一个新的项目。要求一个基于unix的操作系统(Mac OS X, iOS (jailbroken))，或者多数的Linux发行版本subversion 或者 gitcurlperldpkgxcode安装的官方工具链和SDK终端Objective-C 相关知识安装依赖针对Mac OS XMac OS X 默认安装了svn, curl和perl, 但你你仍然需要安装SDK和编译工具链。最简单的方法就是从官方网站获取iOS SDK(你必须先注册一个开发者帐号才能下载)。针对iOS安装SDK针对Linux后续补充安装Theos打开终端选择一个你安装Theos的位置，如果你不能确定，/opt/theos是一个不错的选择export THEOS=/opt/theos如果你选择了一个不在你的home目录内的地方，那么你可以需要root权限去执行命令。下载最新版本的Theos:使用git:git clone git://github.com/DHowett/theos.git $THEOS或者使用svn:svn co http://svn.howett.net/svn/theos/trunk $THEOS译者注: 这里的gi ...继续阅读 (21)

在你的*.org文件中添加#+LATEX_HEADER: \usepackage{xeCJK}#+LATEX_HEADER: \setCJKmainfont{SimSun}.emacs中添加这段，将原有编译使用latex换成xelatex(setq org-latex-to-pdf-process'("xelatex -interaction nonstopmode %f""xelatex -interaction nonstopmode %f"))PS: org-mode 8.0已经把org-latex-to-pdf-process重命名为org-latex-pdf-process, 谢谢下铺的兄弟提醒 : )C-c C-e p导出pdf试试。已经支持中文了。当然你要首先安装latex以及其扩展包。 ...继续阅读 (131)

前言:blog很久没更新过内容了,这次借着团队写书的机会也让自己说服自己把打游戏的时间拿来干点正经事儿 :)书籍项目地址:http://tengine.taobao.org/book/团队里的一些勤快耕耘的同学已经把一些完成的章节发布在上面了.我负责"Nginx基础设施"这部分章节:内存池共享内存slab算法buffer管理buffer重用机制buffer防拷贝机制chain管理chain重用机制aio原理锁实现基本数据结构时间缓存文件缓存log机制以下内容版权声明: 本书的著作权归作者淘宝核心系统服务器平台组成员所有。你可以： 下载、保存以及打印本书 网络链接、转载本书的部分或者全部内容，但是必须在明显处提供读者访问本书发布网站的链接 在你的程序中任意使用本书所附的程序代码，但是由本书的程序所引起的任何问题，作者不承担任何责任 你不可以： 以任何形式出售本书的电子版或者打印版 擅自印刷、出版本书 以纸媒出版为目的，改写、改编以及摘抄本书的内容简介:Nginx里内存的使用大都十分有特色:申请了永久保存,抑或伴随着请求的结束而全部释放,还有写满了缓冲再从头接着写.这么做的原因也主要取决于Web Server的特殊的场景,内存的分配和请求相关,一条请求处理完毕,即可释放其相关的内存池,降低了开发中对内存资源管理的复杂度,也减少了内存碎片的存在.所以在Nginx使用内存池时总是只申请, ...继续阅读 (43)

介绍Nginx Limit requests module：http://wiki.nginx.org/HttpLimitReqModuleThis module allows you to limit the number of requests for a given session, or as a special case, with one address. Restriction done using leaky bucket.Limit requests使用的是漏桶算法.http://en.wikipedia.org/wiki/Leaky_bucketms=(ngx_msec_int_t)(now-lr->last);excess=lr->excess-ctx->rate*ngx_abs(ms)/1000+1000;if(excess<0){excess=0;}*ep=excess;if((ngx_uint_t)excess>limit->burst){returnNGX_BUSY;}if(account){lr->excess=excess;lr->last=now;returnNGX_OK;}lr->count++;ctx->node=lr;returnNGX_AGAIN;ctx->rate在配置解析时转换为QPS，并放大了1000倍以增加计算精度。excess ...继续阅读 (20)

在Tengine 1.3.0版本发布的时候增加了一个支持开发者通过编写Tengine模块的形式, 来让Tengine启动独立的进程做事情的一个特性.这个特性我自己是非常满意并充满期待的，利用Nginx的配置解析和良好的模块化，以及底层网络事件的接口封装，可以让开发者非常容易的开发出一套高性能，高可扩展，跨平台的TCP server，并且Nginx也内置了许多优秀的数据结构的实现。当然，想像总是美好的。这个年代有谁再会去裸写TCP server的？写TCP Server有谁会去用Nginx的架子呢？实事上，这个模块的诞生，也主要是为了给Tengine提供一个辅助进程，解决类似Cache Manager这样进程的问题。下面看下该如何开发一个proc模块:完整的例子可以在这里得到:ngx_proc_daytime_modulefile:configngx_addon_name=ngx_proc_daytime_modulePROCS_MODULES="$PROCS_MODULES ngx_proc_daytime_module"NGX_ADDON_SRCS="$NGX_ADDON_SRCS $ngx_addon_dir/ngx_proc_daytime_module.c"file:ngx_proc_daytime_module.cstaticngx_command_tngx_proc_d ...继续阅读 (51)

由于一直在做Web Server偏安全相关的开发,现在代码提交非常活跃的ironbee貌似值得看一下.ironbee似乎是要励志于解决跨Web Server的安全引擎.不过现在只支持了apache的httpd和trafic server.通过实现一个apache模块或者ATS模块作为ironbee engine的入口,将请求信息传递到ironbee内部.再经过ironbee内部各个模块处理这么一个流程.项目主页:https://github.com/ironbee/ironbeewiki里有安装使用的手册, 不过形同虚设...https://github.com/ironbee/ironbee/wiki/_pages一个正在开发当中的项目,编译,使用过程中都会遇到各式各样的问题, 或许你遇到的问题和我不同...Build Instructions:https://github.com/ironbee/ironbee/wiki/Build-instructions假设你已经搞定了libhtp和libiconv动态库的问题,再或者意识到apache版本需要2.2.*才行.."$ configure --with-httpd" 编译后会生成apache模块的相关支持动态库."$ make install" 会在 "/usr/local/ironbee/lib" 目录下生成mod_iron ...继续阅读 (46)

ningx从写模块开始:#configngx_addon_name=ngx_http_mytest_moduleHTTP_MODULES="$HTTP_MODULES ngx_http_mytest_module"NGX_ADDON_SRCS="$NGX_ADDON_SRCS $ngx_addon_dir/ngx_http_mytest_module.c"//ngx_http_mytest_module.c#include#include#include#includestaticchar*ngx_http_mytest(ngx_conf_t*cf,ngx_command_t*cmd,void*conf);staticvoid*ngx_http_mytest_create_loc_conf(ngx_conf_t*cf);staticchar*ngx_http_mytest_meger_loc_conf(ngx_conf_t*cf,void*parent,void*child);staticngx_int_tngx_http_mytest_handler(ngx_http_request_t*r);typedefstruct{ngx_str_tmyteststr;}ngx_http_mytest_loc_conf_t;staticngx_command_tngx_http_mytes ...继续阅读 (20)

前言:由于之后的工作需要对nginx进行开发，所以又要开始去再深入了解一下它的实现。借此机会也记录一下自己在代码分析过程中的使用的一些技巧和方法。网络上流传的nginx的代码分析很多，大多都是给代码打打注释和分析一下原因，以及概括的说下整个系统的结构。这样就会带来一些缺点，当有人想去深入学习的时候跟着大神们总结出来的代码分析去一点一点的浏览代码时，看了很久依然是雾蒙蒙的一片，不晓得当前这一行代码之后会发生什么，这样就很难弄明白这行代码为什么会写成这个样子。至少我是这个样子的 :) 。特别是在nginx中大量使用的回调函数绝对会让你最初在做代码阅读时有种崩溃到想死的感觉。授之以鱼不如授之以渔，对于我来说更倾向于去了解前辈们面对未知的思维过程，而不是思考出的结果。由于我也不是大神，之下的分析或者方法难免有偏差或幼稚的地方，还请大家指出以及提出更好的方法。:)为了能更加迅速的了解一个项目、服务器或者是一个简单的小应用的结构以及执行过程，我们十分渴望了解到其在执行的过程中的函数调用顺序。当这些完全摆在你面前的时候一切都清晰可见了。1、dtruss函数调用堆栈:也有一些工具提供了针对源码生成函数调用树导出成图片的工具，但是由于种类繁多并且实现的质量不一，这里我使用的是mac下自带的dtruss,是对dtrace的一个脚本封装，对应用进行的分析。在linux下也有相应的strace。但是也有一 ...继续阅读 (17)

chrome 14稳定版本发布，支持了本地c/c++代码在浏览器上的执行。 在家无聊就来把它放置在github pages支撑上的博客上面做个测试，也挺有意思的。:)这里是native client sdk的一些介绍http://code.google.com/chrome/nativeclient/docs/technical_overview.html如果打开浏览器看到下面的页面并且弹出了对话框那就说明native client已经加载到浏览器啦。但是github速度有点慢，加载时间可能会有点长..-_-!!在此之前请确保自己使用的是chrome 14或者更高,可以在url中输入about:flags，检测浏览器Native Client支持是否启动。这里是使用github pages发布的页面，如果对这个静态页面发布服务不太熟悉，可以点击这里http://pages.github.com/去了解详细的内容。对于native client应用只需要一个支持静态文件发布的web服务就能满足啦，毕竟所有的东西都是已经编译生成好的嘛。可以在这里下载到native client sdkhttp://code.google.com/chrome/nativeclient/docs/download.html这里也有更加详细的官方说明:http://code.google.com/chro ...继续阅读 (19)

nginx的模块支持是非常好的，如果想要部署一个简单的点播流媒体服务器，nginx通过添加模块也能支持，并且可以借助nginx的http协议解析来做防盗链一类的工作或者负载均衡什么的。你可以从这里下载到modulehttp://h264.code-shop.com/download/nginx_mod_h264_streaming-2.2.7.tar.gz但是解压缩之后有必要打个patch上去，不然可能编译不能通过# vi nginxpatch.diff---../nginx_mod_h264_streaming-2.2.7/src/ngx_http_streaming_module.c.orig2010-05-2418:04:43.000000000+0400+++../nginx_mod_h264_streaming-2.2.7/src/ngx_http_streaming_module.c2010-05-2418:05:02.000000000+0400@@-155,10+155,6@@}/* TODO: Win32 */-if(r->zero_in_uri)-{-returnNGX_DECLINED;-}rc=ngx_http_discard_request_body(r);patch -p1 < nginxpatch.diff当然了，改动不多，自己手动把那几行删除掉也行# ...继续阅读 (46)

效果图你可以在github上clone到所有需要的配置文件:github点击这里进入把dot.emacs和dot.emacs.d拷贝到用户目录下，分别改名成.emacs和.emacs.d2013-05-09PS: 发现自己的配置简直是渣渣,现在已经投靠https://github.com/bbatsov/preludeEOFhave fun :) ...继续阅读 (16)

工欲善其事，必先利其器。作为开发使用最多的就是bash了。exportPS1="\n\e[0;33m\u\e[0m@\e[34m\h \e[32m\w\n\[\e[31m\]\$>> \[\e[0m\]";写的挺长，看起来毫无头绪，分解开来就简单了。"\e[0;33m]"#这一格式的都是颜色标识"\u"#用户名"\h"#主机名"\w"#绝对路径"\n"#换行符"\$"#身份说明，$为普通拥护，#为root用户除去颜色就只剩下:exportPS1="\u@\h \w \n \$>> "效果图: yuen@enmatoMacBook-Air /usr/local$>>这里有一个较为详细的配置说明:Color Bash Prompt中秋快乐! ^_^EOF ...继续阅读 (64)

淘宝校招开始啦：这里是针对淘宝共享数据平台的招聘官方介绍：共享数据平台由三个部门组成，包括数据平台与产品部、共享中心部、商业智能部。我们致力于搭建全淘宝共享的分布式数据处理平台，整合，分析，挖掘全淘宝的商业数据，提供多样性的数据产品。 同时，我们负责建立全淘宝的收费平台，建立淘宝的统一用户中心等服务模块，为淘宝网，淘宝商城，一淘网提供统一的用户体系。这里有高并发、海量数据存储、分布式数据处理框架、大型消息中间件、高性能分布式查询系统、实时计算框架、实时流数据处理等技术，数据可视化实验室，体感交互实验室…… 顶级挑战，期待你的加入！个人总结：在这每天都有大牛们的分享课堂，这里是吸收成长的好地方。在这身边坐着的都是以一挡千的神，是开阔视野学习收获的好地方。这里开放,分享,平等，没有学校、政府般恶心又复杂的人际圈子。你的每一个想法，每一个创新，将会有上亿的受众，这里是展现自己最好的舞台。只要你有技术，有梦想，这里期待你的加入。各职位要求请参照官方网站的各个职位要求：投递简历需要使用新浪微博帐号 : )点击访问:taobao共享数据平台官方网站 ...继续阅读 (20)

在lion下编译nginx会遇到openssl的一个错误，原因其中一些api被建议废弃了，编译时不停的报警告之后错误。 你可能得到一串下面类似的错误cc1: warnings being treated as errors src/core/ngx_crypt.c: Infunction‘ngx_crypt_apr1’: src/core/ngx_crypt.c:76: warning: ‘MD5_Init’ is deprecated(declared at /usr/include/openssl/md5.h:113)只需要在configure时加上一条:./configure --with-cc-opt="-Wno-deprecated-declarations"hava fun : ) ...继续阅读 (27)

你好，世界！Hello,World!intmain(intargc,char*argv[]){printf("Hello,World!");return0;} ...继续阅读 (22)