Nothing new, really.越来越不喜欢写blog了，也不喜欢发微博，以前经常发，是自己遇到了一些技术问题，找到解决方案了，会写一篇blog或者微博来记录下，现在越来越没兴趣写这些东西了，除了技术相关的，其它方面还真没什么好写的。最近的事：已经不能久坐了，坐一会就如坐针毡，实在忍不住了就站立办公了不知为何，状态很差，注意力不易集中现在这个时间段，成都天气开始转好, 整个冬天都是雾霾，只有最近2周才看到太阳买车了，只周末开一下，开了几百公里, 路痴，手机导航也很不靠谱 ...继续阅读 (29)

Hello 2014! I'm 31 years old now, sadly.I wish myself in the new year: Less waste time, less unhappy, less overtime, more productive, more product, much more confidence. ...继续阅读 (21)

最简单的，先参考这个 http://ubuntuforums.org/showthread.php?t=910717 ，建好目录，执行：dpkg-deb--buildhelloworld_1.0-1即可生成deb文件，然后# 安装sudodpkg-ihelloworld_1.0-1.deb# 在包管理工具中搜索sudodpkg-l|grephelloworld# 卸载sudodpkg-rhelloworld_1.0-1:i386 ...继续阅读 (17)

买了个raspberry pi，折腾了下，还是挺好玩的。 基本的配置就参考的这篇文章：http://www.leiphone.com/raspberry-pi-hands-on.html装了xbmc,参考的http://www.leiphone.com/raspberry-pi-hands-on.html ，另外装了samba，做文件服务器。 ...继续阅读 (19)

参考：http://www.right.com.cn/forum/thread-85038-1-1.htmlhttp://www.right.com.cn/forum/thread-88895-1-1.htmlhttp://downloads.openwrt.org/snapshots/trunk/ar71xx/openwrt-ar71xx-generic-tl-wdr4310-v1-squashfs-factory.binhttp://www.right.com.cn/forum/thread-85038-1-1.html ...继续阅读 (19)

rsync配置：app@front:/tmp/log$cat/etc/rsyncd.confusechroot=falselogfile=/var/log/rsync.log[log]uid=appgid=apppath=/tmp/logcomment=xxxxxxreadonly=falseclient端目录：app@front:~/test$tree.├── 13223 ├──a│   ├──b│   │   └──c│   └──xxx├──asdf└──now3directories,4filesclient端执行：app@front:~/test$rsync-O-avz./rsync://x.x.x.x/log/sendingincrementalfilelist13223asdfnowa/xxxsent267bytesreceived87bytes236.00bytes/sectotalsizeis0speedupis0.00看server端,已经同步完成。注意：chroot是到每个目录就切换到这个目录，以这个目录为根uid，gid是这个目录的所有者权限，最好是和server端目录实际的权限一致最好设置密码 ...继续阅读 (29)

python-mpdbxx.py# 在xx.py的112行设置断点bxx.py:112 # 运行直到断点处c# 显示上下文源码l# 打印当前局部变量pplocals()参考： * http://docs.python.org/2/library/pdb.html * http://www.doughellmann.com/PyMOTW/pdb/ ...继续阅读 (20)

公司的代码python都是用tab分割,而现在的开源项目大部分是用空格分割。可以做个单独的配置，在~/.bashrc中加入：aliasvix='vi --cmd "set expandtab"'所以需要编辑外部代码时，就用vix吧。 ...继续阅读 (30)

chrome的调试工具中，可以记录请求相应数据，但是如果存在页面刷新、跳转就看不到之前的流量了，所以对于表单提交就比较麻烦，找了好久，今天发现原来firebug、chrome的调试工具都支持这种情况的处理。chrome是再network那个tab下，最下面状态栏处，有一个原点“Preserve Log upop navigation”, 需要记录跳转的情况时，点下这个按钮即可。firebug在网络这个tab下，有个“保持”按钮，意思是“页面载入时不清空面板”。That saved my life! ...继续阅读 (193)

在hacker news上看到个项目：http://www.peterbe.com/plog/introducing-hugepic.io是用来做大图片展示的，上传图片，压缩、切分，前端用地图的形式展示，里面用到的几个开源组件不错，可以了解下：tornadomotor 一个给tronado用的mongodb驱动rq 一个简单的基于redis的job queueJpegoptim jpg压缩，不晓得和imagemagic对比怎么样leafletjs 一个前端的map库Leaflet.draw 可以在地图上画图的库 https://github.com/jacobtoye/Leaflet.draw ...继续阅读 (30)

varnish中配置purge如下：aclpurge{"localhost";"192.168.55.0"/24;}subvcl_recv{#allowPURGEfromlocalhostand192.168.55...if(req.request=="PURGE"){if(!client.ip~purge){error405 "Notallowed.";}return(lookup);}}subvcl_hit{if(req.request=="PURGE"){purge;error200 "Purged.";}}subvcl_miss{if(req.request=="PURGE"){purge;error200 "Purged.";}}如果要purge: http://img.notsobad.me/xxx/abc.jpg， 在服务器上执行：curl-XPURGEhttp://img.notsobad.me/xxx/abc.jpg这样写一直报405 not allowed, 想了下，也许是访问img.notsobad.me时，走的时外网网卡，varnish识别处的ip是外网ip，根据上面的配置应该走loopback才对，so：curl-XPURGEhttp://127.0.0.1/xxx/abc.jpg即可。 ...继续阅读 (27)

phantomjs的文档还比较简单，最近使用发现的一些问题：无法设定载入网页的超时解决：单独写程序来监控这些phantomjs进程，超时kill基于这个https://github.com/lgxz/lprm 修改而来。无法跟踪某些网页跳转如这种html的meta跳转，phantomjs无法跟踪wangxh@mac:~/x$curl-vvhttp://www.javaworld.com.tw/*Abouttoconnect()towww.javaworld.com.twport80(#0)*Trying61.63.52.65...*connected*Connectedtowww.javaworld.com.tw(61.63.52.65)port80(#0)>GET/HTTP/1.1>User-Agent:curl/7.24.0(x86_64-apple-darwin12.0)libcurl/7.24.0OpenSSL/0.9.8rzlib/1.2.5>Host:www.javaworld.com.tw>Accept:*/*>1.1 200OK ...继续阅读 (213)

wget没办法直接限制下载文件大小，而curl有这个功能，所以可以用curl来做文件下载--max-filesize 9999 文件要小于9999 bytes， 文件大于此致会返回63错误，而不下载文件wangxh@mac:~$curl'http://www.baidu.com/img/10.23_112a036972a74bbcb84b8957316c8aa3.gif'--max-filesize9999-O-v*Abouttoconnect()towww.baidu.comport80(#0)*Trying119.75.218.70...% Total % Received % Xferd Average Speed Time Time Time CurrentDloadUploadTotalSpentLeftSpeed00000000--:--:----:--:----:--:--0*connected*Connectedtowww.baidu.com(119.75.218.70)port80(#0)>GET/img/10.23_112a036972a74bbcb84b8957316c8aa3.gifHTTP/1.1>User-Agent:curl/7.24.0(x86_64-apple-darwin12.0)libcurl/7.24.0OpenS ...继续阅读 (19)

假如要管理10台以上的同样配置的服务器，我想给所有机器装同一个软件，或者更改同一个配置，该怎么办？连上去一台一台管理明显不现实，我以前时自己写个简单脚本，前提自己先配好公钥认证。nodes-exec.shcmd=$@foriin`cat./my-nodes.txt`;doecho$i;ssh$i"$cmd";done运行: ./nodes-exec id -u, 即在所有服务器上执行了id -u这个命令,节点少或者执行的命令简单还没什么，如果30个节点，每个节点上执行一个运行超过5分钟的命令，you do the math…..找了下，有人用shell写了个类似的，ubuntu下 sudo apt-get install mussh 然后：mussh-H./my-nodes.txt-c'sudo pip install PyCassa'-b-m0参数自己看手册.EOF ...继续阅读 (18)

最近遇到个gearman的问题，client一次下2000个任务，然后sleep 10s, 然后再次下2000个任务，如此循环，不关心任务是否完成。用gearman --status看时，会发现，总任务数会突然有个突然下降，下降的数目超过worker这段时间可以处理的数目，查了好久都没搞明白什么原因。今天早上走路时忽然想起来，也许是下任务时，那个任务循环有问题，因为没有把任务放到background，导致每个周期都会把job handler覆盖掉，job server无法和client通信，就认为这个任务可以抛掉了，so……EOF ...继续阅读 (33)

gearman取任务状态出现keyerror错误，类似这个https://github.com/Yelp/python-gearman/issues/13 ，在评论里有人提供了解决方案，测试可以解决问题. 执行下面这个one liner即可：sudowgethttps://raw.github.com/eminence/python-gearman/master/gearman/client_handler.py-O$(dirname$(python-c'print __import__("gearman").__file__'))gearman坑比较多，python-gearman已经两年没更新了，bug也没人管。 ...继续阅读 (34)

昨天搭了个mongodb用来写数据，单条100K左右，运行一晚，写入65万条左右，今天就开始各种崩溃了。查了下，发现居然是分配了1核cpu、1G内存，马上调整为4核/16G, 以为解决问题，没想到还是跑了一会就崩溃。无奈写了个脚本放入crontab中，每分钟运行一次，尝试连接mongodb，失败就重启。mongoimages/dev/null2>&1|grep'connect failed'&&sudo;/etc/init.d/mongodbrestart刚上去看16G内存已经被吃光，剩下160M了。ps1: 记得建索引ps2: 记得关闭连接conn=pymongo.Connection(MONGODB_SERVER,27017)＃…..conn.close()ps3: 要用mongodb，硬盘、内存要够大 ...继续阅读 (21)

最近在用hbase做图片存储，大约3000万张图片，每张60k以内。 在hbase shell里count'images'这个速度会非常非常慢。查了下，有个map reduce的rowcounter，尝试了半天，要用有hdfs写权限的用户执行，如我的系统上要用hdfs这个用户。sudocrontab-uhdfs-e10****(date;hbaseorg.apache.hadoop.hbase.mapreduce.Driverrowcounterscreen_shots)>>/tmp/count_rows.txt2>&1上面在crontab里增加了个每小时执行一次rowcounter,将结果追加到/tmp/count_rows.txt25万数据，约需要200s统计。 ...继续阅读 (36)

测试下nginx+多uwsgi的配置.一个flask项目：wangxh@mac:~/myapp/myhome$tree.├──__init__.py├──s.ini├──s2.ini├──templates│   └──index.html├──ui.py└──ui.pycwangxh@mac:~/myapp/myhome$cats.ini[uwsgi]socket=/tmp/s.sockmaster=truemodule=uicallable=appuid=4294967294gid=4294967294buffer-size=25000wangxh@mac:~/myapp/myhome$cats2.ini[uwsgi]socket=/tmp/s2.sockmaster=truemodule=uicallable=appuid=nobodygid=nobodybuffer-size=25000wangxh@mac:~/myapp/myhome$catui.py#!/usr/bin/python#coding=utf-8importsyssys.path.append('/Library/Python/2.7/site-packages')fromflaskimportFlask,request,render_template,redirect,url_for,session,fl ...继续阅读 (28)

我想修改下amchart的饼图样式，动态创建svg中的text标签，但是在chrome中测试var$el=$('24.4%');$($0).after($el);这样的代码是无法生效的,而只有这样的可以：$el=$($0).clone();$el.attr('font-size',32);$($0).after($el);也就是说，用jquery创建的元素，是无法写入svg的，只能从svg中现有元素复制出来，然后修改的元素可以追加到svg中。今天查了下，看到这个讨论， http://stackoverflow.com/questions/3642035/jquerys-append-not-working-with-svg-elementWhenyoupassamarkupstringinto$,it'sparsedasHTMLusingthebrowser'sinnerHTMLpropertyona(orothersuitablecontainerforspecialcaseslike).innerHTMLcan'tparseSVGorothernon-HTMLcontent,andevenifitcoulditwouldn'tbeabletotellthatwassupposedtobeintheSVGnamespace.innerHTMLisnotavailableonSVG ...继续阅读 (48)

一块u盘里是个系统镜像，我想把它写到iso文件中wangxh@mac:~/file$mount/dev/disk0s2on/(hfs,local,journaled)devfson/dev(devfs,local,nobrowse)map-hostson/net(autofs,nosuid,automounted,nobrowse)mapauto_homeon/home(autofs,automounted,nobrowse)/dev/disk1on/Volumes/RamDisk(hfs,local,nodev,nosuid,noowners,mountedbywangxh)/dev/disk2s4on/Volumes/GRMCULXFRER(msdos,local,nodev,nosuid,noowners)wangxh@mac:~/file$diskutillist/dev/disk0#:TYPENAMESIZEIDENTIFIER0:GUID_partition_scheme*320.1GBdisk01:EFI209.7MBdisk0s12:Apple_HFSMacintoshHD319.2GBdisk0s23:Apple_BootRecoveryHD650.0MBdisk0s3/dev/disk1#:TYPENAMESIZEIDENTIFIER0:RamDisk*2.4G ...继续阅读 (127)

琐碎记录在layout xml中，元素如果需要在java中引用，就需要有android:idsetContentView(R.layout.activity_main)，即把res/layout/activity_main.xml载入R.layout用来引用layout的元素，R.id用来引用所有的idres/values-fr, 是法语对应的目录调用字符串:String hello = getResources().getString(R.string.hello_world)模拟器中无法用键盘输入文字：编辑avd，在hardware中添加键盘支持导入项目时，经常报“@Override annotation error (android prefs)”， 参考这个：http://stackoverflow.com/questions/4761888/override-annotation-error-android-prefshttp://qtcstation.com/2011/05/android-and-jdk-compliance/命令行创建项目：androidlisttargetsandroidcreateproject--target6--nameWhereAmI--path~/Documents/workspace/WhereAmI--activityMainActi ...继续阅读 (20)

我会不断补充这个页面，增加不同的测试题，来测试下你的shell能力。目录下有a.txt,b.txt,c.txt 把他们改名为a.txt.bak,b.txt.bak,c.txt.bak在tmp目录下创建a0.txt,a1.txt,....a100.txt递归删除/var/www目录下的所有“.svn”目录查找并杀掉所有的nginx进程,进程名特征：“/usr/local/sbin/nginx”/var/log/wtmp文件过大了，需要清空这个文件，如何做？shell中有哪些特殊字符，以及他们的含义和应用场合。文件权限位的含义，如权限为601是什么意思?bash下，命令行操作有哪些快捷键可以用？在哪里可以查到这些快捷键的说明？如何定义函数，函数如何接受参数，返回值？ ...继续阅读 (22)

appspot被墙，但是它的服务比自己搭服务器要方便的多，如果自己有vps的话，可以做一个反向代理过去，很简单，6行搞定。自己在nginx中加一个vhost，绑定到自己的域名，然后反向代理到自己appspot的项目，配置如下：server{listen80;server_nametest.notsobad.me;location/{proxy_passhttp://rm-rf-hrd.appspot.com;}}EOF. ...继续阅读 (41)

google map一般这样调用，引入的google的js文件，然后它内部会在引入其它js，网络条件不好的时候，会阻塞住浏览器type="text/javascript"src="http://map.google.cn/maps/api/js?sensor=false">var draw_map = function(){ //.…. }; draw_map();所以最好是用异步的方式，再需要的时候再载入地图的js文件，等地图所需js文件载入完毕后在调用自己的draw_map函数,google的api支持callback。class="show-map">show mapvar draw_map = function(){ //.…. }; $('.show-map').on('click', function(){ if(typeof google == 'undefined'){ $.getScript("http://map.google.cn/maps/api/js?sensor=false&callback;=draw_map");} });OVER. ...继续阅读 (24)

两个现象正常的http请求：wang@nb:/tmp$nc20.0.8.5 80GET/abcHTTP/1.0HTTP/1.1 404NOTFOUNDServer:nginx/1.0.6Date:Fri,10Aug2012 04:19:29GMTContent-Type:text/html;charset=utf-8Connection:closeVary:Accept-Language,CookieContent-Language:zh-cnSet-Cookie:sessionid=981f6af6103261f552fe5a1ce4b5a90d;Path=/……如果请求的url不以/开头：wang@nb:/tmp$ nc 20.0.8.5 80 GET abc HTTP/1.0400 Bad Requestbgcolor="white">400 Bad Requestnginx/1.0.6注意响应部分没有http头部。如果用httplib来发一个这样的请求，会注意到响应码居然是200，这应该是httplib发现没有响应头，自己补的状态码。>>>importhttplib>>>conn=httplib.HTTPConnection('20.0.8.5',80)>>>conn.request('GET','x')>>>r=conn.getresponse()>>>r>>>r.sta ...继续阅读 (33)

2012.7月，我已经工作5年了。五年前我完全不知道以后会是什么样子，现在我也完全不知道5年后会是怎样。2010.5月，在我工作快3年的时候，我离开了第一个公司,加入现在的公司。2007.7月，毕业了，来到北京，第一次开始挣钱，第一次银行卡上有超过3位数的钱感慨下，5年是个坎，希望能在下个五年里走好。人说性格决定命运，也许一个人的路，早就定下来了吧,我虽不信命中注定，但我信每个人都会有限制，能做什么，不能做什么，总有条线在约束着自己。有时候我觉得很难给自己定位，我能做什么？我能胜任什么样的事情？别人眼里我是个怎样的人？无处安放。 ...继续阅读 (19)

来北京5年了，2007年背着包到北京，到现在已经搬了五六次家，东西越来越多，有很多东西，从来没有用过，却一直被我搬来搬去。前些天看到个说法，叫扔掉50件东西，我想实践一下。~~票据，各种发票、收据，我也不知道为什么会一直留着~~旧杂志大学时代的旧书穿过小于5次的衣服坏掉的电器，一个台灯，两个旧手机……待续 ...继续阅读 (30)

最近项目中用到了scrapy，所以研究了一下，发现很好用，主要把时间花在内容的提取规则上即可，剩下的全部交给scrapy搞定。写了几个网站的爬取规则，包括6个图片网站，7个笑话网站，每个网站需要编写的代码50行以内，所以对于内容采集来说scrapy非常好用。爬几个笑话网站的代码放在了github上了：joke-spider ...继续阅读 (15)

今天用一个urllib2、cookielib来模拟登陆，并希望能维持会话，及认证后的cookie可以保存下来，后续请求直接使用这个cookie，用cookielib折腾了好久，坑爹的是cookie可以保存，但是一直不能在请求中带上。最后的解决办法。。不用cookielib，自己写个文件保存cookie，下次请求时自己读文件、自己发header。。。。 ...继续阅读 (22)