贵贵的博客 ( http://blog.linuxphp.org/ ) :今天客户端反馈一个问题用户说的话顺序都反了, 查了下好像昵称里多了什么特殊字符 数据库查询,没有什么不同: select * from user where id=587618\G*************************** 1. row *************************** id: 587618 nick: 49‭‏筱喜 复制结果到vim里select * from user where id=587618\G*************************** 1. row *************************** id: 587618 nick: 49<202d><200f>筱喜 这个"<202d><200f>"是什么鬼, 在网页里用F12查看源代码 是 这样的 "nick: 49‭‏筱喜"搜索 ‭ 得到此解读:https://en.wikipedia.org/wiki/Right-to-left_mark 后面在这里找到了用PHP怎么替换https://github.com/Pasvaz/laravel-skeleton/blob ...继续阅读 (18)

贵贵的博客 ( http://blog.linuxphp.org/ ) :升级完系统，通过ssh连内网机器发现报一个警告，然后用top提示screen.xterm-256color': unknown terminal type 通过在本机上.bashrc加上export TERM=screen.linux 再连ssh测试正常另外发现使用了这个TERM后查看文件有些高亮特效，不错的 ...继续阅读 (20)

贵贵的博客 ( http://blog.linuxphp.org/ ) :本来想使用#sticky让负载均衡平均，但是使用中发现ie系浏览器打开会异常缓慢，原因不明，换回#ip_hash ...继续阅读 (25)

贵贵的博客 ( http://blog.linuxphp.org/ ) :编译makepkg -s报错configure.ac:40: error: must install xorg-macros 1.8 or later before running autoconf/autogen 解决方法：export ACLOCAL='aclocal -I /usr/share/aclocal' 参考：http://lists.linuxfromscratch.org/pipermail/blfs-support/2013-August/073305.htmlhttps://www.x.org/wiki/Development/BuildingX/ ...继续阅读 (19)

贵贵的博客 ( http://blog.linuxphp.org/ ) :电信宽带送了机顶盒，内容很丰富，付费的很多，付费功能很强大。遥控器点点点钱就没了，在服务选项里找到了最高消费限制，设置了0元。为保险起见决定试试屏蔽下单请求，前3个月免费，可以好好测试。 下班借了同事的随身wifi，然后装了wireshark抓包工具，遥控器操作下单，抓包如下第一个是下单，第二个是付款。没抓包前以为可能是域名，可以用绑定到内网ip的方式屏蔽，但是结果是ip直接访问，所以只能禁止url访问了，打开路由器设置黑名单测试后下单会失败然后直接返回首页 ...继续阅读 (178)

贵贵的博客 ( http://blog.linuxphp.org/ ) :案例一、最近发现js/css文件无规律的TCP_IMS_MISS/200导致内容被刷新测试中发现好像touch文件修改了文件的时间后会比较容易触发此操作在nginx里增加expires 30d;好像效果不是很明显。所以决定在ats里再加上两条规则dest_domain=. suffix=css revalidate=30d dest_domain=. suffix=js revalidate=30d测试后发现好像有效果 案例二、今天发现所有文件都报MISS检查diags.logWARNING: <AIO.cc:410 (cache_op)> cache disk operation failed READ -1 5 WARNING: <Cache.cc:2057 (handle_disk_failure)> Error accessing Disk联系运维硬盘有坏道，需要更换硬盘 ...继续阅读 (18)

贵贵的博客 ( http://blog.linuxphp.org/ ) :php入口执行一个shell<?php $a = exec("./a.sh"); var_dump($a); 看下a.sh 的内容#!/bin/bash echo "11" (sleep 10) &shell的sleep是后台执行的，php执行shell，php会卡住等到10s才结束，为什么？ ---经过朋友的提醒发现要把sleep的输出重定向到 /dev/null修改后脚本如下#!/bin/bash echo "11" (sleep 10 > /dev/null) & 官方也有给相关的说明，只是在很不起眼的Note Note:If a program is started with this function, in order for it to continue running in the background, the output of the program must be redirected to a file or another output stream. Failing to do so will cause PHP to hang until the e ...继续阅读 (16)

贵贵的博客 ( http://blog.linuxphp.org/ ) :最近在安装docker，发现在我64位CPU，32位的gentoo上按wiki方法并不能成功，具体体现为装官方版会报编译错误，装overlay版无法启动。如下为执行docker daemon的报错。启动报错：FATA[0000] bad listen address format /var/run/docker/libcontainerd/containerd.sock, expected proto://address 经过了N次失败尝试，终于测试出可行性方法方法 一:1: 先将docker删除emerge -C  app-emulation/docker 修改 /etc/portage/package.accept_keywords 文件将=app-emulation/docker-1.11.1 ~x86 行去掉2: 暂时去掉overlaylayman -d docker#添加keywords后就退出不执行安装emerge -av  app-emulation/docker dispatch-conf3.使用overlay安装layman -a dockeremerge -av  app-emulation/docker小结： ...继续阅读 (80)

贵贵的博客 ( http://blog.linuxphp.org/ ) :try_files 按顺序检查文件是否存在，返回第一个找到的文件，至少需要两个参数，但最后一个是内部重定向也就是说和rewrite效果一致，前面的值是相对$document_root的文件路径。也就是说参数的意义不同，甚至可以用一个状态码 (404)作为最后一个参数。如果不注意会有死循环造成500错误。示例1：location ~.*\.(gif|jpg|jpeg|png)$ { root /web/wwwroot; try_files /static/$uri $uri; }原意图是访问http://example.com/test.jpg 时先去检查/web/wwwroot/static/test.jpg是否存在，不存在就取/web/wwwroot/test.jpg 但由于最后一个参数是一个内部重定向，所以并不会检查/web/wwwroot/test.jpg是否存在，只要第一个路径不存在就会重新向然后再进入这个location造成死循环。结果出现500 Internal Server Error实例2:location ~.*\.(gif|jpg|jpeg|png)$ { root /web/wwwroot; try_fil ...继续阅读 (16)

贵贵的博客 ( http://blog.linuxphp.org/ ) :使用4399手游通玩游戏时发现vt没有开启，进bios检查是开启状态。系统将刚装的，重新安装前正常。无奈以为删除不该删的系统软件，又重新安装，发现装完可以用了，安装杀毒软件重启再检查又不行，网查都说avast会先占用vt导致的，除了卸载并没有给出其它方案，后来在英文站查到了，方法就是进入设置－疑难排解－启用硬件辅助虚拟 前面对勾去掉。 http://stackoverflow.com/questions/20019231/vt-not-supported-when-installing-haxm  ...继续阅读 (27)

贵贵的博客 ( http://blog.linuxphp.org/ ) :为什么过滤最近发现ats缓存总是被莫名的清掉，查日志发现有TCP_REFRESH_MISS/200 POST的日志，然后就会回源。日志如下测试流程如下修改思路先是把cache.config中的method指定为get了，post也批定不cache了，但是还是不行，于是只能从nginx下手把POST请求全转走，配置如下set $CacheFlag 1; location / { if ($request_method = POST) { set $CacheFlag 0; rewrite ^/(.*)$ /NOCACHE/$1 last; } # 转发到ats，此处略去... ... } location /NOCACHE/ { if ($CacheFlag = "1") { return 403; } ...继续阅读 (57)

贵贵的博客 ( http://blog.linuxphp.org/ ) :这是什么？为保证在服务器岩机时有一份缓存可用，在正常情况下能及时刷新缓存内容不至于太旧为能通过正则表达式来批量清除缓存内容，同时不对整个缓存进行遍历以至于托跨机器 ,关于ats自带的regex_delete测试中发现效率远远不行。思路是怎样的？根据用户访问情况来进行缓存更新，如我设置缓存1小时失效，我发现age值超过300（也就是 内容生成超过5分钟）就手动更新缓存，更新时进行后端的状态检查。对于一些静态资源由于内容基本不会变化，所以跳过自动更新对于需要人工刷新的页面(如首页), 更新时用缓存内容回写，保证一直是旧内容目录刷新功能类似，每次取有效期内的规则列表，然后拿用户访问的URL匹配，如果链接 是在生效期前生成的且能匹配上正则更新缓存。需要如何配置？除基本配置外，主要是ats的日志格式有要求，参考文件logs_xml.configcrontab定时每分钟执行tailAtsLog.sh文件来分析ats日志要清理的目录可以通过数据库读取，这里为方便解释主业务硬编码到了文件libRegex.php其它目录刷新来自于群里人的点拨，最开始是由一个regex_revalidate的插件实现，文章 http://www.ywjt.org/index.php/archives/883给出了具体如何使用。之所以没 ...继续阅读 (65)

贵贵的博客 ( http://blog.linuxphp.org/ ) :由于互联网上关于cache.config的示例很少，本节主要就此配置中的一级标识符进行测试总结讲之前先转一个文章 https://blog.zymlinux.net/index.php/archives/293在cache.config中，有时候大家会要对后面的服务器做限制，如限制某个机器的内容不cache等，这时根据环境，这个服务器可能是个域名，也可能是个IP，如果是个IP，你采用这样的配置： dest_ip=10.0.0.1 scheme=http action=never-cache你会发现，这个配置并不会生效。咋办？你不妨换成： dest_host=10.0.0.1 scheme=http action=never-cache这个可以说是一个bug，也可以说是一个规则，大家先这么绕着走吧。  -----------------------分割线--------------如下进入我测试的正文经过详细测试，cache.config 和remap.config 的配置有关remap.configmap http://dev.xxx.com http://127.0.0.1:88/  cache.config 中如下配置才生效，domai ...继续阅读 (89)

贵贵的博客 ( http://blog.linuxphp.org/ ) :事件起因：trafficserver有两个header调试很方便，一个是age一个是via 尤其是age在我准备写在自定义日志里用来做定时更新。但如果关闭输出，日志里也会拿不到。但是如果开启后通过nginx代理到trafficserver，nginx返回的header里也会有这这些头信息，对上层cdn会产生影响。 方法1:查了相关文档有个add_header确没有del_header 第三方有个扩展实现了相关功能，看起来很强大 ，地址如下：https://github.com/openresty/headers-more-nginx-module 方法2:思考为了一个header要加一个重新编译加模块实在是大材小用，继续查找，发现有一篇文章正合我意http://blog.ailms.me/2013/06/18/nginx-delete-x-powered-by-header.html找到了官方文档：http://nginx.org/en/docs/http/ngx_http_fastcgi_module.html#fastcgi_hide_headerhttp://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_hide_he ...继续阅读 (22)

贵贵的博客 ( http://blog.linuxphp.org/ ) :1.修改ip_allow.config打开push功能支持2.修改records.config修改CONFIG proxy.config.http.push_method_enabled INT 13.traffic_ctl config reload重新加载配置4.代码示例<?php // 要缓存的URL $url = "http://test.cn/test2.html"; $parse = parse_url($url); // ats port $host = "test.cn"; $port = 8081; $fp = fsockopen($host, $port, $errno, $errstr, 30); if (!$fp) { echo "$errstr ($errno)<br />\n"; } else { // html正文 $html = " <HTML> ab </HTML> "; // 要缓存的地 ...继续阅读 (20)

贵贵的博客 ( http://blog.linuxphp.org/ ) :默认的日志在var/log/trafficserver/squid.blog 文件是二进制保存，必须通过traffic_logcat查看，也可通过traffic_logstats统计报表。但是：设计者思想总是那么另类，这个日志就完全不可变更的包括文件名和格式。要是想自定义日志需要新定义一个日志文件（多么有特色） 1.修改logs_xml.config文件来生成自己需要的日志打开这个文件发现好长的注释说明，对于新手真的是一头雾水。又是翻文档又是找人问，才明白这个配置文件需要配置两个项LogFormat和LogObject这里给出简单示例，这个文件的说明也是需要好好研读的，有很多高级用法<LogFormat> <Name="minimal"/> <Format = "%<cqts> %<ttms> %<chi> %<crc>/%<pssc> %<psql> %<cqhm> %<caun> %<phr>/%<pqsn> %<psct> %<{HOST}cqh> %<cqup> ...继续阅读 (41)

贵贵的博客 ( http://blog.linuxphp.org/ ) :这个一定要单列一个文章讲解，因为实在是太坑了。打开cache.config会看到常常的一段英文说明，开始时候没有仔细阅读，只是简单看了支持的参数，这为被坑做了很好的铺垫。阅读官网文档和其它中文文档时也没有人提及此配置格式要求，造成一直理解错误，配置错误。1.为了说明配置格式先上一张图第一个红框里面是说一下配置必须并且只能包含一个。第二个红框是我一开始的错误配置示范。正确配置应该是dest_ip=192.168.1.120 revalidate=30s所以教训就是这个配置文件的每个参数都要好好看看说明，是不是必须有，能不能重复 2.优先级：ttl-in-cache>revalidate>expires(nginx)revalidate 需要其他配置来保证对象能写入缓存中，如果不能写入缓存中，其配置无效。ttl-in-cache 能够单独完成强制对象写入缓存中并保证认为的新鲜期，不需要额外的帮助使对象写入缓存中。pin-in-cache 只是保证对象在缓存中不被删除，并不影响对象的新鲜度(不会影响http响应头部信息age)。在同级配置下，前面匹配的配置生效。https://blog.zymlinux.net/index.php/archives/698 3.上面配置错了或是没有配 ...继续阅读 (41)

贵贵的博客 ( http://blog.linuxphp.org/ ) :安装就系统常见三步，configure && make && make install 简单之极。安装后坑才刚刚开始，这个软件国内外介绍都极其少，虽然开源软件官方文档不错，阿里也有一些介绍，但真的就仅此而已了。先说下此软件最重要的几个配置records.config， remap.config， cache.config， logs_xml.config下面说下学习过程中遇到的种种。1.理解remap.config,配置了此项才能通过ats访问到网站regex_map http://(.*)/ http://example-in.com/第一个地址是用户访问的地址，第二个地址就源服务器的地址 2.先要能通过其访问网站内容，结果遭遇DNS问题错误：Description: Unable to locate the server requested --- the server does not have a DNS entry. Perhaps there is a misspelling in the server name, or the server no longer exists. Double-check the name and try again.原因： ...继续阅读 (57)

贵贵的博客 ( http://blog.linuxphp.org/ ) :多系统启动为了实现多系统启动,需要安装os-prober.安装后,再重建配置.如果执行失败,可能就需要手动添加启动条目了pacman -S os-prober --neededgrub-mkconfig -o /boot/grub/grub.cfg 调用之前的启动项GRUB能够记住你当前使用的启动项并且在下次启动时将其作为默认项.当你使用多个内核或操作系统时,这个特性很有用. 编辑/etc/default/grub中的GRUB_DEFAULT选项:GRUB_DEFAULT=saved上面的命令会告诉GRUB使用记住的启动项为默认启动项. 将下面的行添加到/etc/default/grub会让GRUB记住当前的启动项:GRUB_SAVEDEFAULT=trueNote: 手动添加启动项到/etc/grub.d/40_custom或/boot/grub/custom.cfg中,比如Windows启动项,需要添加savedefault请记住重建配置档.改变默认启动项可以通过修改/etc/default/grub中的GRUB_DEFAULT值来改变默认启动项GRUB_DEFAULT=0GRUB启动项序号从0开始计数.0代表第一个启动项.除了使用启动项序号,也可以使用启动项名:GRUB_DEFAUL ...继续阅读 (27)

贵贵的博客 ( http://blog.linuxphp.org/ ) :今天看邮件提示又到了空间续费时间了。续费完点网站发现现在有高级空间配置更好，价格一样。问下客服我这能不能升级 然后果断去填写服务单据 好快。登录服务器查看果然高大上了。瑞豪购买地址 看我在128M上如何配置  ...继续阅读 (53)

贵贵的博客 ( http://blog.linuxphp.org/ ) :前面通过PHP调用CURL实现了断点上传，但在用JAVA做文件上传时遇到了些问题 问题1:上传片段文件不成功JAVA有个HttpComponents包http://hc.apache.org/downloads.cgi 进行上传开始使用的是MultipartEntityBuilder方式，上传整个文件没有任何问题，但是在分片时会发现计算的片的长度和实际post的Content-Length比是偏小的，仔细对比发现是由于上面这种方式会在正文里使用boundary包装一些上传内容所属的字段和类型等信息，后来同事就用AbstractHttpEntity 这个底层类来封装要上传的内容，上传就可以了。 问题2: 使用httppost设置header中文乱码的问题还没有来的急高兴，发现了另一个小问题，发送的header里指定的filename如果为中文则会乱码，但是我通过curl发送的中文却不会，而且仔细对比过都是utf-8编码。通过curl设置代理到charles上抓包发现，抓包里面是乱的，但是php接收到的是正常的。所以应该是支持的，只是中间有做什么处理。继续尝试java调用方法，在检查MultipartEntityBuilder方式上传时设置的字符集和上传模式为兼容浏览器模式后能显示正 ...继续阅读 (42)

贵贵的博客 ( http://blog.linuxphp.org/ ) :最近升级系统后CURL出现段错误。只好做版本回退。1.在 /var/cache/pacman/pkg/ 目录查是否有历史版本，如果有就简单了。pacman -U就可以解决2.如果没有历史包，则安装软件https://aur4.archlinux.org/packages/downgrade 通过它下载到需要的包3.在 /etc/pacman.conf 中修改以下行。IgnorePkg = curl 防止下次更新时再次将此软件更新​ ...继续阅读 (62)

贵贵的博客 ( http://blog.linuxphp.org/ ) :配置好nginx-upload-module如何测试呢？好像这方面的资料很少。用实例说明把一个文件分3段上传test1.php<?php $url = 'http://dev.upload.com/upload.php'; $filename = "/tmp/upload.jpg"; // 唯一ID $sessionid = '1111215056';//uniqid(); $length = filesize($filename); // 分成3段上传 $chunkSize = intval($length/3); $fp = fopen($filename, 'r'); // 要上传的文件片段 $posts = fread($fp, $chunkSize); fclose($fp); $headers = array( "Content-Type: application/octet-stream", "Content-Disposition: attachment; name=\"file1\"; filename=\"" .basename($filename). "\" ...继续阅读 (50)

贵贵的博客 ( http://blog.linuxphp.org/ ) :一、http://www.grid.net.ru/nginx/upload.en.html 下载2.2.0 版本http://www.grid.net.ru/nginx/download/nginx_upload_module-2.2.0.tar.gz二、http://paste.davromaniak.eu/index.php?show=110 下载补丁三、参考 http://blog.csdn.net/igame/article/details/17477351 打补丁cp darvromaniak.txt [nginx_upload_module所在目录]patch ngx_http_upload_module.c davromaniak.txt四、nginx -V 查看编译参数，增加  --add-module=[nginx_upload_module所在目录]  重新编译五、参考http://blog.csdn.net/coolingcoding/article/details/12843509替换 "int result;" by "__attribute__((__unused__)) int result;"修复e ...继续阅读 (71)

贵贵的博客 ( http://blog.linuxphp.org/ ) :想调整下硬盘分区，结果主分区的编号从sda9变sda8了，重启后出现grub rescue模式，参考下面方案解决 1. 先使用ls命令，找到安装在哪个分区：grub rescue>ls 会罗列所有的磁盘分区信息，比方说：(hd0),(hd0,msdos3),(hd0,msdos2),(hd0,msdos1) 2. 然后依次调用如下命令： msdosX表示各个分区，注意 msdos 与 数字 之间没有空格！grub rescue>ls (hd0,msdosX)/boot/grub如果都找不到的话，需要查一下是否因为Linux版本差异，造成grub的路径不对，例如直接ls(hd0,X)/grub等等。 3. 假设找到（hd0,msdos3）时，显示了文件夹中的文件，则表示 Linux 安装在这个分区。 4. 调用如下命令：grub rescue>set root=(hd0,msdos3) grub rescue>set prefix=(hd0,msdos3)/boot/grub grub rescue>insmod normal 5. 然后调用如下命令，就可以显示出丢失的grub菜单了。grub rescue>normal 6. 不过不要高兴，如果这时重启，问题依旧存在，我们需要进入Linux中，对grub进行修 ...继续阅读 (51)

贵贵的博客 ( http://blog.linuxphp.org/ ) :开始使用kde最近升级后开了某些软件屏幕会花掉。所以切换到gnome，输入法调不出来，最后解决。方法1以登陆用户运行以下命令，关闭ibus键盘监听# gsettings set org.gnome.settings-daemon.plugins.keyboard active false重启电脑，测试方法2检查export LANG=zh_CN.utf8export GTK_IM_MODULE=fcitxexport QT_IM_MODULE=fcitxexport XMODIFIERS="@im=fcitx"是否配置并要优先exec gnome-session执行 ...继续阅读 (416)

贵贵的博客 ( http://blog.linuxphp.org/ ) :安装系统gentoo第一步进入livecd连网，第一步联网就连接不上搞半天，记录下步骤. 1.lspci -k 检查设备驱动是否已经加载 2.dmesg | grep firmware检查内核中的固件信息 3.iwconfig查看无线网卡名称，我的为wlp3s0,以下出现此名称的地方请替换为实际网卡名称 4.配置/etc/conf.d/netmodules_wlp3s0="wpa_supplicant" wpa_supplicant_wlp3s0="-Dwext" config_wlp3s0="dhcp" 其中wlp3s0是我的网卡设备 5.生成wpa_supplicant.confwpa_passphrase 无线SSID 无线密码 > /etc/wpa_supplicant/wpa_supplicant.conf 6.配置启动脚本cd /etc/init.d ln -s net.lo net.wlp3s0 7.启动网卡/etc/init.d/net.wlp3s0 start 8.ping测试 9.如果是已经装好的系统还需要加入自启动rc-update add net.wlp3s0 default 参考：https://wiki.archlinux.org/index.php/Wireless_netw ...继续阅读 (112)

贵贵的博客 ( http://blog.linuxphp.org/ ) :svn 在冲突时手动修改文件后有svn resolved来解决冲突git一直没有找到用什么命令，用ide有解决冲突的菜单，用命令行也想知道怎么操作今天看到这样的提示： 未合并的路径： （使用 "git add <文件>..." 标记解决方案） 以前竟然没有发现，原来git add还有这功效，使用之，确实如此。 ...继续阅读 (28)

贵贵的博客 ( http://blog.linuxphp.org/ ) :一个git简易使用版本，并兼容git原来功能：wget http://dwz.cn/easy_git下载后放到系统bin目录并且chmod +x easy_git 加执行权限 主要是几点：1.更新时冲突文件可以拉下来本地合并2.提交时必须填写分支号，并自动push3.创建新分支自动和服务器的dev同步，而不是本地的dev4.log人性化5.简易撤销版本 ...继续阅读 (25)

贵贵的博客 ( http://blog.linuxphp.org/ ) :对于MYSQL来讲，小的表alter table很容易，但是一旦数据量变得庞大，此操作就会变成恶梦，尤其是线上业务又不能停。有时没办法只能等重构时加双写，然后业务慢慢转移到新表，这样会耗时很长，而且开发成本也高。有没有什么办法可以实现不改代码的双写呢？我想到了触发器。当然要有root权限才好操作，不过相信都能找到相关的人的哈。基本流程是这样：1.创建临时表，并和旧表结构一样，然后在新表上增加字段2.创建触发器，使旧表的操作自动双写到新表上来3.处理旧数据，分段同步，避免锁表4.交换新旧表名5.删除触发器，在运行一段时间确认无误后删除原表如果每次都一行行命令不行，容易出错也累呀。写成工具吧：github上还有一个别人写的ruby版的，ruby不熟悉也不想用，感觉还是自己写的方便。代码如下：https://github.com/keminar/py/tree/master/mysql_online_alter_table使用方法很简单，一步步来。为了方便没有root权限或是跨机器没有办法root的情况，还可以把触发器导成SQL给有权限的人执行。也可以避免每个机器装一个python2.7刚无意搜索了一下，percona竟然也有一个原理类似的工具叫pt-online-schema-change 好吧。虽然我写的没有你 ...继续阅读 (24)