问题 在crond配置脚本执行后，经常会出现重复执行的情况。如下面的脚本： 如果，在crond中的配置项如下： 就出出现，之前执行的test.php还未结束，新的test.php又被执行。如下： 进程一直堆积的话，可能会把系统资源给耗尽，导致系统宕机。 解决方 …阅读全文 ...继续阅读 (29)

现象 需要定期去执行一个PHP脚本，首先想到的是通过crond命令来实现这个功能。但是，在crond的执行过程中发现一个诡异的事情。在crond中的配置如下。 脚本只会在第一次成功执行，之后就不会再执行。当删除/tmp/test.lock文件后，PHP脚本又能 …阅读全文 ...继续阅读 (45)

这个是我在《2016全球第二届PHP开发者大会》上的分享。分享的主题是《淘宝社区双十一性能优化实践》。主要讲解了如何做性能优化，如何做分库分表。以下是PPT重要内容的几个截图。如有疑问，欢迎沟通交流。 大纲 性能优化思路 如何做分库分表 memcache数据同 …阅读全文 ...继续阅读 (29)

前言 在Java语言开发过程中，out of memory错误是很常见的一种错误。对于JVM的内存结构有更深入的了解，更更好的帮我们排查此类问题，有效的避免此类问题发生。在JAVA 8中内存结构有进行了改变，Metaspace替代了PermGen。 内存结构简 …阅读全文 ...继续阅读 (25)

背景 周日把博客的版本升级到最新，顺便又从新部署了nginx和PHP的环境。使用了PHP7。从新部署环境后发现原先发布博客文章时，编辑框不能正常显示。如图： 分析 查看了html源代码，发现html源代码被截断了。因此，导致网页内容显示不全。 之后的整个分析过 …阅读全文 ...继续阅读 (128)

前言所谓非侵入式监控PHP应用性能，就是不修改现有系统代码，而对系统进行监控。这样的系统才能更容易的应用到PHP应用中。这里抛砖引玉，欢迎大家交流。方案一如果只是监控每次请求的访问时间。直接检测nginx的日志即可。在nginx的日志中有两个选项。$request_time 和 $upstream_response_time 。 这两个选项记录了响应时间。1、$request_time 指的就是从接受用户请求的第一个字节到发送完响应数据的时间，即包括接收请求数据时间、程序响应时间、输出响应数据时间。2、$upstream_response_time 是指从Nginx向后端（php-cgi)建立连接开始到接受完数据然后关闭连接为止的时间。如果只是监控后端PHP服务的性能，只要更多的关注 $upstream_response_time 这个选项即可。方案二如果还想进一步一个PHP请求处理过程中，具体那部分占用时间比较多，就需要借助xhprof了。xhprof可以生成调用关系图，一目了然的可以看出那部分占用时间比较多。如下图（来源于网络）：下面是完整的搭建步骤：下载安装xhprof1、下载编译安装的命令如下：$wget https://github.com/phacility/xhprof/archive/master.zip $unzip ./xhprof_master.zip $cd ...继续阅读 (60)

PHP7扩展编写的时候，提供的一些内核方法和之前的PHP之前的版本并不能完全兼容。有不少方法参数做了调整。下面是在迁移过程中遇到的一些问题。记录下来，避免大家再踩坑。PHP7扩展开发之hello word白话PHP7扩展开发之创建对象add_assoc_stringl方法参数改为四个。add_assoc_stringl(parray, key, value, value_len);迁移的时候，只要把最后一个参数删除即可。add_assoc_string方法参数从四个改为了三个。add_assoc_stringl(parray, key, value);迁移的时候，只要把最后一个参数删除即可。add_next_index_stringl方法参数从四个改为了三个。add_next_index_stringl(parray, value, value_len);迁移的时候，只要把最后一个参数删除即可。add_next_index_string方法参数从三个改为了两个。add_next_index_string(parray, value);迁移的时候，只要把最后一个参数删除即可。RETURN_STRINGL方法参数从三个改为了二个。RETURN_STRINGL(value, length);迁移的时候，只要把最后一个参数删除即可。错误：‘INT64_MAX’ 在此作用域中尚未声明原因为深 ...继续阅读 (36)

本文是以PHP7作为基础，讲解如何从零开始创建一个PHP扩展。本文主要讲解创建一个扩展的基本步骤都有哪些。示例中，我们将实现如下功能：<?php echo say(); ?>输出内容：$ php ./test.php $ hello word在扩展中实现一个say方法，调用say方法后，输出 hello word。第一步：生成代码PHP为我们提供了生成基本代码的工具 ext_skel。这个工具在PHP源代码的./ext目录下。$ cd php_src/ext/ $ ./ext_skel --extname=sayextname参数的值就是扩展名称。执行ext_skel命令后，这样在当前目录下会生成一个与扩展名一样的目录。第二步，修改config.m4配置文件config.m4的作用就是配合phpize工具生成configure文件。configure文件是用于环境检测的。检测扩展编译运行所需的环境是否满足。现在我们开始修改config.m4文件。$ cd ./say $ vim ./config.m4打开，config.m4文件后，你会发现这样一段文字。dnl If your extension references something external, use with: dnl PHP_ARG_WITH(say, for say support, dn ...继续阅读 (12)

在很早很早之前，在21cto社区线下分享大会上，曾经分享了一个主题《php性能监控与优化》。当时没放出ppt，今天发现有人在微博找ppt。放出下载地址。点此下载。 ...继续阅读 (25)

本篇文章主要将如何在扩展中创建一个对象。创建的对象的过程，其实和一个小孩出生，成长的过程有些类似。第一步，办准生证生孩子第一步，先办准生证。声明我要生孩子了。对象创建的时候，如何办准生证呢？只要定义一个zend_class_entry变量即可。代码如下：zend_class_entry ce;zend_class_entry 是啥？可以认为它使一个原型，定义了一些对象应该有哪些东西组成。具体代码可以查看./Zend/zend.h文件。第二步，取名字孩子怎么得有个名字，对象也一样。如何给对象取名字呢？代码如下：INIT_CLASS_ENTRY(ce, "children", children_methods);其中，children就是我们给对象取的名字。那children_methods是啥？它是这个小孩应该具备的能力（对象所拥有的方法）。第三步，上户口孩子出生了，名字有了，下面就得上户口了。上户口的过程就是登记入册的过程。代码如下：zend_class_entry *children_ce; children_ce = zend_register_internal_class(&ce);zend_register_internal_class方法会返回一个zend_class_entry指针。以后我们对这个对象的操作，可以使用这个指针。培养（定义属性和 ...继续阅读 (27)

前言下面我们大概了解下PHP7的变量类型都有哪些，是如何存储变量的。zval结构定义PHP7中是使用zval结构存储变量信息的。zval结构的定义在./Zend/zend_types.h文件中定义。struct _zval_struct { zend_value value; /* value */ union { struct { ZEND_ENDIAN_LOHI_4( zend_uchar type, /* active type */ zend_uchar type_flags, zend_uchar const_flags, zend_uchar reserved) /* call info for EX(This) */ } v; uint32_t type_info; } u1; union { uint32_t var_flags; uint32_t next; /* hash collision chain */ uint32_t cache_slot; /* literal cache slot */ uint32_t lineno; ...继续阅读 (67)

前言之前使用Gearman的时候，遇到过一个卡顿的问题。今天微博上又有人问我是否遇到过此类问题。这个问题，当时是伯诚老师解决的。我把他的文章搬过来。希望能给遇到此类问题的人一点参考。问题使用Gearman作为异步消息处理中间件是却没有想象中的顺利。我们多次发现Gearmand进程会将PHP的请求Hold住，不做任何响应，即便PHP在GearmanClient发起连接时设置了连接超时时间，也不会超时。这对于php的工作方式来说，是很危险的。对于这个问题，我们问了Google许多次，自己也在服务器上跟踪了许久，终于将问题定位为在Gearman的worker进程在通过 addFunction 方法注册任务时，如果使用了timeout参数，那么就会复现这个问题，但这个问题的复现是随机发生的。首先，Gearmand进程正常工作时，通过pstack查看其工作线程状态如下：Thread 7 (Thread 0x40bc2940 (LWP 8627)): #0 0x00007fec366d1e46 in poll () from /lib64/libc.so.6 #1 0x00007fec386be7a7 in current_epoch_handler () from /proc/8626/exe #2 0x00007fec37dc54a7 in start_thread () from ...继续阅读 (29)

前言前段时间csdn找我约稿。一直忙于项目，也没来及写。十一的时候，学习了下ReactPHP。把了解的一些东西整理成文。难免有疏漏，如发现请指正。原文已经发布到csdn。网址 http://www.csdn.net/article/2015-10-12/2825887从名字说起虽然ReactPHP项目已经发展了有4年之久，但是对于其称呼显得有点混乱。在开源中国为其建立的项目主页上，其被命名为React，或者node.PHP。国外的一些的博客谈及这个项目时，多数使用的是ReactPHP。到底哪种说法比较标准呢？我们不妨来看看官方的态度。此项目的官方主页是http://www.reactphp.org。打开官网，你会发现网站的title是React，其logo上的文字为reactphp。可以看出，官方更倾向于被命名为React或者ReactPHP。我建议使用ReactPHP作为其名称。原因大概有两个。1、React单词的意思太泛，并且已经有一些项目的名称与React相关，容易引起误解。2、目前国内使用ReactPHP的人比较少，相关资料文档也比较少。在国外它一般被称为ReactPHP，使用ReactPHP在国外检索资料更容易。ReactPHP与Node.js有着相同的特点许多人认为ReactPHP是Node.js的php版本，这是有一定道理的。他们的确有很多相似的特点。事件驱动，异步执 ...继续阅读 (22)

简介UDP是User Datagram Protocol的简称。中文名为，用户数据包协议。和tcp协议一样，工作在OSI网络模型的第四层（传输层）。但是，和tcp不一样，它提供的是不可靠的网络传输。它不负责对数据包分组，组装和对数据包排序。也就是说，当数据包发出后，是无法知道数据包是否安全完整到达。特点1、无连接：即在发送数据之前是不需要建立连接的。也就是说，即便服务端没有监听端口，客户端一样可以使用udp协议向指定端口发数据。不管你在不在，也不给你事先打招呼，反正我就是发数据。是不是很霸道。2、不可靠：只是尽最大努力把数据包送达。但是是否真的送达了，你永远不知道。3、包头小：udp的首部开销只有8字节。tcp的包头要20字节。4、不排序：由于udp协议的包头只有8字节，没有包含排序信息（如TCP所采用的序号）。而且报文不一定按顺序到达的，所以接收端无从排起。5、面向报文：发送方的UDP对应用程序交下来的报文，在添加首部后就向下交付给IP层。既不拆分，也不合并，而是保留这些报文的边界，因此，应用程序需要选择合适的报文大小。6、无流量控制：它不管目前的网络状况，不管是不是已经非常拥堵了，就是一个劲的发包。7、多种交互通信支持：支持一对一，一对多，多对多，多对一的交互通信。应用场景UDP适用于不需要TCP可靠机制的情形，比如，当高层协议或应用程序提供错误和流控制功能的时候。 UDP是传 ...继续阅读 (46)

问题掉进坑里面了。最近完成了阿里PHP5.5.25的rpm打包。今天在升级其中一个扩展的时候发现，只要升级成功之后，扩展在配置文件中相关配置项就会被注释掉。最终定位到是spec文件中%postun段写的有问题。spec文件中%postun段的代码示例如下：%postunconf_path="/php-fpm/lib/php.ini"sed -i 's/^\[tclip\]/;\[tclip\]/g' $conf_pathsed -i 's/^extension=tclip.so/;extension=tclip.so/g' $conf_path代码的作用就是，当删除PHP扩展rpm包的时候，会自动修改配置文件，注释掉扩展配置项。原因为啥在执行yum update 命令时，会导致扩展的配置项被自动注释掉呢？原因就在于spec执行顺序。假如你升级前的php-tclip包的版本是1.0。升级后的php-tclip包的版本是2.0。当你执行yum update php-tclip -y命令升级时，%post和%postun段的执行顺序如下：首先，执行新的2.0包spec文件中的%post段代码。然后，执行旧的1.0包spec文件中的%postun段代码。当升级时，完整的执行流程如下：1、执行新包spec文件中 %pre 段.2、安装新包的相关依赖包.3、执行新包spec文件中的 %post ...继续阅读 (36)

前言前几天，在一淘网，腾讯网媒和微博商业技术联合组织的技术分享大会上，我分享了《在线PHP问题排查思路与实践》。此博文除了对PPT提供下载外，还会对ppt做简单的注释说明。主题分为三部分，常见问题，解决思路和案例分析。常见问题不同用户看到的错误可能不一样。一般用户看到的错误都是表层的现象。如，裸奔的错误页面：这种裸奔的错误页面，经常被用户成为乱码，太丑太暴漏。甚至把一些不应该暴漏的敏感信息都暴漏了。如，nginx版本号，文件路径等。为了解决这些问题，设计师们又做了有情调的错误页。但是，错误五花八门，并不是一个错误页能掩盖的。对于工程师，咱们看问题可能会更深入些。能看到问题背后的问题。如，看到502错误，他们会想到可能是后端PHP-FPM进程出现问题。如后端的PHP-FPM进程已经死掉，nginx无法连接到PHP-FPM进程。处理思路虽然问题五发八门，但是有一套解决思路可以整体处理这些问题。解决思路大概分为如下几个部分：恢复服务，保留现场，排查问题和验证。下面对这几部分分别加以说明。恢复服务恢复服务，顾名思义。就是赶紧让用户感受不到错误的存在。为什么这样做呢？原因有如下两个。第一，如果不这样做，用户看到的是错误页面，用户体验不好。可能还会对公司带来直接的经济损失。 第二，如果不这样做，年底你的奖金就飞了。那如何恢复服务呢？下面说下不同场景下的几种操作方式。摘机：所谓摘机就是摘除有问题 ...继续阅读 (49)

在你的登录账户下的.ssh文件夹新建一个文件：config.cd ~/.sshvi configconfig的文件中，内容为：host *ControlMaster autoControlPath ~/.ssh/master-%r@%h:%p重新打开终端，第一次，你还是需要输入密码，第二次ssh登录同一台机器，你就不用输入密码了，跟secureCRT一样的clone session的方式一样。这个文件的属性我这边设置为600的，一般不设置该属性也没有问题的。如果你细心的话，你在~/.ssh/目录下发现master-*的sock文件。它记录了你目前登录到的机器，这样的话，你登录同样的机器就会重用同一个链接了。 ...继续阅读 (45)

问题设置ssh免密码登陆的时候，发现有一些机器设置不生效。有一些机器正常。跟踪登陆目标机器，查看sshd的日志信息。日志信息目录为，/var/log/secure你会发现如下字样的日志信息。Jul 22 14:20:33 v138020.go sshd[4917]: Authentication refused: bad ownership or modes for directory /home/xinhailong原因sshd为了安全，对属主的目录和文件权限有所要求。如果权限不对，则ssh的免密码登陆不生效。用户目录权限为 755 或者 700，就是不能是77x。.ssh目录权限一般为755或者700。rsa_id.pub 及authorized_keys权限一般为644rsa_id权限必须为600解决方法检测目录权限，把不符合要求的按要求设置权限即可。 ...继续阅读 (26)

前言mysql的索引合并并不是什么新特性。早在mysql5.0版本就已经实现。之所以还写这篇博文，是因为好多人还一直保留着一条sql语句只能使用一个索引的错误观念。本文会通过一些示例来说明如何使用索引合并。什么是索引合并下面我们看下mysql文档中对索引合并的说明：The Index Merge method is used to retrieve rows with several range scans and to merge their results into one. The merge can produce unions, intersections, or unions-of-intersections of its underlying scans. This access method merges index scans from a single table; it does not merge scans across multiple tables.根据官方文档中的说明，我们可以了解到：1、索引合并是把几个索引的范围扫描合并成一个索引。2、索引合并的时候，会对索引进行并集，交集或者先交集再并集操作，以便合并成一个索引。3、这些需要合并的索引只能是一个表的。不能对多表进行索引合并。怎么确定使用了索引合并在使用explain对sql语句进行操作时，如果使用 ...继续阅读 (41)

现象一台机器如果内存用完，在进行bgsave时，可能会报错。错误信息大概如下：[1946] 23 Mar 15:21:02.308 # WARNING overcommit_memory is set to 0! Background save may fail under low memory condition. To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.原因当执行redis的bgsave命令时，redis会fork一个进程把redis中的内存数据写入磁盘。这样的好处是，copy on write，有效的节省了内存占用。但是，bgsave时，如果有数据变更，一样需要申请内存。当申请内存时，如果发现内存不够，可能就会报上面的错误。内核参数overcommit_memory参数vm.overcommit_memory控制着linux的内存分配策略。这个参数有三个值： 0 1 20 表示启发式处理。会尽量减少swap的使用,root可以分配比一般用户略多的内存。默认值。1 表示一直允许overcommit。一般 ...继续阅读 (45)

前言通常一个网站数据库挂掉后，后果将是非常严重的。基本上整个网站基本不可用了。对于一些网站来说，当数据库挂掉后，如果能提供基本的浏览服务，也是不错的。本文将尝试使用varnish + nginx + lua 搭建网站降级系统来实现整个目标。降级目标降级方案的目标是，当网站出现致命故障时（如出现500错误，不能提供服务），可以把缓存的页面数据展现给用户。从而提供基本的浏览服务。1、只提供基本的浏览服务2、浏览的数据都是非登录状态下的数据3、支持手动和自动降级。自动降级是当后端返回500错误次数在一段时间内达到一定阈值(不包含503)。手动降级是从控制界面操作。降级方案存储使用varnish作为存储。有效的节约了物理内存，并保持了较好的性能。更新使用crond脚本从nginx的access日志中分析出请求url，然后向varnish发请求，从而更新varnish的缓存。缓存的异步更新，减少对nginx的压力。降级支持手动降级和自动降级。降级后，nginx自动从varnish中提取数据，并返回给用户。流程图流程描述1、用户请求到nginx时，nginx会判断当前是否是降级状态。如果属于降级状态，直接从varnish中获取数据。非降级状态，把请求转到php-fpm。2、当crond脚本请求varnish进行缓存数据更新时，如果当前varnish处于降级状态，则不进行缓存更新。如果没有处在降 ...继续阅读 (46)

前言最近学习了赵海平的演讲，了解到facebook的mysql查询可以进行异步化，从而提高性能。由于facebook实现的比较早，他们不得不对php进行hack才得以实现。现在的php5.5，已经无需hack就可以实现了。对于一个web网站的性能来说，瓶颈多半是来自于数据库。一般数据库查询会在某个请求的整体耗时中占很大比例。如果能提高数据库查询的效率，网站的整体响应时间会有很大的下降。如果能实现mysql查询的异步化，就可以实现多条sql语句同时执行。这样就可以大大缩短mysql查询的耗时。异步为啥比同步快？与异步查询相反的时同步查询。通常情况下mysql的query查询都是同步方式。下面我们对两种方式做下对比。对比的例子是，请求两次select sleep(1)。这条语句在mysql服务器端大概耗时1000ms。同步方式的执行流程：第一步，向mysql服务器端发送第一次查询请求。大概耗时 1ms第二步，mysql服务器端返回第一次查询的结果。大概耗时 1000ms第三步，向mysql服务器再次发送请求。大概耗时 1ms第四步，mysql服务器端返回第二次查询的结果。大概耗时 1000ms同步的方式执行两次select sleep(1)，大概耗时 2002ms。异步方式的执行流程：第一步，向mysql服务器端发送第一次查询请求。大概耗时1ms第二步，在等待第一次请求返回数据的同时， ...继续阅读 (46)

问题通常一个web应用的性能瓶颈在数据库。因为，通常情况下php中mysql查询是串行的。也就是说，如果指定两条sql语句时，第二条sql语句会等到第一条sql语句执行完毕再去执行。这个时候，如果执行2条sql语句，每条执行时间为50ms，全部执行完毕可能需要100ms。既然，主要原因是sql的串行执行导致。那我们是不是可以改变执行方式来提高性能呢？答案是，可以的。我们可以通过异步执行的方式来提高性能。异步如果通过异步的方式去执行，可能性能会有很大提升。如果是采用异步的方式，两条sql语句会并发执行，可能就需要60ms就可以执行完毕。实现mysqli + mysqlnd。php官方实现的mysqlnd中提供了异步查询的方法。分别是：mysqlnd_async_query 发送查询请求mysqlnd_reap_async_query 获取查询结果这样就可以不必每次发送完查询请求后，一直阻塞等待查询结果了。实现代码如下：php $host = '127.0.0.1'; $user = 'root'; $password = ''; $database = 'test'; /** * 期望得到额结果 * array( * 1 =int, * 2 => int, * 3 => int * ) */ $result = array ...继续阅读 (20)

简介kvproxy中集群分为三种。默认集群，读集群和备份集群。读集群和备份集群都是可选项。如果没有设置读集群，将会从默认集群读取数据。如果没有设置备份集群，将不会做数据同步操作。更多kvproxy的信息请查看集群设置以下是集群设置中需要注意的几个因素。1、集群名可以自己制定2、每个集群中的数字id不能重复。数字id是数据库实例的唯一标示。如果实例A有问题，需要更换。只需要更换ip和端口即可。这样，原先示例A中的所有key都会落到新的示例中。3、权重数字并不是百分比。没必要所有主机的权重相加等于100。权重数字是实例在一致性哈希中的节点数。一般情况下，数字越大，落到实例上的数据就越多。memcached集群设置示例[memcached]; 设置默认后端集群。hosts=master; 设置备份集群。所有的写操作命令都会同步到此集群一份。如果未设置，将不进行数据的同步或者异步复制。hosts_backup=slave; 设置读集群。所有的数据读取都从此集群读取。用于实现读写分离。hosts_read=read;;;;;;;;;;;;;;;;; 集群设置 ;;;;;;;;;;;;;;;;;; 集群名[master]; ip : 端口号 = “在集群中的标示数字id : 权重”; 同一组中每个后端服务器的标示数字id不能重复127.0.0.1:11211=”1:50″127.0.0.1:1 ...继续阅读 (24)

简介kvproxy的一个很重要的特性是能实现主从集群间的数据同步。有点类似于mysql和redis的主从数据同步。之所以实现这个功能，是因为在使用memcached的时候，有些时候需要两个集群间保持数据一致。而memcached又没有提供类似的功能。如果想了解更多的kvproxy的一些特性，请查看博文。应用场景一般需要搭建主从两个数据库集群的时候，可能会需要数据的同步。什么时候需要搭建两个集群呢？大概有这么几种情况。场景一：解决单点问题。如，用户登录的session使用一台memcached存储。如果这台memcached机器故障，可能会导致全部用户登录状态丢失。这种情况下，可以再启动一个memcached，用于备份。场景二：解决网络延迟问题。如，你的应用部署在两个机房。而两个机房的网络延迟比较大。如果只在一个机房部署memcached集群，可能会导致响应时间明显加大，很大的影响了用户体验。这时，就需要在两个机房各部署一个memcached集群。处理请求时，只使用本机房的memcached。主从数据复制策略kvproxy支持两种类型的数据复制策略。即，同步复制和异步复制。同步复制同步复制就是，当有数据写操作（set delete add 等）时，先写主集群，然后写从集群，两个集群都写完后，最后给客户端响应。优点：能保证数据的及时同步到从集群。缺点：客户端等待时间过长。异步复制异步复 ...继续阅读 (37)

location表达式类型~ 表示执行一个正则匹配，区分大小写~* 表示执行一个正则匹配，不区分大小写^~ 表示普通字符匹配。使用前缀匹配。如果匹配成功，则不再匹配其他location。= 进行普通字符精确匹配。也就是完全匹配。@ “@” 定义一个命名的 location，使用在内部定向时，例如 error_page, try_fileslocation优先级说明在nginx的location和配置中location的顺序没有太大关系。正location表达式的类型有关。相同类型的表达式，字符串长的会优先匹配。以下是按优先级排列说明：第一优先级：等号类型（=）的优先级最高。一旦匹配成功，则不再查找其他匹配项。第二优先级：^~类型表达式。一旦匹配成功，则不再查找其他匹配项。第三优先级：正则表达式类型（~ ~*）的优先级次之。如果有多个location的正则能匹配的话，则使用正则表达式最长的那个。第四优先级：常规字符串匹配类型。按前缀匹配。location优先级示例配置项如下:location = / {# 仅仅匹配请求 /[ configuration A ]}location / {# 匹配所有以 / 开头的请求。但是如果有更长的同类型的表达式，则选择更长的表达式。如果有正则表达式可以匹配，则# 优先匹配正则表达式。 ...继续阅读 (28)

现象mysqlnd的超时时间设置为2s后，出现了一个诡异的现象。在php的error log中出现了一些错误信息。如下：[20-Dec-2014 21:20:17] WARNING: [pool www] child 31401 said into stderr: “NOTICE: PHP message: PHP Warning: PDO::__construct(): MySQL server has gone away in ./abstract.class.php on line 26″第26行代码如下：php $this-resource = new PDO( $this->type.':'.implode(';', $dsn).';charset=gbk', $this->dbconf['username'], $this->dbconf['password'], $this->dbconf['driver_options'] ); $this->resource->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXC ...继续阅读 (58)

现象上线后习惯性的观察数据库的变化。发现数据库的tps有很大的飙升。不过幸好在双十一的时候在数据库方面做了一些完善，虽然主库的tps有飙升，但是总体load还不是很高。但是问题既然出现了，还是要解决的。排查过程确定是insert update 还是 delete操作导致tps高？既然是tps高，那就说明数据库修改的操作多了。到底是insert update操作多了， 还是 delete 操作多了？在天机平台可以很明显的可以看出来。如下图：从上图，我们可以很清楚的看出来是update操作多了导致的。到底是那些update语句导致tps高？当时程序中并没有记录所有执行的sql语句。因此，没有一个现成的数据文件供分析。Sql语句是通过网络以文本方式传输到mysql服务器端的。因此我们完全可以通过tcpdump这个工具把所有的sql语句捕获到。首先，为了便于比对，我先把一台服务器上的代码回滚到上线前的版本。其次，我在两台服务器上同时执行tcpdump命令，以捕获所有执行的sql脚本。这两台服务器分别运行着上线前的旧版本程序和上线后的新版本程序。抓包命令如下：$sudo tcpdump -i eth0 -A -s 3000 port 3306 > ~/sql.log注意，我们在使用tcpdump的时候加了-A参数，这样就可以把sql语句都显示出来了。更多tcpdump使用，可以查看文章调试利 ...继续阅读 (47)

前言wireshark是一个网络数据包捕捉和分析工具。本篇文章只介绍过滤器的一些应用实例。关于wireshark的介绍和常见使用方法可以查看博文，《调试利器之wireshark》抓取过滤根据tcp的表示字段抓取数据tcp的表示字段在tcp头的第14字节存储。表示字段有如下几种：1：URG：（置一有效）紧急指针，表明发送端向另一端使用紧急方式发送数据。2：ACK：（置一有效）表示确认序号。3：PSH：（置一有效）表示接收方应该尽快将这个报文交给应用层。4：RST：（置一有效）表示重建连接。5：SYN：（置一有效）用来发起一个连接。6：FIN：（置一有效）表示发送方的表示完成任务，接收方的表示同意断开连接。tcp[13] = 2捕获SYN包。二进制数为 00000010，相对应的十进制数为2.tcp[13] = 18捕获针对SYN的ACK包。二进制数为 00010010，相对应的十进制数为18.tcp[13] & 2 = 2捕获SYN包和SYN的ACK包。这里使用了掩码的方式，只要包含掩码的包都会显示出来。tcp[13] = 24只抓取PSH-ACK数据的包。tcp[13] & 1 = 1只抓取FIN-ACK数据包。tcp[13] & 4 = 4只捕获RST数据包。显示过滤tcp contains k_t_1找出tcp数据包中包含指定字符串(k_t_1)的数据包。contains关键字 ...继续阅读 (53)