ASM 是一个 Java 字节码操控框架。它能被用来动态生成类或者增强既有类的功能。ASM 可以直接产生二进制 class 文件，也可以在类被加载入 Java 虚拟机之前动态改变类行为。Java class 被存储在严格格式定义的 .class 文件里，这些类文件拥有足够的元数据来解析类中的所有元素：类名称、方法、属性以及 Java 字节码（指令）。ASM 从类文件中读入信息后，能... ...继续阅读 (26)

JavaAgent 是JDK 1.5 以后引入的，也可以叫做Java代理。JavaAgent 是运行在 main方法之前的拦截器，它内定的方法名叫 premain ，也就是说先执行 premain 方法然后再执行 main 方法。那么如何实现一个 JavaAgent 呢？很简单，只需要增加 premain 方法即可，后续可以在此基础上实现注入拦截，AOP等。package com.xifj.age... ...继续阅读 (23)

理解Java虚拟机结构是Java从业人员必备技能，下面描述Java虚拟机结构、垃圾收集器与内存分配策略，在排查java性能问题以及性能优化时大有帮助，掌握Java虚拟机20%的知识能解决工作中80%的Java性能诊断及优化（与JVM相关）问题。更深入的知识请自行研究源码。一、Java虚拟机结构1、程序计数器：是最小的一块内存区域，它的作用是当前线程所执行的字节码的行号指示器，在虚拟机的模型里，字节... ...继续阅读 (20)

AdNetwork、AdExchange、DSP、SSP、RTB、DMP这些模式之间存在着内在的关系，所以在理解的时候，我们需要联系起来进行理解，不能分开。　　　　1、RTB（RealTimeBidding，实时竞价）：　　定义：是一种利用第三方技术在数以百万计的网站上针对每一个用户展示行为进行评估以及出价的竞价技术。　　个人理解：如果把互联网比作蜘蛛网，那么当任何一只小生物触碰到这张网上的某个节 ...继续阅读 (28)

一、介绍早期的SSLv2根据经典的公钥基础设施PKI(Public Key Infrastructure)设计，它默认认为：一台服务器（或者说一个IP）只会提供一个服务，所以在SSL握手时，服务器端可以确信客户端申请的是哪张证书。但是让人万万没有想到的是，虚拟主机大力发展起来了，这就造成了一个IP会对应多个域名的情况。解决办法有一些，例如申请泛域名证书，对所有*.yourdomain.com的域名都可以认证，但如果你还有一个yourdomain.net的域名，那就不行了。在HTTP协议中，请求的域名作为主机头（Host）放在HTTP Header中，所以服务器端知道应该把请求引向哪个域名，但是早期的SSL做不到这一点，因为在SSL握手的过程中，根本不会有Host的信息，所以服务器端通常返回的是配置中的第一个可用证书。因而一些较老的环境，可能会产生多域名分别配好了证书，但返回的始终是同一个。既然问题的原因是在SSL握手时缺少主机头信息，那么补上就是了。SNI（Server Name Indication）定义在RFC 4366，是一项用于改善SSL/TLS的技术，在SSLv3/TLSv1中被启用。它允许客户端在发起SSL握手请求时（具体说来，是客户端发出SSL请求中的ClientHello阶段），就提交请求的Host信息，使得服务器能够切换到正确的域并返回相应的证书。要使用SNI，需 ...继续阅读 (35)

一、介绍 早期的SSLv2根据经典的公钥基础设施PKI(Public Key Infrastructure)设计，它默认认为：一台服务器（或者说一个IP）只会提供一个服务，所以在SSL握手时，服务器端可以确信客户端申请的是哪张证书。但是让人万万没有想到的是，虚拟主机大力发展起来了，这就造成了一个IP会对应多个域名的情况。解决办法有一些，例如申请泛域名证书，对所有*.yourdomain.com的域 ...继续阅读 (14)

1.1 之前已经大概说了一个证书由什么构成，但是没有仔细进行介绍，这里对证书的内容做一个详细的介绍。先看下一个证书到底是个什么东西，在windows下查看一个证书时，界面是这样的，我们主要关注一下Details Tab页，其中的内容比较长，我滚动内容后后抓了三个图，把完整的信息显示出来：里面的内容比较多——Version、Serial number、Signature algorithm 等等，挑 ...继续阅读 (23)

1.1 之前已经大概说了一个证书由什么构成，但是没有仔细进行介绍，这里对证书的内容做一个详细的介绍。先看下一个证书到底是个什么东西，在windows下查看一个证书时，界面是这样的，我们主要关注一下Details Tab页，完整的信息如下：里面的内容比较多——Version、Serial number、Signature algorithm 等等，挑几个重要的解释一下。◆Issuer (证书的发布机构)指出是什么机构发布的这个证书，也就是指明这个证书是哪个公司创建的(只是创建证书，不是指证书的使用者)。对于上面的这个证书来说，就是指"SecureTrust CA"这个机构。◆Valid from , Valid to (证书的有效期)也就是证书的有效时间，或者说证书的使用期限。 过了有效期限，证书就会作废，不能使用了。◆Public key (公钥)这个我们在前面介绍公钥密码体制时介绍过，公钥是用来对消息进行加密的，第2章的例子中经常用到的。这个数字证书的公钥是2048位的，它的值可以在图的中间的那个对话框中看得到，是很长的一串数字。◆Subject (主题)这个证书是发布给谁的，或者说证书的所有者，一般是某个人或者某个公司名称、机构的名称、公司网站的网址等。 对于这里的证书来说，证书的所有者是Trustwave这个公司。◆Signature algor ...继续阅读 (36)

专题二：实际抓包分析本文对百度搜索进行了两次抓包，第一次抓包之前清理了浏览器的所有缓存；第二次抓包是在第一次抓包后的半分钟内。百度在2015年已经完成了百度搜索的全站https，这在国内https发展中具有重大的意义（目前BAT三大家中，只有百度宣称自己完成了全站HTTPS）。所以这篇文章就以www.baidu.com为例进行分析。同时，作者采用的是chrome浏览器，chrome支持SNI （server Name Indication） 特性，对于HTTPS性能优化有很大的用处。注：SNI是为了解决一个服务器使用多个域名和证书的SSL/TLS扩展。一句话简述它的工作原理就是：在和服务器建立SSL连接之前，先发送要访问的域名（hostname），这样服务器根据这个域名返回一个合适的证书。目前，大多数操作系统和浏览器都已经很好地支持SNI扩展，OpenSSL 0.9.8已经内置这一功能，新版的nginx和apache也支持SNI扩展特性。本文抓包访问的URL为：http://www.baidu.com/  （如果是https://www.baidu.com/，则以下结果不一样！）抓包结果：可以看到，百度采用以下策略：（1）对于高版本浏览器，如果支持 https，且加解密算法在TLS1.0 以上 ...继续阅读 (40)

专题二：实际抓包分析本文对百度搜索进行了两次抓包，第一次抓包之前清理了浏览器的所有缓存；第二次抓包是在第一次抓包后的半分钟内。百度在2015年已经完成了百度搜索的全站https，这在国内https发展中具有重大的意义（目前BAT三大家中，只有百度宣称自己完成了全站HTTPS）。所以这篇文章就以www.baidu.com为例进行分析。同时，作者采用的是chrome浏览器，chrome支持SNI （s ...继续阅读 (18)

本文将分两个专题去理解HTTPS。专题一：HTTPS为什么安全1、http为什么不安全？http协议属于明文传输协议，交互过程以及数据传输都没有进行加密，通信双方也没有进行任何认证，通信过程非常容易遭遇劫持、监听、篡改，严重情况下，会造成恶意的流量劫持等问题，甚至造成个人隐私泄露（比如银行卡卡号和密码泄露）等严重的安全问题。可以把http通信比喻成寄送信件一样，A给B寄信，信件在寄送过程中，会经过很多的邮递员之手，他们可以拆开信读取里面的内容（因为http是明文传输的）。A的信件里面的任何内容（包括各类账号和密码）都会被轻易窃取。除此之外，邮递员们还可以伪造或者修改信件的内容，导致B接收到的信件内容是假的。比如常见的，在http通信过程中，“中间人”将广告链接嵌入到服务器发给用户的http报文里，导致用户界面出现很多不良链接； 或者是修改用户的请求头URL，导致用户的请求被劫持到另外一个网站，用户的请求永远到不了真正的服务器。这些都会导致用户得不到正确的服务，甚至是损失惨重。2、https如何保证安全？要解决http带来的问题，就要引入加密以及身份验证机制。如果Server（以后简称服务器）给Client（以后简称 客户端）的消息是密文的，只有服务器和客户端才能读懂，就可以保证数据的保密性。同时，在交换数据之前，验证一下对方的合法身份，就可以保证通信双方的安全。 ...继续阅读 (23)

1、http为什么不安全？ http协议属于明文传输协议，交互过程以及数据传输都没有进行加密，通信双方也没有进行任何认证，通信过程非常容易遭遇劫持、监听、篡改，严重情况下，会造成恶意的流量劫持等问题，甚至造成个人隐私泄露（比如银行卡卡号和密码泄露）等严重的安全问题。 ...继续阅读 (16)

1、http为什么不安全？http协议属于明文传输协议，交互过程以及数据传输都没有进行加密，通信双方也没有进行任何认证，通信过程非常容易遭遇劫持、监听、篡改，严重情况下，会造成恶意的流量劫持等问题，甚至造成个人隐私泄露（比如银行卡卡号和密码泄露）等严重的安全问题。可以把http通信比喻成寄送信件一样，A给B寄信，信件在寄送过程中，会经过很多的邮递员之手，他们可以拆开信读取里面的内容（因为http是明文传输的）。A的信件里面的任何内容（包括各类账号和密码）都会被轻易窃取。除此之外，邮递员们还可以伪造或者修改信件的内容，导致B接收到的信件内容是假的。比如常见的，在http通信过程中，“中间人”将广告链接嵌入到服务器发给用户的http报文里，导致用户界面出现很多不良链接； 或者是修改用户的请求头URL，导致用户的请求被劫持到另外一个网站，用户的请求永远到不了真正的服务器。这些都会导致用户得不到正确的服务，甚至是损失惨重。2、https如何保证安全？要解决http带来的问题，就要引入加密以及身份验证机制。如果Server（以后简称服务器）给Client（以后简称 客户端）的消息是密文的，只有服务器和客户端才能读懂，就可以保证数据的保密性。同时，在交换数据之前，验证一下对方的合法身份，就可以保证通信双方的安全。那么，问题来了，服务器把数据加密后，客户端如何读懂这些数据呢？ ...继续阅读 (23)

DNS，是Domain Name System的缩写，翻译过来就是域名系统，是互联网上作为域名和IP地址相互映射的一个分布式数据库。DNS能够使用户更方便的访问网站域名，不用去记住能够被机器直接读取的IP地址，同时便于网站扩容与维护。通过域名，最终得到该域名对应的IP地址的过程叫做域名解析（或主机名解析）。相信大部分对DNS域名解析都不陌生，但详细掌握其中细节的并不多。下面这张图，说明了一个DNS域名解析的全过程，供参考：关键术语：1、根服务器：全球共有13台根逻辑域名服务器。这13台逻辑根域名服务器中名字分别为“A”至“M”，真实的根服务器在2014年1月25日的数据为386台，分布于全球各大洲。根域名服务器是架构因特网所必须的基础设施。在国外，许多计算机科学家将根域名服务器称作“真理”（TRUTH），足见其重要性。换句话说——攻击整个因特网最有力、最直接，也是最致命的方法恐怕就是攻击根域名服务器了。2、顶级域名服务器（例如.com、.cn域名）根就如同顶级域名后面的那个节点。根把不同的顶级域名解析指到不同的服务器上，是顶级域名的上级。顶级域名有很多，比如每个国家都有一个顶级域名，全世界有多少可想而知。关于DNS解析的TTL参数：我们在配置DNS解析的时候，有一个参数常常容易忽略，就是DNS解析的TTL参数，Time To Live。TTL这个参数告诉本地DNS服务器，域名缓存的 ...继续阅读 (23)

DNS，是Domain Name System的缩写，翻译过来就是域名系统，是互联网上作为域名和IP地址相互映射的一个分布式数据库。DNS能够使用户更方便的访问互联网，便于记忆；也不用去记住能够被机器直接读取的IP地址，同时便于网站扩容与维护。通过域名，最终得到该域名对应的IP地址的过程叫做域名解析（或主机名解析）。相信大部分对DNS域名解析都不陌生，但详细掌握其中细节的并不多。下面这张图，说明了 ...继续阅读 (20)

robotframework进行数据库操作，需要使用到Database-Library，以下是安装及使用步骤：一、Robot Framework安装Database-Library使用管道Pip安装：pip install robotframework_databaselibrary二、API文档说明API参数说明Check If Exists In Database查询语句数据库中存在：存在，则为PASS，不存在，则为FAILCheck If Not Exists In Database查询语句数据库中不存在：不存在，则为PASS，存在，则为FAILConnect To DatabasedbapiModuleName=None, dbName=None, dbUsername=None, dbPassword=None, dbHost=localhost, dbPort=5432, dbConfigFile=./resources/db.cfg连接数据库配制信息，通过配制各项属性完成Connect To Database Using Custom ParamsdbapiModuleName=None, db_connect_string=连接数据库配制信息，通过db_connect_string来传递。如database='my_db_test', user='postgres' ...继续阅读 (134)

robotframework进行数据库操作，需要使用到Database-Library，以下是安装及使用步骤：一、Robot Framework安装Database-Library使用管道Pip安装：pip install robotframework_databaselibrary二、API文档说明API参数说明Check If Exists In Database查询语句数据库中存在：存在，则 ...继续阅读 (9)

Selenium自动化测试中经常要用到的Selenium库与HTTP库：Selenium2Library：http://rtomac.github.io/robotframework-selenium2library/doc/Selenium2Library.htmlHttpLibrary.HTTP：http://peritus.github.io/robotframework-httplibrary/HttpLibrary.html ...继续阅读 (42)

Selenium自动化测试中经常要用到的Selenium库与HTTP库：Selenium2Library：http://rtomac.github.io/robotframework-selenium2library/doc/Selenium2Library.htmlHttpLibrary.HTTP：http://peritus.github.io/robotframework-httplibra ...继续阅读 (11)

原文地址：https://github.com/mkorpela/pabotPabotA parallel executor for Robot Framework tests. With Pabot you can split one execution into multiple and save test execution time.My goal in creating this tool is to help you guys with big test sets. I've worked with a number of teams around the world that were doing test execution time optimisation before I created this tool. I saw similarities in how Robot Framework testing systems have been built and came up with a quite good solution for the basic parallelisation problem. I hope this tool brings you joy and speeds up your test execution! ...继续阅读 (190)

原文地址：https://github.com/mkorpela/pabotPabotA parallel executor for Robot Framework tests. With Pabot you can split one execution into multiple and save test execution time.My goal in creating this too ...继续阅读 (14)

我们常常会遇到问题，为什么指定的文档没有被搜索到。很多情况下， 这都归因于映射的定义和分析例程配置存在问题。针对分析过程的调试，ElasticSearch提供了专用的REST API。_analyze, _explain是Elasticsearch提供的辅助API，经常不为人所知和所用。_explain 用来帮助分析文档的relevance score是如何计算出来的，而_analyze是Elasticsearch一个非常有用的API，它可以帮助你分析每一个field或者某个analyzer/tokenizer是如何分析和索引一段文字。一、_analyze例如, 下面例子用test索引默认analyzer来分析 "xi fei jian"GET /test/_analyze?text="xi fei jian"执行结果:{   "tokens": [      {         "token": "xi",         & ...继续阅读 (67)

我们常常会遇到问题，为什么指定的文档没有被搜索到。很多情况下， 这都归因于映射的定义和分析例程配置存在问题。针对分析过程的调试，ElasticSearch提供了专用的REST API。_analyze, _explain是Elasticsearch提供的辅助API，经常不为人所知和所用。_explain 用来帮助分析文档的relevance score是如何计算出来的，而_analyze是Elas ...继续阅读 (17)

现代搜索离不开自动补全功能。正是有了该功能，用户可以方便地找到那些不知如何拼写的条目。看如下索引配置：{"settings": {    "analysis": {         "analyzer": {             "standardWithEdgeNGram": {                 "tokenizer": "standard",                 "filter": ["lowercase", "edgeNGram"]             }         },        ...继续阅读 (73)

现代搜索离不开自动补全功能。正是有了该功能，用户可以方便地找到那些不知如何拼写的条目。看如下索引配置：{ "settings": { "analysis": { "analyzer": { "standardWithEdgeNGram": { "tokenizer": "standard", ...继续阅读 (19)

全文搜索引擎会用某种算法对要建索引的文档进行分析， 从文档中提取出若干Token(词元)， 这些算法称为Tokenizer(分词器)， 这些Token会被进一步处理， 比如转成小写等， 这些处理算法被称为Token Filter(词元处理器), 被处理后的结果被称为Term(词)， 文档中包含了几个这样的Term被称为Frequency(词频)。 引擎会建立Term和原文档的Inverted Index(倒排索引)， 这样就能根据Term很快到找到源文档了。 文本被Tokenizer处理前可能要做一些预处理， 比如去掉里面的HTML标记， 这些处理的算法被称为Character Filter(字符过滤器)， 这整个的分析算法被称为Analyzer(分析器)。ES内置了很多Analyzer, 还有很多第三方的Analyzer插件， 比如一些处理中文的Analyzer(中文分词)。 analyzer、 tokenizer、 filter可以在elasticsearch.yml 配置， 下面是配置例子 index : analysis :analyzer :standard : type : standardstopwords : [stop1, stop2] myAnalyzer1 : t ...继续阅读 (326)

全文搜索引擎会用某种算法对要建索引的文档进行分析， 从文档中提取出若干Token(词元)， 这些算法称为Tokenizer(分词器)， 这些Token会被进一步处理， 比如转成小写等， 这些处理算法被称为Token Filter(词元处理器), 被处理后的结果被称为Term(词)， 文档中包含了几个这样的Term被称为Frequency(词频)。 引擎会建立Term和原文档的Inverted In ...继续阅读 (23)

短语匹配(Phrase Matching)就像用于全文搜索的的match查询一样，当你希望寻找邻近的单词时，match_phrase查询可以帮你达到目的。GET/my_index/my_type/_search{"query":{"match_phrase":{"title":"quick brown fox"}}}和match查询类似，match_phrase查询首先解析查询字符串来产生一个词条列表。然后会搜索所有的词条，但只保留包含了所有搜索词条的文档，并且词条的位置要邻接。一个针对短语quick fox的查询不会匹配我们的任何文档，因为没有文档含有邻接在一起的quick和fox词条。match_phrase查询也可以写成类型为phrase的match查询："match":{"title":{"query":"quick brown fox","type":"phrase"}}词条位置当一个字符串被分析时，分析器不仅只返回一个词条列表，它同时也返回原始字符串的每个词条的位置、或者顺序信息：GET/_analyze?analyzer=standardQuickbrown fox返回如 ...继续阅读 (322)

短语匹配(Phrase Matching)就像用于全文搜索的的match查询一样，当你希望寻找邻近的单词时，match_phrase查询可以帮你达到目的。GET /my_index/my_type/_search { "query": { "match_phrase": { "title": "quick brown fox" } ...继续阅读 (17)

一、搜索类型：Elasticsearch允许用户选择其所希望的处理查询的方式。因为存在一些不同的情形，对其使用不同的搜索类型才是合适的。为了控制查询的执行方式，我们可以在请求中使用search_type参数，以有下类型可以选择。1、query_and_fetch：通常是最快也是最简单的搜索类型。查询语句在所有需检查的分片上并行执行，并且所有分片返回结果的规划为size参数的取值。因此，该类型返回的文档数目最大为size参数的取值与分片数目的乘积。2、query_then_fetch：查询语句首先得到将文档排序所需的信息，然后得到要获取的文档内容的相关分片。与query_and_fetch不同，该类搜索返回的文档数目最大为size参数的取值。3、dfs_query_and_fetch：该类搜索类似于query_and_fetch。除了完成query_and_fetch的工作外，还执行初始查询阶段，该阶段计算分布式的词频以更精准地对返回文档打分。4、dfs_query_then_fetch：该类搜索类似于query_then_fetch。除了完成query_then_fetch的工作外，还执行初始查询阶段，该阶段计算分布式的词频以更精准地对返回文档打分。5、count：这是一种特殊的搜索类型，只返回匹配查询的文档数目。二、搜索位置：除了上面的控制搜索选项外，还可以控制搜索在何种分片上执 ...继续阅读 (82)