本文翻译自John Myles White的博客Why I’m Not a Fan of R-Squared。翻译工作已经获得作者授权同意。本文大意人们通常喜欢用$R^2$作为评判模型拟合好坏的标准。与MSE和MAD不同，$R^2$ 不只是模型误差的函数，它的定义中还隐含了两个模型的比较：一个是当前被分析的模型，一个是所谓的常数模型，即只利用因变量均值进行预测的模型。基于此，$R^2$ 回答的是这样一个问题：“我的模型是否比一个常数模型更好？”，然而我们通常想要回答的是另一个完全不同的问题：“我的模型是否比真实的模型更差？”通过一些人为构造的例子我们可以很容易发现，对这两个问题的回答是不可互换的。我们可以构造一个这样的例子，其中我们的模型并不比常数模型好多少，但同时它也并不比真实的模型差多少。同样，我们也可以构造出另一个例子，使得我们的模型远比常数模型要好，但也远比真实模型要差。与所有的模型比较方法一样，$R^2$ 不单是被比较模型的函数，它也是观测数据的函数。几乎对于所有的模型，都存在一个数据集，使得常数模型与真实模型之间是无法区分开的。具体来说，当使用一个模型区分效能很低的数据集时，$R^2$ 可以任意地向零趋近——即使我们对真实模型计算 $R^2$ 也是如此。因此，我们必须始终记住，$R^2$ 并不能告诉我们模型是否是对真实模型的一个良好近似：$R^2$ 只告诉我 ...继续阅读 (8)

按惯例先跑几段火车，赶时间的请直接从下面油画处开读。我很少看电影，欠的稿子都写不完还看毛线电影，不过前段时间《大鱼海棠》的精美海报画面还是吸引了我的注意力（又是从涛妹的票圈看到的），深为赞叹现在国内的动画制作技术。然而过了几天，好像评论的风向就变了。可惜了情怀这个词，现在也成了为人不齿的陈词滥调了：情怀，情你个锤子的怀，你才情怀，你全家都情怀。遥想当年，萌主（周扬）在明德楼地下咖啡厅的小房间里给我们展示 R/ECharts/Shiny 的时候，第一次提到情怀一词，小板凳上的我们都感受到了内心的一团火。“厉害啊！”萌主洋洋自得。据说《大鱼海棠》可惜在用了辣么精良的画面，却愣是没讲好一个故事（重申一遍：我没看，只是据说）；相比之下，人家徐克老爷子二十年前用简陋的技术却做出动画片《小倩》，同样是用中国传统故事素材，但比《大鱼海棠》不知道高到哪里去了。 ...继续阅读 (5)

按惯例先跑几段火车，赶时间的请直接从下面油画处开读。我很少看电影，欠的稿子都写不完还看毛线电影，不过前段时间《大鱼海棠》的精美海报画面还是吸引了我的注意力（又是从涛妹的票圈看到的），深为赞叹现在国内的动画制作技术。然而过了几天，好像评论的风向就变了。可惜了情怀这个词，现在也成了为人不齿的陈词滥调了：情怀，情你个锤子的怀，你才情怀，你全家都情怀。遥想当年，萌主（周扬）在明德楼地下咖啡厅的小房间里给我们展示 R/ECharts/Shiny 的时候，第一次提到情怀一词，小板凳上的我们都感受到了内心的一团火。“厉害啊！”萌主洋洋自得。据说《大鱼海棠》可惜在用了辣么精良的画面，却愣是没讲好一个故事（重申一遍：我没看，只是据说）；相比之下，人家徐克老爷子二十年前用简陋的技术却做出动画片《小倩》，同样是用中国传统故事素材，但比《大鱼海棠》不知道高到哪里去了。“要来找我哦，我家就在北村，门口有棵好大好大的桃花树，记得一定要来找我哦！”那我们就来谈谈讲故事的事。在统计之都十周年感言中我曾经提到过“精致的脑洞”，今天我就给大家解说一个五百年前的脑洞，这个脑洞是我压箱底的货，一般人我不告诉他，我第一次讲它是在我的博士论文答辩会上，后来便很少提它了。讲这个洞有两个目的，一是谈谈我对讲故事本身的一些想法（讲故事本不是我擅长的，但这个洞很适合讲故事），二是演示一下交互式图形的基本概念。1533年一个叫（小）霍 ...继续阅读 (20)

中国R语言会议是由统计之都发起，并同国内高校共同举办的R语言与数据科学会议。本次中国R语言会议（杭州）将由统计之都与浙江财经大学联合主办，浙江财经大学数据科学学院承办。中国R语言会议再次走进中国电子商务之都、长江三角洲中心城市、享有“人间天堂”美誉的魅力之都——杭州，愿与更多的数据爱好者与研究者探讨数据科学，共同进步提高！中国R语言会议，欢迎各位的到来！自2008年在中国人民大学举办第一届中国R语言会议起，到2016年中国R语言会议已经成功地走过了第九年，先后在全国七个城市举办，影响日渐扩大，前后报名参与人数已过万人。会议内容覆盖数据科学及R语言在各行各业的应用，包括天文、地理、医疗、生物、金融、能源、互联网等领域。十年磨一剑，破鞘天下惊。在R语言会议发展壮大的同时，统计之都也已走过十年风雨。十年间，统计之都服务着广大统计学爱好者，推动着R语言在中国的传播和发展，见证着数据科学时代的逐渐崛起。迄今为止，统计之都已先后出版八本R语言相关图书，举行五十余期海内外沙龙；未来，我们将再接再厉，继续为国内统计学和数据科学的发展贡献自己的力量。 ...继续阅读 (9)

中国R语言会议是由统计之都发起，并同国内高校共同举办的R语言与数据科学会议。本次中国R语言会议（杭州）将由统计之都与浙江财经大学联合主办，浙江财经大学数据科学学院承办。中国R语言会议再次走进中国电子商务之都、长江三角洲中心城市、享有“人间天堂”美誉的魅力之都——杭州，愿与更多的数据爱好者与研究者探讨数据科学，共同进步提高！中国R语言会议，欢迎各位的到来！自2008年在中国人民大学举办第一届中国R语言会议起，到2016年中国R语言会议已经成功地走过了第九年，先后在全国七个城市举办，影响日渐扩大，前后报名参与人数已过万人。会议内容覆盖数据科学及R语言在各行各业的应用，包括天文、地理、医疗、生物、金融、能源、互联网等领域。十年磨一剑，破鞘天下惊。在R语言会议发展壮大的同时，统计之都也已走过十年风雨。十年间，统计之都服务着广大统计学爱好者，推动着R语言在中国的传播和发展，见证着数据科学时代的逐渐崛起。迄今为止，统计之都已先后出版八本R语言相关图书，举行五十余期海内外沙龙；未来，我们将再接再厉，继续为国内统计学和数据科学的发展贡献自己的力量。一、会议时间2016年10月29日二、会议地点浙江财经大学三、会议主题本次大会共设置了Keynote专场和5个分会场。分会场主题如下：业界应用与数据可视化智慧城市与城市大数据统计与机器学习金融大数据生物统计四、会议赞助本次大会欢迎任何企业、高校、个人的多 ...继续阅读 (10)

注：广大的段子手朋友们，下次再用R做词云的时候，记得在wordcloud后面加个2无论是install.packages(“wordcloud2”)还是library(wordcloud2)或者wordcloud2(data)留下一个无法辩驳的理由，作为一个有情怀的语言，主函数的第一个变量不应该是data.frame么？最近写了一个wordcloud2的R包。调用一个JS的库(wordcloud2.js)实现wordcloud。 与旧的wordcloud相比，新的wordcloud2 能更有效的利用词与词的间隔来插入数据，更可以根据图片或者文字来绘制定制化的词云。install.packages("wordcloud2")library(wordcloud)library(wordcloud2)wordcloud(demoFreq$word,demoFreq$freq)wordcloud2(demoFreq)由于使用了Rstudio出品的htmlwidgets框架，knitr和shiny也都支持。以下是wordcloud2包的一个基本介绍。基本的函数有两个:wordcloud2: 提供基本的词云功能letterCloud: 使用选定的词绘制词云(就像刚才那个wordcloud2的图片)为了文章的流畅性，详细的使用参数我就不细说了，可以去看下我留在CRAN的文 ...继续阅读 (35)

注：广大的段子手朋友们，下次再用R做词云的时候，记得在wordcloud后面加个2无论是install.packages(“wordcloud2”)还是library(wordcloud2)或者wordcloud2(data)留下一个无法辩驳的理由，作为一个有情怀的语言，主函数的第一个变量不应该是data.frame么？最近写了一个wordcloud2的R包。调用一个JS的库(wordcloud2.js)实现wordcloud。 与旧的wordcloud相比，新的wordcloud2 能更有效的利用词与词的间隔来插入数据，更可以根据图片或者文字来绘制定制化的词云。install.packages("wordcloud2")library(wordcloud)library(wordcloud2)wordcloud(demoFreq$word,demoFreq$freq)wordcloud2(demoFreq)由于使用了Rstudio出品的htmlwidgets框架，knitr和shiny也都支持。以下是wordcloud2包的一个基本介绍。基本的函数有两个:wordcloud2: 提供基本的词云功能letterCloud: 使用选定的词绘制词云(就像刚才那个wordcloud2的图片)为了文章的流畅性，详细的使用参数我就不细说了，可以去看下我留在CRAN的文 ...继续阅读 (16)

作者简介：李舰，现任九峰移动医疗 CTO，曾任 Mango Solutions 中国区数据总监。专注于数据科学在行业里的应用。 擅长R语言的工程开发与分析建模，是 Rweibo、Rwordseg、tmcn 等 R 包的作者。与肖凯合著了《数据科学中的R语言》， 参与翻译了《R语言核心技术手册》、《机器学习与R语言》。 ...继续阅读 (8)

作者：李 舰现任九峰移动医疗CTO，曾任 Mango Solutions 中国区数据总监。专注于数据科学在行业里的应用。擅长R语言的工程开发与分析建模，是 Rweibo、Rwordseg、tmcn 等 R 包的作者。与肖凯合著了《数据科学中的R语言》，参与翻译了《R语言核心技术手册》、《机器学习与R语言》。这篇文章本来是从屠呦呦得诺奖的时候开始写的，作为一个拖延症晚期患者，直到今天才修改好。当然，现在讨论这个话题可以避免很多信仰方面的争端，大家可以心平气和地讨论药的问题。对于中药、西药和统计学我都只是初窥门径，没有资格代表其中任意一方，在这里只是介绍一些本人在这个行业中工作多年学到的知识和个人的看法。之所以敢写这篇文章，是因为这是一篇科普文，比起某些因为信仰而走火入魔的科普作者，我觉得我还是很有资格的，毕竟我在西药研发和统计学的业界真刀真枪地工作了好多年，也帮助包括几家大药厂在内的很多著名公司用数据解决过不少实际的问题。一、新药研发与临床试验我们今天要谈的是药，药和医是不同的，中医和西医都是太大的领域，我不专业就不专门提了。相对来说，药学比较偏技术，也依赖数据，统计可以发挥很重要的作用。一款新药的研发和上市要经过非常复杂的流程。我这里尽量试图用最简单的语言大概地介绍每个环节，请注意其中关于时间和金额的数据是多年来的一个概数，是我个人和以前的公司搜集公开数据并总结的，主要用作行业交流 ...继续阅读 (5)

作者：张云松毕业于中科院，多年咨询公司和互联网公司从事数据算法、决策分析、风险管理和产品设计的工作，目前是融360风控总监，负责纯线上小额微贷信用贷款产品。最近几年，这波在资本撬动的互联网金融的浪潮极大地提升了数据科学的行业应用价值，数据分析师不再是苦逼的跑数的，摇身一变成了风控模型专家、数据科学家。尤其是大数据风控、大数据征信领域一片火热的场景，数据挖掘、机器学习相关专业同学的数量也翻番上涨，越来越多的计算机和统计领域的同学加入互联网金融行业。面试中发现很多同学的梦想工作都是我要做机器学习相关工作、我要做算法、我要做模型……但其实以一个互联网金融从业者角度看，我们大量的时间还是在做数据理解、数据处理、重复验证特征、不停的在做实验，我对模型师的定义基本就是半个蓝领，只不过很多学术和一些五花八门的算法和方法可以真正有机会应用到商业领域并且产生价值。本文分享一些互联网金融从业者日常工作中实际用到的与数据科学相关的内容，由于日常工作中涉及到的数据和策略非常敏感，本文中不会透露具体产品策略，只会对一些思考和方法进行介绍；同时，由于如今互联网金融产品的形态非常多，下文主要介绍目前很热的在线授信贷款产品中数据科学的应用。在线授信贷款产品也是互联网金融产品中路径最长，最复杂的产品，类似产品形态为蚂蚁借呗、京东白条、各种手机上的贷款app。在线授信产品有别于传统个人信贷产品，用户不用提交一堆纸质材 ...继续阅读 (33)

2016年是统计之都发起主办的中国R语言会议第九年，也是统计之都成立十周年。本届中国R语言会议（成都）将由统计之都与西南交通大学联合主办，西南交通大学经济管理学院智慧营销实验室协办。这次R会议首次走进西南地区，愿与更多的数据爱好者探讨数据科学，共同进步提高！中国R语言会议，欢迎各位的到来！ ...继续阅读 (7)

2016年是统计之都发起主办的中国R语言会议第九年，也是统计之都成立十周年。本届中国R语言会议（成都）将由统计之都与西南交通大学联合主办，西南交通大学经济管理学院智慧营销实验室协办。这次R会议首次走进西南地区，愿与更多的数据爱好者探讨数据科学，共同进步提高！中国R语言会议，欢迎各位的到来！一、会议概况中国R语言会议是由统计之都发起，并同国内高校共同举办的R语言与数据科学会议。自2008年在中国人民大学举办第一届起，中国R语言会议已先后在全国七个城市举办，影响也日渐扩大，前后报名参与人数已过万人。会议内容覆盖数据科学及R语言在各行各业的应用，包括天文、地理、医疗、生物、金融、能源、互联网等领域。十年磨一剑，破鞘天下惊。R语言会议发展壮大的同时，统计之都也已走过十年风雨。十年间，统计之都服务着广大统计学爱好者，推动着R语言在中国的传播发展，见证着数据科学时代的逐渐崛起。迄今，统计之都已先后出版八本图书，举行海内外沙龙五十余期；未来，我们将再接再厉，继续为国内统计学和数据科学发展贡献自己的力量。二、会议时间2016年9月24日三、会议地点西南交通大学四、会议主题包括但不限于统计与机器学习、金融保险、智慧营销等。moremore五、会议赞助本次大会欢迎任何企业、高校、个人的多种形式赞助，作为回馈，会议手册上会印制赞助商介绍，同时为赞助商提供报告演讲机会。会议具体情况请和会务组讨论商定，请联 ...继续阅读 (14)

原文作者：Robert E. Kass; Brian S. Caffo; Marie Davidian; Xiao-Li Meng; Bin Yu; Nancy Reid原文出处：Ten Simple Rules for Effective Statistical Practice.Kass RE, Caffo BS, Davidian M, Meng X-L, Yu B, Reid N (2016) PLoS Comput Biol 12(6): e1004961. doi:10.1371/journal.pcbi.1004961.引言数月前，广受好评的“十项简则”系列（“Ten Simple Rules” series）的创始人和长期作者 Phil Bourne 建议一些统计学家写一篇关于统计学“十项简则”的文章。 （既然如何写好PLOS“十项简则”文章的原则之一就是请 Phil Bourne 加入作者群[6], 我们希望在这对 Phil 的热情赞美也能达到足够的效果。) ...继续阅读 (6)

本文作者：Robert E. Kass；Brian S. Caffo；Marie Davidian；Xiao-Li Meng；Bin Yu；Nancy Reid引言数月前，广受好评的“十大原则”系列（“Ten Simple Rules” series）的创始人和长期作者Phil Bourne建议一些统计学家写一篇关于统计学“十大原则“的文章。(既然如何写好PLOS“十大原则”文章的原则之一就是请Phil Bourne加入作者群 [6], 我们希望在这对Phil的热情赞美也能达到足够的效果。)在如何写“十大原则”的指导方针[6]里暗含了一条准则: 了解你的读者。因此，我们罗列在本文的这些原则主要是针对符合这些条件的研究者：具有一定统计知识，并且有可能得到周围统计学家的帮助，或者有亲力亲为的态度并在电脑里已经安装了一些统计软件。本文提及的原则是我们从合作研究与教学经验，以及不止一次的令人沮丧的求助：“麻烦看一下我学生的毕业论文/我的基金申请/审稿人的意见：这需要再加点统计内容，但还要看上去简洁明了。”中总结出来的。读者也可以找到一些更细致地解释本文观点的优秀文章：比如我们最欣赏的 [4]，[12]， [15]， [11]， [17] 和 [21]。统计学的每一篇文章一般都有一个防止被误解的声明。我们声明是：在本文中，“科学”一词代表了那些通过数据来解决感兴趣的问题的研究。这包括了社会科 ...继续阅读 (7)

本文作者：Robert E. Kass; Brian S. Caffo; Marie Davidian; Xiao-Li Meng; Bin Yu;Nancy Reid原文出处Ten Simple Rules for Effective Statistical Practice.Kass RE, Caffo BS, Davidian M, Meng X-L, Yu B, Reid N (2016) PLoS Comput Biol 12(6): e1004961. doi:10.1371/journal.pcbi.1004961引言数月前，广受好评的“十项简则”系列（“Ten Simple Rules” series）的创始人和长期作者 Phil Bourne 建议一些统计学家写一篇关于统计学“十项简则“的文章。(既然如何写好PLOS“十项简则”文章的原则之一就是请 Phil Bourne 加入作者群 [6], 我们希望在这对Phil的热情赞美也能达到足够的效果。)在如何写“十项简则”的指导方针[6]里暗含了一条原则: 了解你的读者。因此，我们罗列在本文的这些原则主要是针对符合这些条件的研究者：具有一定统计知识，并且有可能得到周围统计学家的帮助，或者有亲力亲为的态度并在电脑里已经安装了一些统计软件。本文提及的原则是我们从合作研究与教学经验，以及不止一次的令人沮丧的求助：“麻烦看一下 ...继续阅读 (4)

炎炎夏日正好是提升数据分析能力，成为数据科学家的好机会。由融360和统计之都共同主办的第二届融360“天机”金融风控大数据竞赛开始报名啦！ 不论你是什么学校什么专业，只要你对大数据和互联网金融感兴趣，都可以组队报名参赛。本次大赛奖金共计十万元，优秀者还可获得实习offer！初赛报名时间为2016年6月21日至10月8日。详情可见：http://openresearch.rong360.com/ ...继续阅读 (5)

炎炎夏日正好是提升数据分析能力，成为数据科学家的好机会。由融360和统计之都共同主办的第二届融360“天机”金融风控大数据竞赛开始报名啦！不论你是什么学校什么专业，只要你对大数据和互联网金融感兴趣，都可以组队报名参赛。本次大赛奖金共计十万元，优秀者还可获得实习offer！初赛报名时间为2016年6月21日至10月8日。详情可见：http://openresearch.rong360.com/ 大赛简介融360“天机”金融风控大数据竞赛是以解决实际线上金融服务问题为目标开展的数据竞赛。本次竞赛基于融360平台积累的真实的用户数据，向全球大数据金融人才征集更有效的算法、模型，利用数据挖掘用户价值，为用户提供更好的金融服务。大赛流程1，线上报名6月21日-10月8日2，初赛开始7月18日-10月8日3，初赛信息公布10 月中旬4，复赛答辩及颁奖10 月下旬大赛规则1.参赛队伍完成线上信息注册，可以是单人成队，也可以多人组队参赛；每人只能参加一支队伍。2.报名后，参赛队伍可在指定网站（网址：http://openresearch.rong360.com/）下载题目以及所需数据（ demo数据将于6月21号发布，正式数据将于7月4号12:00PM发布）。3.比赛在7月18号12:00AM正式开始，参赛队伍可向网站上传预测结果，每支参赛队伍每天有三次上传机会，比赛平台会根据结果准确率 ...继续阅读 (5)

本文作者：黄湘云，2011-2015年在中国矿业大学（北京）的数学与应用数学专业获得学士学位，并从2015年至今在中国矿业大学（北京）统计学专业硕士在读，主要研究方向为复杂数据分析。引言谈起符号计算，大家首先想到的可能就是大名鼎鼎的Maple，其次是Mathematica，但是他们都是商业软件，除了其自身昂贵的价格外，对于想知道底层，并做一些修改的极客而言，这些操作也很不可能实现。自从遇到R以后，还是果断脱离商业软件的苦海，R做符号计算固然比不上Maple，但是你真的需要Maple这样的软件去做符号计算吗？我们看看R语言的符号计算能做到什么程度。符号计算1.符号微分在R中能够直接用来符号计算的是表达式，下面以Tetrachoric函数为例，$$\tau(x)=\frac{(-1)^{j-1}}{\sqrt{j !}}\phi^{(j)}(x)$$其中$$\phi(x)=\frac{1}{\sqrt{2\pi}}e^{-\frac{x^2}{2}}$$在R里，声明表达式对象使用expression函数NormDensity <- expression(1/sqrt(2 * pi) * exp(-x^2/2)) class(NormDensity) ## [1] "expression"计算一阶导数D(NormDensity, "x") ## -(1/sqrt(2 * pi) * ...继续阅读 (11)

本文翻译自 GitHub 项目zonination/investing的描述文件README.md。译者对原文顺序有所改动。原文以 MIT 协议发布，已征得作者  Zoni Nation 许可进行翻译。译文版权归统计之都所有，转载请注明出处。很多人是从 Reddit 上的 “个人理财”（/r/personalfinance）板块的贴子和评论里认识我的。 我最近也经常逛“美丽数据”（/r/dataisbeautiful）板块。 （译者注：Reddit 是一个在美国受众广泛的娱乐、社交及新闻网站。它与论坛类似，注册用户可以在网站上发布文字和链接。） ...继续阅读 (6)

本文翻译自 GitHub 项目zonination/investing的描述文件README.md。译者对原文顺序有所改动。原文以 MIT 协议发布，已征得作者  Zoni Nation 许可进行翻译。译文版权归统计之都所有，转载请注明出处。很多人是从 Reddit 上的 “个人理财”（/r/personalfinance）板块的贴子和评论里认识我的。我最近也经常逛“美丽数据”（/r/dataisbeautiful）板块。（译者注：Reddit 是一个在美国受众广泛的娱乐、社交及新闻网站。它与论坛类似，注册用户可以在网站上发布文字和链接。）前段时间，我开始了我的第一个数据可视化项目。我先从 Robert Shiller 的标普 500 数据项目中下载了标普 500 的一些数据，开始了疯狂的数据可视化之旅。最近，我终于把手头上的其他几个项目处理好，安定下来，于是我又回到这些数据上，同时决定用它完成一个完整的可视化项目。这里引用美联储主席 Alan Greenspan 对 股神 Warren Buffet 说过的一段话：Warren，你让我太震惊了！你只要不去理会股票市场的短期甚至长期的衰退，咬紧牙关，什么也不做，不卖出任何一支股票，你就总能获得好的股票收益。也就是，你只要把你所有的钱都投到股票里，然后回家看也不看它们一眼，之后你获得的收益比每天尝试进行股票交易的情况还要高。“个人理财 ...继续阅读 (22)

如果你是被这个标题骗进来的，那么说明标题党的存在的确是有原因的。 在网络高度发达（以及“大数据”泛滥）的今天，数据动不动就是以 GB 和 TB 的级别存储，然而相比之下，人类接受信息的速度却慢得可怕（参见大刘《乡村教师》）。 试想一下，你一分钟能阅读多少文字？一千？五千？总之是在 KB 的量级。 所以可以说，人们对文字的“下载速度”基本上就是 1~10KB/min。如果拿这个速度去上网的话你还能忍？ ...继续阅读 (9)

如果你是被这个标题骗进来的，那么说明标题党的存在的确是有原因的。在网络高度发达（以及“大数据”泛滥）的今天，数据动不动就是以 GB 和 TB 的级别存储，然而相比之下，人类接受信息的速度却慢得可怕（参见大刘《乡村教师》）。试想一下，你一分钟能阅读多少文字？一千？五千？总之是在 KB 的量级。所以可以说，人们对文字的“下载速度”基本上就是 1~10KB/min。如果拿这个速度去上网的话你还能忍？既然如此，每天网上有成千上万的新闻、报告、文章和八卦，怎么看得过来呢？没办法，只能先对正文进行一次粗略的筛选——看标题。俗话说得好，这是一个看脸的世界。于是乎，文章的作者为了吸引读者，就要取个足够博眼球的标题，而所谓标题党便是充分利用这种心理，用各种颇具创意的标题来吸引读者的注意。好了，既然看官已经看到了这里，我就可以承认本文其实也是标题党了。这篇小文并不是要讨论标题党的前世今生，而是研究一个与此有关的统计问题：怎样的标题会更加吸引读者的关注？这个问题有点太大了，所以我们缩小一下范围。既然是统计问题，就拿自家的一个例子下手吧：做统计学研究的，都得读各种各样的统计论文，那么论文的标题是否会对这篇文章的阅读量产生影响呢？巧的是，美国统计协会期刊（JASA）的网站上正好提供了该期刊旗下文章的下载访问量，所以我们可以以此做一个小分析，来研究一下标题与文章阅读量之间的关系。可能有读者要问，为什么要使用文 ...继续阅读 (17)

REmap是一个基于Echarts2.0http://echarts.baidu.com/echarts2/的一个R包。主要的目的是为广大数据玩家提供一个简便的，可交互的地图数据可视化工具。目前托管在github，https://github.com/lchiffon/REmap。使用如下步骤安装：library(devtools) install_github('lchiffon/REmap')REmap目前更新到V0.3，提供百度迁徙，分级统计，百度地图，热力图等功能的实现。提示:请使用Chrome或者Firefox来作为默认浏览器最后要声明的一点：这个包的目的是简化使用和学习的流程，如果你是一个好学的geek，请深入的学习Echarts！特性使用Echarts2.0封包，地图绘制使用的是SVG图形采用百度API来自动获取城市的经纬度数据支持Windows！ ...继续阅读 (4)

REmap是一个基于Echarts2.0http://echarts.baidu.com的一个R包。主要的目的是为广大数据玩家提供一个简便的，可交互的地图数据可视化工具。目前托管在github，https://github.com/lchiffon/REmap使用如下步骤安装：library(devtools) install_github('lchiffon/REmap')REmap目前更新到V0.3，提供百度迁徙，分级统计，百度地图，热力图等功能的实现。提示:请使用Chrome或者Firefox来作为默认浏览器最后要声明的一点：这个包的目的是简化使用和学习的流程，如果你是一个好学的geek，请深入的学习Echarts！特性使用Echarts2.0封包，地图绘制使用的是SVG图形采用百度API来自动获取城市的经纬度数据支持Windows！使用向导获取经纬度获取经纬度的函数是基于BaiduAPI的一个获取地理位置的功能。这个函数不仅是REmap下的一个功能，实际上，你也可以用它来抓取城市经纬度数据：基本函数:get_city_coord获取一个城市的经纬度get_geo_position获取一个城市向量的经纬度library(REmap) city_vec = c("北京","Shanghai","广州") get_city_coord("Shanghai")[1] 121.478 ...继续阅读 (19)

“王杨卢骆当时体，轻薄为文哂未休。 尔曹身与名俱灭，不废江河万古流。”— 唐 杜甫《戏为六绝句》（其二）【不要问我为啥放这首在开头，千人千面千理解吧】深度学习：概述和一孔之见深度学习（DL），或说深度神经网络（DNN），作为传统机器学习中神经网络（NN）、感知机（perceptron）模型的扩展延伸，正掀起铺天盖地的热潮。DNN火箭般的研究速度，在短短数年内带来了能“读懂”照片内容的图像识别系统，能和人对话到毫无PS痕迹的语音助手，能击败围棋世界冠军、引发滔滔议论的AlphaGo……DNN在众多应用领域的成功无可置疑。然而，在众多（负责任的和不负责任的）媒体宣传推波助澜下，一部分人过于乐观，觉得攻克智能奇点堡垒近在眼前；另一部分则惶惶不可终日，觉得天网统治人类行将实现。作者君对此的态度如下图所示：小品里，黑土老大爷对头脑发热的白云大妈说过：“什么名人，不就是个人名？”对于DNN，作者君也想说：“什么怪力乱神，不就是个计算模型？”言归正传，如果不把DNN看成上帝/天网/人工智能终点etc.，也暂不考虑当前DL和人脑思维之间若有若无的联系，那么DNN和K-Means、主成分分析（PCA）、稀疏编码（sparse  coding或Lasso）等众多耳熟能详的模型并无二致，都属于机器学习中**特征学习（feature learning）范畴。假如硬说DNN有什么不同，那么大概就在一个“深” ...继续阅读 (8)

“王杨卢骆当时体，轻薄为文哂未休。 尔曹身与名俱灭，不废江河万古流。”— 唐 杜甫《戏为六绝句》（其二）【不要为我为啥放这首在开头，千人千面千理解吧】 深度学习：概述和一孔之见深度学习（DL），或说深度神经网络（DNN）， 作为传统机器学习中神经网络（NN）、感知机（perceptron）模型的扩展延伸，正掀起铺天盖地的热潮。DNN火箭般的研究速度，在短短数年内带来了能“读懂”照片内容的图像识别系统，能和人对话到毫无PS痕迹的语音助手，能击败围棋世界冠军、引发滔滔议论的AlphaGo…… DNN在众多应用领域的成功无可置疑。然而，在众多（负责任的和不负责任的）媒体宣传推波助澜下，一部分人过于乐观，觉得攻克智能奇点堡垒近在眼前；另一部分则惶惶不可终日，觉得天网统治人类行将实现。作者君对此的态度如下图所示：小品里，黑土老大爷对头脑发热的白云大妈说过：“什么名人，不就是个人名？”对于DNN，作者君也想说：“什么怪力乱神，不就是个计算模型？”言归正传，如果不把DNN看成上帝/天网/人工智能终点etc., 也暂不考虑当前DL和人脑思维之间若有若无的联系，那么DNN和K-Means、主成分分析（PCA）、稀疏编码（sparse  coding或Lasso）等众多耳熟能详的模型并无二致，都属于机器学习中特征学习（feature learning）范畴。假如硬说DNN有什么不 ...继续阅读 (86)

编辑部按：本文是从张志华老师在第九届中国R语言会议和上海交通大学的两次讲座中整理出来的，点击此处观看幻灯片。张志华老师是上海交通大学计算机科学与工程系教授，上海交通大学数据科学研究中心兼职教授，计算机科学与技术和统计学双学科的博士生指导导师。在加入上海交通大学之前，是浙江大学计算机学院教授和浙江大学统计科学中心兼职教授。张老师主要从事人工智能、机器学习与应用统计学领域的教学与研究，迄今在国际重要学术期刊和重要的计算机学科会议上发表70余篇论文，是美国“数学评论”的特邀评论员，国际机器学习旗舰刊物Journal of Machine Learning Research 的执行编委，其公开课《机器学习导论》和《统计机器学习》受到广泛关注。张志华老师和他的学生们大家好，今天我演讲的主题是“机器学习：统计与计算之恋”。我用了一个很浪漫的名字，但是我的心情是诚惶诚恐的。一则我担心自己没有能力驾驭这么大的主题，二则我其实是一个不解风情之人，我的观点有些可能不符合国内学术界的主流声音。最近人工智能或者机器学习的强势崛起，特别是刚刚过去的AlphaGo和韩国棋手李世石九段的人机大战，再次让我们领略到了人工智能或机器学习技术的巨大潜力，同时也深深地触动了我。面对这一前所未有的技术大变革，作为10多年以来一直从事统计机器学习一线教学与研究的学者，希望借此机会和大家分享我个人的一些思考和反思。在这场人工 ...继续阅读 (3)

编辑部按：本文是从张志华老师在第九届中国R语言会议和上海交通大学的两次讲座中整理出来的。张志华老师是上海交通大学计算机科学与工程系教授，上海交通大学数据科学研究中心兼职教授，计算机科学与技术和统计学双学科的博士生指导导师。在加入上海交通大学之前，是浙江大学计算机学院教授和浙江大学统计科学中心兼职教授。张老师主要从事人工智能、机器学习与应用统计学领域的教学与研究，迄今在国际重要学术期刊和重要的计算机学科会议上发表70余篇论文，是美国“数学评论”的特邀评论员，国际机器学习旗舰刊物Journal of Machine Learning Research 的执行编委，其公开课《机器学习导论》和《统计机器学习》受到广泛关注。张志华老师和他的学生们大家好，今天我演讲的主题是 “机器学习：统计与计算之恋”。我用了一个很浪漫的名字，但是我的心情是诚惶诚恐的。一则我担心自己没有能力驾驭这么大的主题，二则我其实是一个不解风情之人，我的观点有些可能不符合国内学术界的主流声音。最近人工智能或者机器学习的强势崛起，特别是刚刚过去的AlphaGo和韩国棋手李世石九段的人机大战，再次让我们领略到了人工智能或机器学习技术的巨大潜力，同时也深深地触动了我。面对这一前所未有的技术大变革，作为10多年以来一直从事统计机器学习一线教学与研究的学者，希望借此机会和大家分享我个人的一些思考和反思。在这场人工智能发展的盛事里， ...继续阅读 (18)

编辑部按：本文是从张志华老师在第九届中国R语言会议和上海交通大学的两次讲座中整理出来的，点击此处观看幻灯片。张志华老师是上海交通大学计算机科学与工程系教授，上海交通大学数据科学研究中心兼职教授，计算机科学与技术和统计学双学科的博士生指导导师。在加入上海交通大学之前，是浙江大学计算机学院教授和浙江大学统计科学中心兼职教授。张老师主要从事人工智能、机器学习与应用统计学领域的教学与研究，迄今在国际重要学术期刊和重要的计算机学科会议上发表70余篇论文，是美国“数学评论”的特邀评论员，国际机器学习旗舰刊物Journal of Machine Learning Research 的执行编委，其公开课《机器学习导论》和《统计机器学习》受到广泛关注。张志华老师和他的学生们大家好，今天我演讲的主题是 “机器学习：统计与计算之恋”。我用了一个很浪漫的名字，但是我的心情是诚惶诚恐的。一则我担心自己没有能力驾驭这么大的主题，二则我其实是一个不解风情之人，我的观点有些可能不符合国内学术界的主流声音。最近人工智能或者机器学习的强势崛起，特别是刚刚过去的AlphaGo和韩国棋手李世石九段的人机大战，再次让我们领略到了人工智能或机器学习技术的巨大潜力，同时也深深地触动了我。面对这一前所未有的技术大变革，作为10多年以来一直从事统计机器学习一线教学与研究的学者，希望借此机会和大家分享我个人的一些思考和反思。在这场人 ...继续阅读 (22)

作者：朱雪宁金庸的射雕三部曲，我最爱的是收官作《倚天屠龙记》。金老爷子在后记里曾说，三部曲中郭靖诚朴质实，杨过深情狂放，张无忌的个性却比较复杂，也是比较软弱。就我看来，这种软弱的一方面体现在他对爱情的选择困难症上。幼时蝴蝶谷初遇殷离，便被一见钟情，后有婚诺之约；年少汉水舟中邂逅周芷若，后来互生情愫，几成良缘；光明顶遇小昭，意存怜惜，却终天人永隔；绿柳山庄遇赵敏，针锋相对，但也一生羁绊。张无忌本人态度比较暧昧，可以说是经过朱九真爱情滑铁卢之后一路上运势基本开挂，但他性格里却是拖泥带水，见异思迁，放到现在基本称得上是渣男中的战斗渣。张无忌究竟爱谁？这是一个被争得沸沸扬扬的问题，说实话，有一千个读者，就有一千个最爱。连金老爷子最后也只得承认：恐怕作者也难以说清。但是，真的说不清吗？我心血来潮，拿倚天屠龙记小说做了一把文本分析。数据预处理想要找倚天屠龙记的文本并不难，直接度娘打死都不能说的“倚天屠龙记 txt”即可【1】。我们先读进R来一探究竟（用readLines）:yitian = readLines("倚天屠龙记.Txt") yitian[1:10]##  [1] "                         一　  天涯思君不可忘"                                 ##  [2] "    “春游浩荡，是年年寒食，梨花时节。白锦无纹香烂漫 ...继续阅读 (19)