编者注：在我们脚踏实地地推动科技的发展之前，我们还必须认清未来的趋势。正确的方向能够指引我们更好地前行，那么看似波澜不惊的 2015 年究竟有哪些科技得到了长足的发展呢？且听科技大咖莫博士说说他的观点： ...继续阅读 (19)

作者：糖直销_Orz编者注：在我们脚踏实地地推动科技的发展之前，我们还必须认清未来的趋势。正确的方向能够指引我们更好地前行，那么看似波澜不惊的 2015 年究竟有哪些科技得到了长足的发展呢？且听科技大咖莫博士说说他的观点：本文编译自The Verge，图片来源于网络。科技记者，爱好者，投资人都一直在等待下一个伟大的事物——强力的新设备，应用或者能让世界为之着迷，甚至改变世界的服务。就像 Google 搜索，或 iPhone，或 Kindle，或 Facebook。但是在 2015 年，没有任何类似事情发生。并不是没有尝试。所有的大型科技公司，包括一些小的公司，生产出了一些新的东西，并且我喜欢其中的一些，不喜欢另一些。有些卖得很好，而有些却搞砸了。但在 2015 年确实没有什么引人注目，改变众人生活的事物，尽管我认为那些最终可以改变世界的科技变得更好了，也变得更实际了。同时，一些关键的，基础的技术显示出停滞，甚至变糟的迹象了。这是 2015 年，一些我看好的趋势：智能手机看上去趋于成熟了智能手机现在是我们生活中不可或缺的一部分了，2015 年之时，它也缺少给我们带来惊喜的能力了。但这并不意味着它结束了——长远地来看。世界范围内，还有人连一部手机都没有。在库比蒂诺，山景城，首尔和深圳的实验室里，也许有些很酷的事物在孕育着。3D Touch 技术看上去还没有发展起来在 2015 年之时， ...继续阅读 (14)

作者：Mike Ash，原文链接，原文日期：2015-11-20译者：Cee；校对：千叶知风；定稿：numbbbbb在现代的编程语言中，子类型（Subtypes）和超类型（Supertypes）已经成为了非常常见的一部分了。协变（Convariance）和逆变（Contravariance）则能告诉我们什么时候使用子类型或超类型会优于原来使用的类型。这在我们使用的大多数编程语言中非常的常见，但是很多开发者仍然对这些概念感到模糊不清。今天我们就来详细讨论一下。子类型（Subtypes）和超类型（Supertypes）我们都知道子类（Subclass）是什么。当你创建一个子类的时候，你就在创建一个子类型。用一个经典的例子来讲，就是用Animal的子类去创建一只Cat：class Animal { ... } class Cat: Animal { ... }这让Cat成为了Animal的子类型，也就意味着所有的Cat都是Animal。但并不意味着所有的Animal都是Cat。子类型通常能够替代超类型。很明显懂一点编程知识的任何程序员都知道，在 Swift 中，下面的代码的第一行能够正常的运行，然而第二行则不能：let animal: Animal = Cat() let cat: Cat = Animal()对于函数类型也是适用的：func animalF() -&g ...继续阅读 (22)

2015是很了不起的一年。智能行业国内国外都有众多技术引领下一代的趋势，成为开启人们下一波创造力的火种，同时吸引无数聪明的头脑和庞大的资金向其靠拢，更重要的是这些技术会彻底改变我们的生活，颠覆当下的世界，而这一切，常常就在不知不觉中被你习惯着。精挑细选了其中的10个大招，我们认为这些技术代表了智能行业的趋势。本文除了将其推荐给您，智东西也会在未来的一年着重相关内容的报道。9美元电脑这个事起源于今年5月8日，Next Thing公司在Kickstarter网站上开始众筹。9美元的电脑能做什么呢？它的配置是这样的。其实这是Next Thing的一款叫做CHIP的很mini的电脑，它只有这么大。它是这么用的。它有三个接口，USB接口，Mini USB接口/OTG端口以及复合HDMI&VGA输出端口（通过适配器），音频输出端口与麦克输入端口的三合一接口。算起来已经搞了大半年了，所以上月底CHIP已经开始预售，并且12月21日就会从我朝大深圳出货！果然制造大国不是说说的！CHIP的意义有两点，其一在于开源，降低了开发者的门槛，甚至提供了相当大的自由度；其二在于其超级低廉的价格，基本上在人手都不止一个终端的今天，不同设备对于个人使用上也有各自的侧重。9美元，合人民币50多元，在日常，低端，追求轻便快捷的应用需求里，功能得以满足，而价格则刷新了当前的下限。考虑到各种智能设备彼此间越来越密 ...继续阅读 (27)

六十万二千零四六十万二千零四"Emma, I am your father," is probably a joke that never gets old in this house.“艾玛，我是你的父亲，”可能是一个笑话，从来没有在这家老房子。A little girl named Emma (not Leia) thinks a picture of Darth Vader is actually a picture of her dear old dad. Her real dad, Paul Ross, notedon YouTube, that his little princess must've gotten confused because the whole family dressed inStar Warscostumes for Halloween — and Ross dressed as Vader, of course.一个叫艾玛的小女孩（不是莉亚）认为一张达斯维达实际上是一张她亲爱的老爸。她真正的爸爸，保罗罗斯指出，在YouTube上，他的小公主一定是很困惑因为身着星球大战万圣节服饰和# 8212全家；罗斯穿着维达，当然。Looks like it's too late, though. This girl has officially ...继续阅读 (29)

六十万二千零四六十万二千零四What's the first thing that comes to mind when you think ofCES? Is it some fancy new phone? Or a self-driving car?想到当你认为CES的第一件事是什么？这是不是有点别致的新手机？还是自驾车？But what about a mystery tech product from Wheat Thins, a company best known for making tasty cracker snacks?但对于小麦神秘的高科技产品的东西，一个公司最出名的美味饼干点心吗？Most would think that sounds crazy. However, you can't convinceYouTuber iJustinethat a blueprint she recently found online doesn't reveal some special tech IP大多数人会认为这听起来很疯狂。然而，你不能说服YouTuber iJustine蓝图，她最近发现网上并没有透露一些特殊技术的IPWatch as she walks you through her discovery — and then stay tune ...继续阅读 (17)

What do keys, wallets and pets have in common?钥匙、钱包和宠物有什么共同之处？They're each a really terrible thing to lose track of — yet they seem to be three things people often tend to lose. Keys and wallets are sometimes set down and forgotten, and tend to find their ways into random nooks and crannies, while pets sometimes give in to their natural penchant for wanderlust and sneakily dart away from their owners.他们在每一个真正可怕的失去与# 8212；然而，他们似乎是三件事的人往往容易失去。钥匙和钱包有时放下和遗忘，往往会发现他们的方式进入随机的角落和缝隙，而宠物有时给他们的自然倾向，偷偷镖癖远离自己的主人。If you've ever misplaced any of these, it's likely you'd prefer to never again feel that ...继续阅读 (48)

六十万二千零四六十万二千零四The new teaser for Showtime's upcomingTwin Peaksrevival plays out like a campaign to visit the Pacific Northwest, highlighting fog-covered mountains and tree tops perfect for concealing secrets. The town's sign is back up where it belongs; watching it feels like getting an embrace from an old friend对于即将到来的双峰Showtime的复兴是一场参观西北太平洋新的预告片，突出了浓雾覆盖的山和树顶完美的隐藏的秘密。这个城市的标志是它所属的地方，看着它感觉像是从一个老朋友那里得到一个拥抱But, of course, the owls are not what they seem. You'll have to wait until 2017 to find out what mysteries are in store, though.但是，当然，猫头鹰是不是他们似乎。你要等到2017点才发现什么秘密都在商店里。James Corden and a carload ...继续阅读 (53)

LOS ANGELES — Disney has a good feeling about this.洛杉矶和# 8212；迪斯尼对此感觉很好。Star Wars: TheForceAwakensput up $57 million in Thursday night showings in the U.S. alone, streaking past the previous record of $43.5 million set in 2011 byHarry Potter and the Deathly Hallows: Part 2, according to studio figures.星球大战：原力唤醒星期四晚上看房仅在美国投入了5700万美元，裸奔过去的纪录4350万美元，哈利波特与死亡圣器设定在2011：2，根据工作室的数字。SEE ALSO:'Star Wars: The Force Awakens' premiere was the biggest thing Hollywood has ever seen参见：星球大战：原力唤醒'首映好莱坞有史以来最大的一件事Playing in 4,134 theaters — a December record — the film seems to have a very good ...继续阅读 (37)

WASHINGTON — Hillary Clinton, Bernie Sanders and Martin O'Malley will head to Manchester, New Hampshire, on Saturday night for the final Democratic debate of 2015.华盛顿和# 8212；希拉里克林顿，伯尼桑德斯和Martin O'Malley将前往曼彻斯特，新罕布什尔州，在2015最后的民主辩论星期六晚上。A weekend debate during the holiday season — when Americans are more likely to be gathered 'round the yule log at holiday parties than the TV to watch a debate — is unlikely to garner the same viewership asTuesday's GOP debate. The debate is also competing with theNFL, as the New York Jets and Dallas Cowboys face off at the same time.一个周末的辩论，节日期 ...继续阅读 (19)

六十万二千零四六十万二千零四James Corden is a man with a car, a mix CD full of Christmas songs, and a some rides to give — to One Direction and Iggy Azalea.杰姆斯来说是一个男人和一个车，一个充满圣诞歌曲的CD，和一些游乐设施，给# 8212；一个方向和伊基杜鹃。In an uplifting video featuring almost every celebrity who has sung karaoke with Corden so far, the talk show host extends the Christmas spirit with a cover of "Joy to the World."在一个令人振奋的视频，几乎每一个名人唱卡拉OK与科登为止，谈话节目主持人延伸圣诞精神与“欢乐世界盖。”Count them out as One Direction, Stevie Wonder, Iggy Azalea, Rod Stewart, Carrie Underwood, Jason Derulo and Justin Bieber join Corden for some good ole' fashioned car-j ...继续阅读 (50)

六十万二千零四六十万二千零四If you have a long, white beard, you're kind of expectedto be jolly around Christmas — but this guy is taking it to a whole new level of holiday cheer.如果你有一个长长的白胡子，你期望是快乐的圣诞节和# 8212；但这家伙是考虑到整个节日的新水平。This little girl in a West Virginia Walmart saw an older shopper with a red shirt and a white beard and (understandably) thought he was Santa. Instead of correcting her, the man totally played along, asking if she'd been good this year and what she wantedfor Christmas在西弗吉尼亚州的沃尔玛这个小女孩看到一个老顾客有一个红色的衬衫和白色的胡须，（可以理解）认为他是圣诞老人。这个男人完全没有纠正她，而是在问她今年是否会好，以及她想要的圣诞礼物Clearly, this is a Christm ...继续阅读 (31)

We laughed. We cried. We thanked the Internet for sharing and humans for their compassion.我们笑了。我们哭了。我们感谢互联网分享和人类对他们的同情。In2015, the times which inspired us came in handfuls. They encouraged us to share our own stories with those going through the same challenges, extend random acts of kindness to strangers, and contemplate the innate goodness of animals.2015，启发我们的时代来捧。他们鼓励我们与那些经历相同挑战的人分享我们自己的故事，将随机的行为扩展到陌生人身上，并考虑动物的天性。See also:24 videos that inspired us to do something good in 2015还有：24个视频，启发我们做一些好的2015还有：24个视频，启发我们做一些好的2015All in all, the Internet definitely deserves a few pats on the back. It ...继续阅读 (30)

六十万二千零四六十万二千零四Put down that joint kids, if you don't want to end up like Stoner Sloth over there.放下那共同的孩子，如果你不想在那里结束斯通纳懒惰。That's the character leading an anti-marijuana campaign in the Australian state of New South Wales, targeting teenagers with the tagline "you're worse on weed."这是领导反大麻活动在澳大利亚新南威尔士州的特点，与你差对杂草的标语“针对青少年”。See also:And the 2016 Rock and Roll Hall of Fame inductees are...参见：和名人堂入选摇滚名人堂，是2016…参见：和名人堂入选摇滚名人堂，是2016…The thing is, people on the Internet think this campaign is absolutely hilarious正是，互联网上的人认为这场运动绝对是滑稽的六十万二千零五Image: Stoner Sloth图像：斯托纳懒惰图像：斯托纳懒惰GIFs and videos have been c ...继续阅读 (131)

2015年12月18日，W3C的Dave Ragget发布官方博文，介绍了将在2016年2月25日在美国圣地亚哥举行的Industry of Thing World USA 2016。W3C的CEO Jeff Jaffe将受邀在本次会议上发表主题报告，试图给出避免物联网（Internet of Thing）世界过度碎片化的方案。在Jeff 的报告中，将介绍W3C在简化基于不同IoT平台的应用开发、与现有标准工作集成和整合，以及降低整体方案的成本并支持构建开放服务市场等方面所做的工作。 W3C正试图将各类技术专家聚集在一起，共同解决在服务发现、组合、变现等方面所面临的种种挑战。同时，Jeff也将介绍W3C将如何解决跨设备、跨平台以及跨不同应用领域的服务整合，构建Web规模的应用服务所面对的挑战。我们认为，解决这些问题的核心是跨不同工业联盟和标准开发组织的更加广泛的协作。欢迎您参加IoTW USA 2016活动，与世界顶级工业互联网技术专家共同交流，并共同致力于解决上述挑战，贡献您的思考和最佳实践，介绍您对未来物联网应用开发及创新的简介。欢迎W3C会员关注并参加此次活动，W3C会员注册参会可以获得专门的注册费折扣。更多信息，请参阅IoTW USA 2016主页，W3C官方博客（英文、中文）及本文英文原文。  ...继续阅读 (56)

LONDON — Forget Storm Troopers, R2D2 and Harrison Ford — there was only one thing on everyone's minds during the London premiere ofStar Wars: TheForceAwakens— Carrie Fisher's brilliantly-named French bulldog Gary.伦敦和# 8212；忘记冲锋队，R2D2和哈里森·福特& # 8212；伦敦星战首映期间有在每个人的心中只有一件事：力唤醒和# 8212；卡丽Fisher精辟命名的法国斗牛犬加里。See also:Carrie Fisher's amazing dog should be in 'Star Wars'参见：卡丽·费的惊人的狗应该是在“星球大战”参见：卡丽·费的惊人的狗应该是在“星球大战”From the moment he toddled on to the red carpet with his silly littlepink tongue poking out of his chops, Gary captured Britain's heart.从他蹒跚学步到红地毯和他的愚蠢的粉红色的小舌头，他的印章戳，加里俘获 ...继续阅读 (18)

六十万二千零四六十万二千零四The excitement surroundingStar Wars: TheForceAwakenshas reached such intense levels that even weather presenters are getting in on the action.周围的星球大战的兴奋：力唤醒已经达到了这样的激烈程度，甚至天气预报主持人也在行动。On Tuesday, Channel 5's Sian Welby managed to bust out a whopping 12 puns in 40 seconds during a routine UK weather update.上星期二，5频道的西安韦尔比设法逃出了高达12的双关语在40秒常规英国天气更新期间。See also:Spire of Dublin was turned into a giant lightsaber and it looked strangely beautiful参见：尖顶的都柏林是变成了一个巨大的光剑，它看起来很漂亮参见：尖顶的都柏林是变成了一个巨大的光剑，它看起来很漂亮It's hard to pick a favourite, but for us it's a toss-up between "If you're forced to awa ...继续阅读 (24)

A disclaimer: A lot of interesting and intriguing things happened onAmerican Horror Story: Hotel's fall finale免责声明：美国恐怖故事发生了很多有趣而有趣的事情：酒店的秋天In fact, it may have been one of the season's best episodes事实上，这可能是本赛季最好的比赛之一In the episode — the show's last new episode until Jan. 6 — there was lots of death, renewed love oflifeand lots of stuff in between在情节和# 8212；节目的最后一集在1月6日和# 8212；有大量的死亡，新的爱情生活和很多东西之间See also:Everything's coming up Gaga on 'American Horror Story' ... for now参见：一切都是Gaga的“美国恐怖故事…现在参见：一切都是Gaga的“美国恐怖故事…现在But I'll get to that in a bit. Because the moment Matt Bomer danced t ...继续阅读 (24)

六十万二千零四六十万二千零四This kangaroo was just hanging out on a backyard trampoline when he got a little bit startled — and had a rather clumsy moment.这只袋鼠只是挂在后院的蹦床的时候，他有点吃惊和# 8212；并有相当笨拙的时刻。When the kangaroo attemptedto get off of the trampoline, though, he must have miscalculatedthe amount of bounce involved and ended up accidentally doing a full flip off the trampoline当袋鼠试图下车的蹦床，虽然，他一定算错了反弹涉及的金额和最终不小心做了充分的跳蹦床Um ... we're sure he totally meant to do that.嗯…我们肯定他是想做那个。British weather presenter squeezes 12 'Star Wars' puns into 40-second broadcast英国的天气节目主持人把12“星球大战”的双关语为40第二广播Arnold Schwarzenegger ...继续阅读 (14)

对于创客来说，微型电脑板肯定是不可缺少的，微型电脑板便宜的价格也是吸引诸多开发者争相购买的原因之一。现在市面上有两种供大家选用的低于10美元的超微型电脑，一个是售价5美元的Pi Zero，另一个是售价9美元的C.H.I.P.。网络上对他们的争论层出不穷，人们永远在讨论到底哪个更快、更划算、更适合于项目制作的使用。但是网上这些争论通常是没有效果的，今天，我们就来详细比较它们在各方面的优劣。规格比较Pi 和 C.H.I.P. 在主处理器上势均力敌，都是1GHz的处理器，拥有512MB或者RAM。但是C.H.I.P.使用的更新的ARMv7架构，而Pi Zero则使用的是老版的ARMv6架构（也叫作ARM11）。它们都是用USB提供电源，但是C.H.I.P.还能使用锂聚合物电池供电，并具有内置的充电电路。Pi Zero需要一个microSD卡作为操作系统和应用程序的存储空间；插卡槽位允许交换软件和存储器扩展为相同的尺寸。C.H.I.P.具有板载NAND闪存存储4GB，还附带有在存储器中预加载的操作系统。不过要空间更大的话，你必须使用USB（比SD卡更快的接口）和外部驱动器或存储设备。Pi Zero 提供了一个40针的连接器作为输入输出口（I/O）。然而C.H.I.P. 提供了两排40针的母头—80个全 ...继续阅读 (31)

大家还记得美国在 70 年代的能源危机吗？由于中东局势不稳，导致当时汽油价格急升，而当时日本以丰田为首的小型家用汽车开始进军美国，导致大排气量的美国市场受到严重的冲击，当时的汽车业之都底特律 (Detroit) 一蹶不振，直到今天…40 年后，由电动车带来的革命，再次来临。很多人都以为特斯拉的电动车，靠的就只是”环保概念”，又或是一大堆很炫很炫的汽车界 iPhone 概念。但是，现实的环境可能会更严竣。汽车业的生态环境虽然我们经常说这个汽车品牌生产汽车，那个汽车品牌在甚么地方设厂之类的，但从若干程度上，汽车产业的生态某程度与智能手机也是十分相似，所谓的汽车生产商很多时都只是负责组装和调校，绝大部份的配件都是采购回来的。然而，汽车产业与手机产业不同的是，它们有百多年的技术、经验、数据和传统累积，所以汽车产业的技术门槛，比手机产业要高得多，所以不可能让爱范儿自己造汽车。当然，未来就真的很难说了。汽车业界主要有几个很大的技术门槛，第一个是发动机 (Engine)，今天绝大部份的老牌汽车厂，本来都是以研发发动机起家、或是有自家的发动机的：包括被公认为汽车发明者奔驰 (Mercedes-Benz)，其前身 Daimler 本来就是造发动机公司；保持捷 (Porsche) 创始人保时捷博士，当年也为纳粹德国研发坦克发动机；而宝马 (BMW)、萨博 (Saab) 和劳斯莱 ...继续阅读 (203)

说起手机 CPU，大家公认的豪强是高通，是 MTK，是三星。业界普遍采用的芯片也不出这三种。作为华为产品标配的手机 CPU，海思 CPU 并不像它的同行们一样为人熟知，甚至还有人还残留着「海思 CPU 性能弱鸡，游戏不兼容」这样的老旧印象。但相信关注手机这一块的极客们一定对「麒麟 950 安兔兔跑分超八万」这样的新闻印象深刻。在「感恩节」这天，华为在上海园博园里，拿出了全球首款搭载麒麟 950 的新品——华为 Mate 8。麒麟 950 的性能大家有目共睹，但 Mate 8 除了这颗「国产强芯」之外，还有什么亮点呢？容纳 4000mAh 的全金属机身在每一场手机的发布会上，iPhone 手机都逃不出被比较的范围。这次华为 Mate 8 是拿 iPhone 6s Plus 的边框说事。新一代的 Mate 8 进一步缩窄边框。将之缩减到了 2.7mm。除此之外，屏幕上也打出了色域饱和度达 95%，远超 Mate 7 和 iPhone 6s Plus 的 71% 的口号。不过，iPhone 的框边框已经被国产众手机厂商拎出来秒杀无数次了，iPhone 的色域窄也是公认的事实。前面板也采用了当下流行的 2.5D 弧面玻璃，这一切都是一部旗舰手机应有的材质。尽管 Mate 8 号称为了解决 iPhone 6s 的「绷带」信号带的问题，采用陶瓷喷砂工艺，但依然避免不了两种材质之间过渡的手感差。 ...继续阅读 (29)

编者按：陈小平，小米净水器制造商云米CEO。创业前在美的电器工作14年。他说，小米净水器起源于一个“免安装”的想法，传统净水器买回家还要等厂家上门安装，小米想改变这种情况，然后一系列问题就展开了……以下是他对小米净水器的自述。雷锋网整理。净水器我们是从零开始组建团队做的，当时也不知道具体要做成什么样，但我们想把它做成一个用户买回家就能用的东西，一个让人愿意放在台面上的东西……总之在净水器领域算异类。也没想要重新定义净水器，但我们确实在做一个跟以往不一样的净水器，所以遇到的每个问题都需要新的解决方案。去查查我们的专利，一年多时间已经公开的就有130多项，其中两个是发明专利，未来还会有更多已经申请的专利浮出水面。改变传统净水器的定义传统反渗透净水器是个很“重”的产品，安装和更换滤芯都需要厂家上门服务。我们等于重新做了一个免安装的反渗透净水器，普通用户自己就能搞定一切。看起来只是把台面下复杂的管道转移到台面上整齐的塑料箱里，其实没这么简单。从技术上来说，传统净水器是一个长期承压的系统，就是说它要改造家里的水路，接管自来水的负荷。对我们来说，不承压的系统是最好的，不承压就意味着大大降低了漏水的隐患。另一个漏水隐患是由于传统净水器的管道和接头太多。所以我们搞了个“立体集成水路”，把接头统统干掉了。这件事其实很多传统企业一直想干，但他们没干成，我们干成了。他们为什么没干成，因为研发时间和资金成 ...继续阅读 (38)

译者|穆文杰（ChrisMu，邮箱821367986@qq.com，本文由ChrisMu翻译向36大数据投稿，并经由36大数据编辑发布，转载必须获得作者及本站的同意。）原文作者Ahmed El Deeb。一、小数据来自哪里？科技公司的数据科学、关联性分析以及机器学习等方面的活动大多围绕着”大数据”，这些大型数据集包含文档、 用户、 文件、 查询、 歌曲、 图片等信息，规模数以千计，数十万、 数百万、 甚至数十亿。过去十年里，处理这类型数据集的基础设施、 工具和算法发展得非常迅速，并且得到了不断改善。大多数数据科学家和机器学习从业人员就是在这样的情况下积累了经验，逐渐习惯于那些用着顺手的算法，而且在那些常见的需要权衡的问题上面拥有良好的直觉（经常需要权衡的问题包括：偏差和方差，灵活性和稳定性，手工特性提取和特征学习等等)。但小的数据集仍然时不时的出现，而且伴随的问题往往难以处理，需要一组不同的算法和不同的技能。小数据集出现在以下几种情况:企业解决方案:当您尝试为一个人员数量相对有限的企业提供解决方案，而不是为成千上万的用户提供单一的解决方案。时间序列:时间供不应求!尤其是和用户、查询指令、会话、文件等相比较。这显然取决于时间单位或采样率，但是想每次都能有效地增加采样率没那么容易，比如你得到的标定数据是日期的话，那么你每天只有一个数据点。关于以下样本的聚类模型： ...继续阅读 (63)

本文作者：Jay Kreps，linkedin公司首席工程师；文章来自于他在linkedin上的分享；原文标题：The Log: What every software engineer should know about real-time data’s unifying abstraction。文章内容非常干货，非常值得学习。文章将以四部分进行阐述，建议大家耐心看完。第一部分：Log是什么？第二部分：数据集成第三部分：日志和实时流处理第四部分：系统建设接上篇：http://www.36dsj.com/archives/6387第二部分:数据集成请让我首先解释 一下“数据集成”是什么意思，还有为什么我觉得它很重要，之后我们再来看看它和日志有什么关系。数据集成就是将数据组织起来，使得在与其有关的服务和系统中可以访问它们。“数据集成”（data integration）这个短语应该不止这么简单，但是我找不到一个更好的解释。而更常见的术语 ETL 通常只是覆盖了数据集成的一个有限子集(译注：ETL，Extraction-Transformation-Loading的缩写，即数据提取、转换和加载)——相对于关系型数据仓库。但我描述的东西很大程度上可以理解为，将ETL推广至实时系统和处理流程。你一定不会听到数据集成就兴趣盎然屏住呼吸，并且天花乱坠的想到关于大数据的概念，不过，我相信世俗的问 ...继续阅读 (143)

大家好，我是来自硅谷的董飞，应国内朋友邀请，很高兴给大家交流美国大数据工程师面试攻略。我的公开课在《美国大数据工程师面试攻略》美国Linkedin董飞，9月7日，上午10：30,已经错过直播的，也可以免费查看录播。先做一个自我介绍，本科南开后，加入了一个创业公司kuxun，做实时信息检索，后来进入百度基础架构组，搭建了Baidu App Engine的早期版本，随后去Duke大学留学，在攻读硕士期间，做跟Hadoop大数据相关的研究项目Starfish，之后在Amazon EC2部门实习，了解它们的内部架构，毕业后加入Linkedin，做广告组的架构，涉及Hadoop调优，Data Pipeline, Offline/Online, 实时系统。最新是在Coursera从事数据工程师工作。在多年工作中，除了对技术的不懈追求，也积累了大量的面试经验，从国内的一线互联网百度，阿里巴巴，奇虎，人人，到美国一线公司Facebook，Google，Linkedin，Twitter，Amazon，到热门Startup，Uber，Pinterest，Airbnb，Box，Dropbox，Snapchat，Houzz，拿到10+ offer，并且在Linkedin期间也面试过100+候选人，参与面试题制定，乐于分享并帮助很多人成功求职，实现目标。我们看一下这张硅谷地图，它坐落于美国加州，从圣何塞到旧 ...继续阅读 (82)

本文作者：Jay Kreps，linkedin公司首席工程师；文章来自于他在linkedin上的分享；原文标题：The Log: What every software engineer should know about real-time data’s unifying abstraction。文章内容非常干货，非常值得学习。文章将以四部分进行阐述，建议大家耐心看完。第一部分：Log是什么？第二部分：数据集成第三部分：日志和实时流处理第四部分：系统建设我在六年前的一个令人兴奋的时刻加入到LinkedIn公司。从那个时候开始我们就破解单一的、集中式数据库的限制，并且启动到特殊的分布式系统套件的转换。这是一件令人兴奋的事情：我们构建、部署，而且直到今天仍然在运行的分布式图形数据库、分布式搜索后端、Hadoop安装以及第一代和第二代键值数据存储。从这一切里我们体会到的最有益的事情是我们构建的许多东西的核心里都包含一个简单的理念：日志。有时候也称作预先写入日志或者提交日志或者事务日志，日志几乎在计算机产生的时候就存在，同时它还是许多分布式数据系统和实时应用结构的核心。不懂得日志，你就不可能完全懂得数据库，NoSQL存储，键值存储，复制，paxos,Hadoop,版本控制以及几乎所有的软件系统；然而大多数软件工程师对它们不是很熟悉。我愿意改变这种现状。在这篇博客文章里，我将带 ...继续阅读 (104)

原文链接：http://fernandocejas.com/2015/07/18/architecting-android-the-evolution/ Hey there! After a while (and a lot of feedback received) I decided it was a good time to get back to this topic andgive you another taste of what I consider a good approach when it comes to architecting modern mobile applications (android in this case).Before getting started, I assume thatyou already read my previous post about Architecting Android…The clean way?If not, this is a good opportunity to get in touch with it in order to have a better understanding of the story I’m going to tell you right here:Architectur ...继续阅读 (172)

原文链接：http://fernandocejas.com/2015/07/18/architecting-android-the-evolution/Architecting Android…The clean way?Over the last months and after having friendly discussions atTuentiwith colleagues like@pedro_g_sand@flipper83(by the way 2 badass of android development), I have decided that was a good time to write an article aboutarchitecting android applications.The purpose of it is to show you a little approach I had in mind in the last few months plus all the stuff I have learnt from investigating and implementing it.Getting StartedWe know that writing quality software is hard and complex:It is ...继续阅读 (154)

需要解决的问题：业务日志打太乱，没有位置和格式约束什么情况打日志，如何避免滥用，提高日志作用打日志最佳实践Dropwizard 列出的打日志原则：Be human readable.Be machine parsable.Be easy for sleepy ops folks to figure out why things are pear-shaped at 3:30AM using standard UNIXy tools like tail and grep.eg.:TRACE[2010-04-0606:42:35,271]com.example.dw.Thing:Contemplatingdoingathing.DEBUG[2010-04-0606:42:35,274]com.example.dw.Thing:Abouttodoathing.INFO[2010-04-0606:42:35,274]com.example.dw.Thing:DoingathingWARN[2010-04-0606:42:35,275]com.example.dw.Thing:DoingathingERROR[2010-04-0606:42:35,275]com.example.dw.Thing:Thismaygetugly.!java.lang.RuntimeException:ohnoe ...继续阅读 (62)