点金原创

大数据独角兽Palantir之核心技术探秘

  1.Palantir源起:B2B大数据和企业级Google。 Palantir(中文名帕兰提尔,源于《指环王》中可穿越时空、洞悉世间一切的水晶球Palantír)被誉为硅谷最神秘的大数据独角兽企业,短短几年内跻身百亿俱乐部,成为全球估值排名第四的初创公司。它的主要客户只在美剧和好莱坞里出现,如美国联邦调查局(FBI)、美国中央情报局(CIA)、美国国家安全局(NSA)、美国军队和各级...

论大数据的泡沫、价值与应用陷阱

  1大数据源起:对未来不确定性的恐惧。 我们所生活的世界,就像一片混沌(chaos),大数据时代,我们周围更是充斥着各种不同的理论、知识、信息和噪音,数据爆炸式增长和科技高速发展所带来的冲击,加大了未来的不确定性。当我们接收的数据和信息越多,面临的选择就越多,如若不善于过滤、挖掘和处理,对各种决策就可能会造成负面影响,当然也会放大我们对未来不确定性...

从TensorFlow看谷歌的云端人工智能战略

引子:有些朋友知道谷歌的Tensorflow是专业的深度学习库,有了它各种功能强大的深度神经网络得以快速构建实现,但估计很少朋友知道Tensorflow是可以在iOS, Android甚至树莓派(Raspberry Pi)上运行的,本文我们就来谈谈,深度学习进入移动端将意味着什么?并一窥谷歌的云端人工智能战略。设想未来你是一名警察,只需要手中android终端,摄像头照到的任何事物,包括人脸,车牌,身份证...

深度学习的“深度”价值是什么?

深度学习的核心技术是几十年前就提出的人工神经网络,如果将人工神经网络比为火箭发动机一代,那么深度学习就是火箭发动机二代,升级了训练方式(Hinton大神首创),加装了高性能计算配置(做游戏显卡起家的Nvidia居功至伟),最关键的是有了大数据燃料,这样一来,我们人类飞抵人工智能星球的能力就大大增强了。这也是为什么神经网络换马甲为深度学习之后,能获得突破性成功(图像...

大数据应用从小做起?谈微服务和大数据架构

这几年微服务成为研发设计热点,本文从应用角度谈下微服务化的大数据系统架构。Netflix公司的Adrian Cockcroft将微服务称为“细化SOA”,并认为这是一套具备开创意义的新型架构,诸如谷歌, 亚马逊, Facebook,百度,京东,携程等互联网公司都在采用微服务理念进行产品的设计、研发和部署。首先我们看看什么叫微服务,敏捷之父Martin Fowler在他的《Micro services》一文中给出了如下定...

说说敏捷大数据

为什么提出敏捷大数据,先来看看大数据应用的终极目标,我以前的文章有讲到,大数据分析的成功普及将是传统信息化的终点,换句话说信息化走向智能化之后,整个高科技相关的产业链(包括传统产业)会产生质的变化。大数据应用的终极目标是:面向过去,发现数据规律-通过描述性分析,归纳已知;面向未来,预测数据趋势-通过深度挖掘分析,预测未知;最终通过大数据分析提高对事物的理...

企业大数据应用三段论

随着云计算、物联网和开源大数据技术生态的高速发展,企业获得大数据相关基础设施技术和服务越来越容易。虽然现阶段大数据成熟应用多在互联网公司,但我们需认识到,一方面,大数据应用是非常碎片化的,这个碎片化包括业务层面和技术层面,大数据不只是谷歌,亚马逊,BAT等互联网企业,每一个行业、企业里面都有它去关注数据的痕迹:一条生产线上的实时传感器数据,车辆身上的传感数...

深度学习能否一统大数据机器学习江湖?

从历史来看,重大科学的研究往往呈螺旋形上升的过程,不可能一蹴而就,每一次基础科学研究的重大进步,一定会带来相关产业界的革命性增长。经历过“三起三落”的人工神经网络,能够在换马甲为深度学习后成功逆袭,正是机器学习领域这三十年来积累诞生的重大基础科学研究成果。现在深度学习被看作是通向真正人工智能的关键技术,被寄予厚望。2013年3月,Geoffrey Hinton和他的两位研究...

大数据技术初探

从前些年到现在所谓的大数据时代,移动互联网、物联网、云计算、人工智能、机器人、大数据等前沿信息技术领域,逐个火了一遍,但什么是大数据,大数据的技术范畴包括那些,估计很多人都是根据自己所熟悉的领域在盲人摸象。下文从DT(Data technology,数据技术)技术泛型角度来简要地介绍什么是大数据,包括那些核心技术,各领域之间的关系等:首先我们说说机器学习,机器学习(ma...