标签:云计算

03月31日

说说大数据智能

上周,南京大学开设了国内第一家人工智能学院,机器学习大牛周志华领衔院长,可谓实至名归。最近几年,以大数据和人工智能为代表的前沿信息技术,备受各界关注,相关领域的风投和创新、创业高烧不退,学术界大牛们纷纷下海,大数据深度学习研究和应用也在逐步落地,就连国务院的支持政策也是一个接一个。还有Facebook扎克伯格和Tesla埃隆马斯克为代表的大佬们就AI威胁站队互掐,Al...

12月13日

Docker 核心技术与实现原理

提到虚拟化技术,我们首先想到的一定是 Docker,经过四年的快速发展 Docker 已经成为了很多公司的标配,也不再是一个只能在开发阶段使用的玩具了。作为在生产环境中广泛应用的产品,Docker 有着非常成熟的社区以及大量的使用者,代码库中的内容也变得非常庞大。 同样,由于项目的发展、功能的拆分以及各种奇怪的改名 PR,让我们再次理解 Docker 的的整体架构变得更加困难。 虽然...

10月09日

为什么Docker适合初创公司

原文:Why Docker makes sense for startups 作者:Carlos Vega 翻译:Vincent 译者注:以Docker为代表的容器技术已经持续成为话题好几年了,那么对于创业型公司来说,刚起步时有必要采用Docker吗?作者在本文给出了肯定的理由。以下为译文。 Docker正在渐渐成为开发和运行容器应用程序的标准。 很久以前,这一技术可能只对系统管理员和PaaS(平台作为服务)才有实际意义。但...

07月09日

2017大数据版图:大数据、AI与云计算的整合

从2013开始制作大数据版图的Matt Turck刚刚发布了最新的2017年大数据版图,我们一起来看看在这个领域有哪些最新趋势和玩家的分布情况。 说到最近几年最热门的技术流行语,少不了云计算、大数据、人工智能、物联网等热词。不过,尽管人人(至少是企业界)言必称大数据,但是其在企业的采用周期要远远滞后于炒作周期。所以大数据从新奇酷的技术变成核心系统,从炒作到产品部署往往需...

06月18日

敏捷大数据方法论

“Between 70% to 80% of business intelligence projects fail”- Gartner, Feb. 2011  前段时间有报道称,有学者质疑“大数据”理论,也有硅谷公司负责人质疑大数据应用的效果。结合2011年Gartner关于BI(Business Intelligence)应用70%-80%都失败的一个调查结论(这里的fail是夸张的说法,更确切地讲应该是没有达到预期效果),本文就来谈谈为什么会出现这样的问题,大数据应用落地的...

06月09日

小米云深度学习平台的架构设计与实现

深度学习服务介绍 机器学习与人工智能,相信大家已经耳熟能详,随着大规模标记数据的积累、神经网络算法的成熟以及高性能通用GPU的推广,深度学习逐渐成为计算机专家以及大数据科学家的研究重点。近年来,无论是图像的分类、识别和检测,还是语音生成、自然语言处理,甚至是AI下围棋或者打游戏都基于深度学习有了很大的突破。而随着TensorFlow、Caffe等开源框架的发展,深度学习的...

04月21日

2017大数据版图

说到最近几年最热门的技术流行语,少不了云计算、大数据、人工智能、物联网等热词。不过,尽管人人(至少是企业界)言必称大数据,但是其在企业的采用周期要远远滞后于炒作周期。所以大数据从新奇酷的技术变成核心系统,从炒作到产品部署往往需要几年的时间。从去年开始,大家越来越感觉到这项技术已经在某种程度上陷入了停滞。不过好消息是,2017年大数据开始进入部署阶段,大数据...

02月16日

软件工业4.0:企业应用如何快速跨向容器时代

摘要: 云计算解决了基础资源层的弹性伸缩,却没有解决 PaaS层应用随基础资源层弹性伸缩而带来的批量、快速部署问题。于是容器应运而生。容器是 Container,Container另一个意思是集装箱,其实容器的思想就是要变成软件交付 ... 云计算的发展脉络 云计算整个发展过程,用一句话来形容,就是“分久必合,合久必分”。 容器的诞生 云计算解决了基础资源层的弹性伸...

02月07日

魅族大数据上云之路

背景介绍以及总体规划 首先我先介绍一下魅族大数据上云的背景,即我们为什么要上云? 在开始之前我们默认今天参与直播的各位同学对 Hadoop相关技术和Docker都有一定的了解,另外以下提到Hadoop是泛指目前魅族大数据使用的Hadoop生态圈技术,资源除特别说明则泛指存储资源、计算资源和网络资源的总和。 我们先来看一下魅族大数据在没有上云的时候所遇到的主要问题有以下几...

02月03日

云计算时代的深度学习训练

文 | 林亦宁 云计算时代,数据量和数据维度急剧增加,对深度学习训练造成越来越大的压力,来自七牛云的技术专家林亦宁在 OSC 年终盛典上带来了关于深度学习训练的演讲,将就大量分布式集群下,如何高效、可靠地构建深度学习训练计算任务进行了干货分享。以下是他的演讲内容。 云计算和深度学习这两个东西很火,它们只有紧密地联系在一起才能发挥出各自最大的优势。 在与客户...

06月27日

深度点评亚马逊、微软、谷歌、IBM 等 6 大机器学习云

微软、Databricks、谷歌、惠普企业和 IBM 都为解决许多机器学习问题提供了工具。本文将简要分析这6种商业机器学习解决方案的特点。 AWS:替你选择模型 亚马逊试图让机器学习能够为普通人所利用。亚马逊希望的是,分析师只需要理解那些被解决的问题本身,而不需要理解数据科学和机器学习算法。 总的来说,要使用亚马逊机器学习,你首先要把你的数据整理为 CSV 格式、上传到亚...

06月11日

我所知道的云计算

云世界里的技术日新月异,新名词一个接着一个让人应接不暇,从虚拟化开始,VMware、HyperV、KVM,到云管理平台VSphere、SystemCenter、OpenStack,再到容器领域的Docker、Kubernetes、Mesos、Swarm,资源管理调度的Yarn、Mesos和今天的微服务Micro Service。这些东东到底是干嘛的?能解决什么问题?它们之间有木有关联性?作为多年来运营商IT的一名架构师,笔者试着从自己的角度解读下...

06月02日

Docker容器技术正掀起云计算革命

从 2008 年开始进入公众视野,到亚马逊与微软于近期获得 1 亿美元的美国联邦管理局云计算合同,云计算整整走过了 7 年。7 年间,以第一代云计算技术为基础的移动计算、社交网络、大数据等新信息技术在全球商业领域掀起了一场新商业运动,这场商业运动创造出以消费者和用户为核心的个性化商业模式。 从去年开始席卷云计算领域的 Docker 技术风潮,恰恰就是推动企业走近消费者和用户...

05月03日

从架构看大数据和云计算的关系

当说到大数据和云计算,乃至超级计算的关系时,很多专家都给出类似的科普级的观点:大数据是大菜,云计算是大锅,炒大菜当然要用大锅,有大锅当然能炒大菜。 比如,当我质疑新闻稿中说“天河一号”用于了大数据处理的说法时,闵应骅前辈给出了如下科普级的解释:大数据需要高速度的计算机。这个解释当然有道理,却还是解答不了我的疑问。我的疑问实际是:巨型机“天河一号”在架构...

05月03日

大数据深度解构与思考

在写这篇文章之前,我发现身边很多IT人对于这些热门的新技术、新趋势往往趋之若鹜却又很难说的透彻,如果你问他大数据和你有什么关系?估计很少能说出一二三来。究其原因,一是因为大家对新技术有着相同的原始渴求,至少知其然在聊天时不会显得很“土鳖”;二是在工作和生活环境中真正能参与实践大数据的案例实在太少了,所以大家没有必要花时间去知其所以然。 我希望有些不一样,...

02月24日

大数据能走多远?

大数据很火,但很明显炒作过热,至少现阶段看来是这样。一帮媒体人炒作起来的概念,有其局限性,很多人抱着个统计表就满口大数据,实在是不严谨。大数据的本质是通过数据分析获得有价值信息的能力,大数据也好,小数据也好,怎么通过数据获得有价值的信息,获得洞察力才是关键。而且大数据这个词本身只是陈述了一种状态,数据量很大而已,要获取有价值的信息,就需要对大数据进行分析...

10月17日

董飞:硅谷大数据的过去与未来

董飞,Coursera数据工程师。曾先后在创业公司酷迅,百度基础架构组,Amazon 云计算部门,LinkedIn担任高级工程师,负责垂直搜索,百度云计算平台研发和广告系统的架构。董飞本科毕业于南开大学,硕士毕业于杜克大学计算机系。他在知乎上分享过多个引起强烈反响的问答,其中包括 《哪些硅谷创业公司能给拜访者留下深刻印象》、 《美国大数据工程师面试攻略》、 《Coursera 上有哪些课程...

09月23日

天津大爆炸,说说大数据

天津大爆炸,说说大数据和前沿信息技术在現代社会管理中的重要性!要是瑞海物流的数据库和系统监控视频做了云端同步存储,消防部队冲进去之前就有一手信息,知道燃烧物成份和大概过火程度;要是消防局有历史救援数据库和国外专业数据的整合并加以分析提供决策支持,就不会不确认燃烧物成份之前冒然用水浇电石;要是安监局有大型危化品仓库的物联网系统实时釆集温度,气体,浓度等数据...