大数据技术与应用

作者简介

陈明 2007年毕业于长春理工大学光信息科学与技术专业，获学士学位；2015年毕业于吉林大学软件工程专业，获硕士学位。2007年至今就职于国网吉林信通公司，从事信息建设、信息运行、信息调度、数据管理、数据分析与挖掘等工作，取得高级工程师资格。 张凯 毕业于东北电力大学，大学本科学历。现任国网吉林信通公司信息工程与数据中心副主任，高级工程师。从事信息专业工作14年，有丰富的信息系统建设管理工作经验；参与国网吉林电力SG186、SG-ERP等信息化项目建设工作。 张丁文 毕业于吉林大学计算机科学与技术学院，硕士研究生。2015年7月至今，在国网吉林省电力有限公司信息通信公司工作；2017年7月至2018年10月，抽调至国网信息化项目管理中心，负责信息化项目建设，参与《企业标准信息化项目概要设计内容深度规定》的制定。2017年12月取得电力工程技术工程师资格。

内容简介

第二章 大数据与云计算、物联网 第一节 云计算 云计算（cloud computing）是目前 IT 行业最为热门的话题之一，谷歌、亚马逊、雅虎等互联网服务商，IBM、微软等 IT 厂商纷纷提出了自己的云计算战略，云计算平台极低的成本成为业界关注的焦点。云计算与大数据之间相辅相成、相得益彰。大数据挖掘处理需要云计算作为 平台，而大数据中蕴含的价值和规律能够让云计算更好地与行业应用结合并发挥更大的作用。 一、云计算概述 “云”实质上就是网络，从狭义上讲，云计算就是一种提供资源的网络，使用者可以随时获取“云”上的资源，按需求量使用，并且可以看成是可无限扩展的，只需按使用量付费即可，“云”就像自来水厂一样，人们可以随时接水，并且不限量，按照自家的用水量付费给自来水厂即可。从广义上讲，云计算是与信息技术、软件、互联网相关的一种服务，这种计算资源共享池叫作“云”，云计算把许多计算资源集合起来，通过软件实现自动化管理，只需要很少的人参与就能实现资源的快速提供。也就是说，计算能力作为一种商品，可以在互联网上流通，就像水、电、煤气一样，可以方便地取用，且价格低廉。 总之，云计算不是一种全新的网络技术，而是一种全新的网络应用概念，云计算的核心概念就是以互联网为中心，在网站上提供快速且安全的云计算服务与数据存储服务，让每一个使用互联网的人都可以使用网络中的庞大计算资源与数据中心。 云计算是继互联网、计算机之后信息时代的又一次革新，云计算是信息时代的一次大飞跃，未来的时代可能是云计算的时代，虽然目前有关云计算的定义有很多，但概括来说，云计算的基本含义是一致的，即云计算具有很强的可扩展性和需要性，可以为用户提供一种全新的体验，云计算的核心是可以将很多的计算机资源协调起来，使用户通过网络就可以取到无限的资源，同时获取的资源不受时间和空间的限制。 云计算，是一种基于互联网的超级计算模式，在远程的数据中心里，成千上万台计算机和服务器连接成一片计算机云。因此，云计算甚至可以让人们体验每秒 10 万亿次的运算能力，拥有如此强大的计算能力甚至可以模拟核爆炸、预测气候变化和市场发展趋势。用户通过计算机、笔记本电脑、智能手机等方式接入数据中心，按自身需求进行运算。 本书回应时代热点，从关键技术与实际应用两个方面对大数据做了系统的介绍与深入的分析。尊重理论，更重视应用，既维持了大数据相关信息技术本身应有的理论性和系统性，又具有较强的实用性和可操作性。