更多>>
课题组动态
更多>>
皮书作者
您现在所在的位置：首页
| 出版时间：2015年12月 |
新媒体产业在发展中也产生了海量数据，对大数据技术也有着迫切的需求。新媒体产业在使用大数据的过程中，开发出了新的发展领域，比如实时广告系统、观众兴趣挖掘、数据新闻学等。这些新的媒体领域不仅给消费者带来了更好的视听内容和消费体验，也给新媒体产业带来了更多的产值和利润。
我国新媒体产业中的三大巨头——百度、阿里巴巴、腾讯（BAT）对大数据技术的应用最多，对大数据技术发展的贡献也最大。但是，同国外的顶尖企业（如亚马逊和谷歌）相比，我们在技术上还存在一定的差距。大数据技术的不足与落后，会给我国新媒体产业带来安全上的风险，也会制约产业的发展。但是，如果能够抓住大数据发展的机遇，针对自身的需求特点开发出相应的新兴技术，则有利于我国新媒体厂商摆脱对国外软、硬件的依赖，实现技术上的独立自主。
The advance of digital information technology，not only has brought the birth and development of the new media industry，but also created a vast amounts of data. Traditional data processing technology is not very good to deal with storage and calculation of mass data，so people invented the new technology to cope with the challenges，and its name is Big Data.
Development of the new media industry also brought a lot of data，and Big Data technology is eager desired. The new media industry has found a new development area during usage of Big Data technology，includes real-time advertising system，audience interest mining，and data journalism. These new media field not only brings consumers much more media content and better consumption experience，also has brought the new media industry more output value and profit.
BAT，the big three of China’s new media industry，have most application and contribution on Big Data technology. However，compared with foreign’s top companies such as Amazon and Google，our technology is not much advanced. Lack and backward of technology will bring the new media industry security risk，and restricts the development of the industry too. On the contrary，if we can catch opportunity of big data development，develop new technology of Big Data which is based on Chinese national conditions，we will be able to get rid of the dependence of foreign hardware and software，and master the core technology by ourselves.
新媒体的产生是建立在数字信息技术发展基础之上的，而数字信息技术的发展，又催生了另一个技术领域——大数据技术。从字面意义上讲，大数据包含两个信息，一个是“数据”，一个是“大”。之所以包含“数据”这个信息，是因为数字信息技术使得任何在互联网上的通信、计算和操作都是以数字的方式进行的。之所以包含“大”这个信息，是由于互联网行业不断发展并与各个行业深度融合，使得计算机需要收集和处理的数据快速增长，某些行业领域的数据增长之快、数据量之大，已经超过了单一计算机在可接受时间内的处理能力。这使得人们不得不发展新的技术来处理这些快速增长的数据，由此业界发展出新的技术领域——大数据技术。
一 新媒体产业中大数据技术的发展
（一）大数据的概念与特点
目前对大数据比较一致的定义是：大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。IT界的“蓝色巨人”——IBM公司对大数据进行了深度剖析，总结出关于大数据的“4V”理论，即大数据的特点可以归结为以下四个词。
大量（Volume），数据量大。随着互联网和物联网的发展，越来越多的人类活动可以被数据进行定义和描述，由此带来了数据量的急剧增长，并且这种增长呈现指数增长的特征，是一种爆炸式的增长。
多样（Variety），数据格式种类多。以往的数据多是结构化的数据，便于存储和利用。而新的数据来源带来了很多的非结构化数据，比如日志、音频、视频、图片、地理信息等，这些数据的处理需要更好的处理方法和更快的计算速度。
快速（Velocity），实时处理和快速响应。快速响应是大数据提出的新要求，最具代表性的业务是搜索引擎。在海量的互联网数据中寻找到符合要求的信息，是最新的技术制高点。
价值（Value），数据包含价值。单个的数据价值较低，但是数据量大到一定程度后，就可以挖掘出非常有用的价值。例如，谷歌公司利用搜索数据成功预测了“非典”的肆虐。
什么样的数据是大数据？这里列出了度量数据大小的单位。
1Bit表示一个0或1
1Byte=8Bit
1KB=1024Bytes
1MB=1024KB=1048576Bytes
1GB=1024MB=1048576KB=1073741824Bytes
1TB=1024GB=1048576MB=1099511627776Bytes
1PB=1024TB=1048576GB=1125899906842624Bytes
1EB=1024PB=1048576TB=1152921504606846976Bytes
1ZB=1024EB=1180591620717411303424Bytes
1YB=1024ZB=1208925819614629174706176Bytes
随着数字化信息的发展，人类产生和储存的数据量呈现爆发式增长。2000年，数字存储信息只占全球数据量的25%，75%的信息存储在报纸、书籍、胶片、磁带等媒介上。到2007年，人类共存储超过300EB的数据，其中数字数据占93%。2012年，全球的数据量达到约2.8ZB，其中99%以上都是数字数据。预计，到2020年，全球数据资料的存储量将达到近40ZB（见图1）。
图1 世界数据量的增长（单位：EB）
与大数据同时诞生与发展的，是云计算（Cloud Computing）技术。云计算是指将计算任务从本地或远程服务器转移到大量的分布式计算机上，从而使计算能力也成为一种商品和资源，可以进行买卖和流通。一方面，大数据以云计算为支撑。面对海量数据，如果提取、处理和利用数据的成本超过了数据价值本身，那么有价值也相当于没价值。而云计算的强大运算能力，则有助于降低提取、处理和利用数据的成本。另一方面，大数据也在拉动云计算的发展。随着数据量的快速增长，云计算发展出公有云、私有云、混合云等形态，越来越多的企业级云计算服务正被推向市场。
艾瑞网预测，随着互联网、物联网、云计算的发展以及相关应用的日益丰富，大数据技术的未来发展前景将更为广阔。
（二）国外主要新媒体企业大数据技术的发展与应用
国外的新媒体企业有几大巨头，分别是亚马逊（Amazon）、谷歌（Google）、推特（Twitter）、脸书（Facebook）等，它们都不同程度地使用了大数据技术。但是若讨论对大数据技术发展有杰出贡献的，则亚马逊和谷歌值得称道。
1.亚马逊
在美国，亚马逊是网购第一巨头，eBay和其他电商所占的比例远小于亚马逊。亚马逊最初以销售图书和音像制品起家，但现在的亚马逊已经成为一家拥有海量数据并提供云计算服务的企业。在大数据技术快速发展的今天，亚马逊已经成为数据和计算的领跑者，已经将传统的IT巨头（如微软、IBM等）甩下一大截距离。总的来说，亚马逊的优势主要体现在以下三个方面。
（1）用户信息的收集
