《大数据、小数据、无数据:网络世界的数据学术》一 第1章 挑战 1.1 引言

本文涉及的产品
云原生大数据计算服务 MaxCompute,5000CU*H 100GB 3个月
云原生大数据计算服务MaxCompute,500CU*H 100GB 3个月
简介: 本节书摘来自华章出版社《大数据、小数据、无数据:网络世界的数据学术》一 书中的第1章,第1.1节,作者:[美] 克莉丝汀L. 伯格曼(Christine L. Borgman),更多章节内容可以访问云栖社区“华章计算机”公众号查看。

第1章

挑  战
数据价值因运用而生。
─《比特的力量》(Bits of Power),美国国家研究委员会

1.1 引言

1963年,德里克·德索拉·普赖斯(Derek de Solla Price)因提出“小科学”和“大科学”的概念而闻名。最近,温伯格(Weinberg 1961)提出大科学一词强调体现社会雄心壮志的巨大投入。他认为20世纪的科学里程碑包括巨型火箭、高能量加速器和高通量研究反应堆,它们堪比埃及金字塔、凡尔赛宫和巴黎圣母院,是“我们这一时代的象征”。我们的时代即人造卫星的时代,也是将大量资金投入科学事业的时代。普赖斯和温伯格都对大科学的发展历程提出了疑问,普赖斯质疑大科学和小科学的相对价值大小,温伯格质疑大科学是否值得如此巨额的投入,以及其是否在总体上损害了科学。
与50年前的“大科学”相比,“大数据”有过之而无不及,其出现在《科学》《自然》《经济学人》和《连线》杂志的封面,并成为《华尔街日报》《纽约时报》以及许多其他主流与非主流出版物的头版。正如大科学旨在发现宇宙奥秘一样,大数据则有望揭示日常比特流中埋藏的宝藏。大数据是现代商业的“石油”(Mayer-Schonberger and Cukier 2013)、相互合作的黏合剂(Borgman 2007)和学者的思想碰撞之源(Edwards et al. 2011;Edwards 2010)。
然而,数据不能像石油一样流动,像胶水一样黏结,像火柴一样擦出火花。数据价值因运用而生,由此产生了《比特的力量》这一报告(National Research Council 1997)。“何为数据”是个尚未阐明的问题,在该问题上达成的唯一共识是单一定义无法清楚刻画数据的定义。数据价值具有多样性,其可能直到数据采集、监护或丢失很久后才产生,同时也因地、因时、因具体情景而具有很大的不同。正确数据通常比大量数据更具有优势。虽然大数据十分风靡,但一些小数据也可能具有像大数据一样的价值。无数据的现象也十分普遍,原因可能是相关数据不存在,或相关数据存在但找不到,或专有控制权、禁令、技术壁垒、缺乏监护导致的数据等级退化等,甚至仅仅由于数据拥有者不能或不愿共享,使得数据虽存在但不能使用。
数据正以数字和物理形态快速增长。大数据使大规模条件下的新问题具有可能性和可考虑性。学者们首次可以提出全样本数据集条件下的问题(Edwards et al. 2013;Mayer Schonberger and Cukier 2013;Schroeder 2014)。但是,与已经存在了几个世纪的物理数据相比,数字数据依旧相当脆弱。不像纸、莎草纸或者水彩画那样,数字数据只有在其诞生的技术设备环境中才能进行解读。随着软硬件的迅速发展,数据记录只有迁移到新版本才能保持可读性。数字记录还需要文档说明,其中不仅要包括电子表行列说明,还要包括数据获取流程说明。同理,标本、幻灯片和样本只有在说明文档的辅助下,才可能具有可读性。除非我们能为了数据将来的运用而进行数据监护的大量投资,否则大部分数据都会退化。
数据的强大性与脆弱性两个特点结合起来使其成为学术交流中极具魅力的研究课题。孤立的数据没有任何价值和意义。数据可能成为资产或债务,甚至既是资产又是债务。数据存在于知识基础设施中,即人、生产实践、技术、组织机构、物质对象及其相互关系构成的生态圈。其所有组成成分随利益相关者、技术、政策和权利的变化而不断变动。知识基础设施不仅对今天和明天的学者至关重要,对那些运用其创造的知识的人同样十分重要。

相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析,通过分析能得到用户群体年龄分布,性别分布,地理位置分布,以及热门话题的热度。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
1月前
|
存储 分布式计算 数据挖掘
数据架构 ODPS 是什么?
数据架构 ODPS 是什么?
307 7
|
1月前
|
存储 分布式计算 大数据
大数据 优化数据读取
【11月更文挑战第4天】
47 2
|
26天前
|
机器学习/深度学习 存储 大数据
在大数据时代,高维数据处理成为难题,主成分分析(PCA)作为一种有效的数据降维技术,通过线性变换将数据投影到新的坐标系
在大数据时代,高维数据处理成为难题,主成分分析(PCA)作为一种有效的数据降维技术,通过线性变换将数据投影到新的坐标系,保留最大方差信息,实现数据压缩、去噪及可视化。本文详解PCA原理、步骤及其Python实现,探讨其在图像压缩、特征提取等领域的应用,并指出使用时的注意事项,旨在帮助读者掌握这一强大工具。
63 4
|
1月前
|
存储 大数据 数据管理
大数据分区简化数据维护
大数据分区简化数据维护
24 4
|
1月前
|
存储 大数据 定位技术
大数据 数据索引技术
【10月更文挑战第26天】
58 3
|
1月前
|
存储 大数据 OLAP
大数据数据分区技术
【10月更文挑战第26天】
68 2
|
1月前
|
消息中间件 分布式计算 大数据
数据为王:大数据处理与分析技术在企业决策中的力量
【10月更文挑战第29天】在信息爆炸的时代,大数据处理与分析技术为企业提供了前所未有的洞察力和决策支持。本文探讨了大数据技术在企业决策中的重要性和实际应用,包括数据的力量、实时分析、数据驱动的决策以及数据安全与隐私保护。通过这些技术,企业能够从海量数据中提取有价值的信息,预测市场趋势,优化业务流程,从而在竞争中占据优势。
114 2
|
7天前
|
SQL 安全 网络安全
网络安全与信息安全:知识分享####
【10月更文挑战第21天】 随着数字化时代的快速发展,网络安全和信息安全已成为个人和企业不可忽视的关键问题。本文将探讨网络安全漏洞、加密技术以及安全意识的重要性,并提供一些实用的建议,帮助读者提高自身的网络安全防护能力。 ####
45 17
|
17天前
|
存储 SQL 安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
随着互联网的普及,网络安全问题日益突出。本文将介绍网络安全的重要性,分析常见的网络安全漏洞及其危害,探讨加密技术在保障网络安全中的作用,并强调提高安全意识的必要性。通过本文的学习,读者将了解网络安全的基本概念和应对策略,提升个人和组织的网络安全防护能力。
|
18天前
|
SQL 安全 网络安全
网络安全与信息安全:关于网络安全漏洞、加密技术、安全意识等方面的知识分享
随着互联网的普及,网络安全问题日益突出。本文将从网络安全漏洞、加密技术和安全意识三个方面进行探讨,旨在提高读者对网络安全的认识和防范能力。通过分析常见的网络安全漏洞,介绍加密技术的基本原理和应用,以及强调安全意识的重要性,帮助读者更好地保护自己的网络信息安全。
40 10