北京大学软件研究所副所长黄罡:大数据视角下的API经济

简介:
北京大学软件研究所副所长黄罡:大数据视角下的API经济

今天我来跟大家分享的是,邬院士上午讲的都是以数据集为核心的大数据的共享开放流通交易里面产生的种种弊端,但是其实我们放眼看世界,以美国为代表的数据开放流通共享交易几乎不是以数据集为核心,而是以API,也就是应用编程接口。今天我希望从大数据视角下,尤其是邬院士讲了开放流通共享领域的问题,我们看API经济是怎么回事。

API经济是针对APP的,APP是手机里的应用,移动互联网出现以后所有移动互联网的产业价值和用户价值都是以APP来体现的,但是我们也知道随着APP在iOs过100万用户以后,95%以上的应用已经变成了僵尸应用,美国由此产生新的应用分发模式API,就是用户根本不用再花心思开发一个APP在应用商店上大力推广,你要做的事情是把自己的业务做好,把你的业务以API的方式开放出去,别人会在他的应用里面,不管是微信还是Face book,不管是电商还是采购都会集成你的,只要你的业务功能有价值,你的数据就有价值。

301552478eoq.png

我们可以看这张统计图,推特是聊天的,它每天有150亿的API对它的调用不是走它的APP而是走API,谷歌也是每天100亿API调用,当然还有美国其他的。我们可以看到越来越多APP的功能其实不是通过打开应用使用的,而是通过API。当然大家要问了,为什么要把API开放出来?从大数据领域得到了什么?大家越来越多的可以看到,我的API出去以后随着用户对我的调用,我会得到用户对我业务的诉求,我可以优化,所以基本上今天不管是微软、谷歌还是Face book,他们人工智能的核心业务一个方式是开源,第二方式是API,因为它的API发出去以后用户对API所有使用,它可以得到进一步调优他的算法,这是我们的API经济。

30155318qpn3.png

第一种模式是对外提供API,第二种模式就是应用集成。大家可以看到今天用的Top应用里,微信2015年已经集成了583个第三方应用的API,包括滴滴打车、大众点评,根本不用再打开那个APP,在微信、淘宝里就可以打开。美国的亚马逊的Echo,最上面是定时,播放音乐,帮我读新闻,帮我开灯关灯,帮我调温控,Echo把家里的智能服务以及移动互联网上APP以API的方式塞到了这个音箱里面,以语音交互的方式给你,这是我们看到的第二个趋势。API很像当年的网站,应用集成很像当年的门户,自然而然我们可以看到确实有搜索引擎存在,而且这块是我个人要呼吁的,大家都在说苹果不创新了,我们国内的手机厂说今天干掉苹果明天干掉谁,大家可以看看苹果已经在2015年9月10月推iOS9,通知栏已经可以让你收到苹果自己的应用。去年8月份iOs10已经实现第三方APP应用类数据或者API的搜索,大家可以看到这是我们的截屏。在手机里搜美食就可以把美团搜出来,是美团里的数据,不是美团APP。谷歌在数据API走得较缓,苹果是成功的,谷歌去年10月份推出了手机里面Google Assistant内嵌了苹果的搜索功能。

30155359vxmn.png

API真正遇到什么问题呢,最大的问题就是数据孤岛的问题,就像今天陈部长谢司长说的,越来越多的数据是从移动设备、物联网设备产生的,这些数据不是网站可以用爬虫公开爬到的。今天上午邬院士讲了很多数据开放共享流通的问题,API经济能解决类似的问题,以应用为驱动的方式,如果我们要解决数据孤岛目前有什么样的方式。

30155434e2ue.png

据我们对国内一流大企业调研,典型的政府和央企的信息孤岛要打开要花数百万人民币,而且这在里面从数据开放流通的角度最大的问题是应用开发商成了关键角色,但这个关键角色不合理,因为在大数据里面真正的数据是产生者和运营者,跟开发商没关系。就像iOS和谷歌,后端数据不好拿,中间逻辑层重构太难,热点是我们在前面的表现层通过智能感知把数据拿出来,具体的技术我就不说了,总而言之整个这套技术目前除了斯坦福等顶级高效也就是iOs里面有一点。

30155508aaqs.png

北京大学从2003年开始做类似的研究,研究的成果,我们如果能打破APP的边界,我们可以在各个不同的APP之间跳来跳去,再也不用关心一个APP接下来要去打车要去订餐,全部可以给你打通。

30155541fm15.png

接下来是邬院士反复强调的数据的问题,今天个人数据主要是以程序化通过APP搜到平台卖给了别人,你在淘宝里的一双鞋在今日头条马上给你推,我们每个人都被边缘化甚至都被忽视掉,没有数据的人权。我们利用这套API技术做的什么,这是我们做的demo程序,你可以看到在你的手机上你有什么数据,第一你知道你的数据在哪个地方,第二你也可以知道每天在这些APP里产生了哪些数据,第三只要你授权,我们可以帮你把所有的产生的数据进行优化整合。

301556311kup.png

这样达到一个什么好处呢?我们解决了数据开放共享流通里个人的问题,第一这个数据至少每个人本身是有权利而且你确实知道这个数据在哪个地方,第二这个数据通过API的方式可以把它拿出来,当然我们不能阻止APP厂商使用,因为你跟它签了和约,但是这个数据本身是属于你,但是此前是因为APP根本不提供任何方式让你把数据拿出来,所以数据根本不能使用,这样的话用了我们这一套API的技术以后就可以使用了。最后你也可以进一步的利用加工,所有这些东西全是在你个人的手机上,永远不会上网,这样就极大保护了个人的隐私,当然这套数据人权保护合不合理,能不能成功,我不知道,我们只是从学术上提供一个可能的探讨思考。

30155652x0hm.png

我们同时也在帮政府和企业做到了燕云的DAAS平台,政府和企业信息系统里的数据全部是政府和企业的,但是今天真正要把它开放的时候往往受制于系统的开发,系统开发又说我要集成的时候又被另外一个开发商给打了,这样带来了极大的问题,燕云DAAS提供了API的方式,以APID方式把你的数据开放出去,可以做到流程可控、来源可溯,明天会有具体的介绍。

30155722r3tx.png

北京大学花了十几年时间,在这套系统软件上做了一套东西,我们希望把互联网和移动互联网以及物联网存在的各个系统里的数据,在数据拥有者授权的情况下帮他开发出来,帮他进行流通,帮他进行共享,这是一套大的生态,北京大学希望跟产学研各界和政府合作,共创中国特色的而且是领先的API经济。



本文出处:畅享网
本文来自云栖社区合作伙伴畅享网,了解相关信息可以关注vsharing.com网站。

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
1月前
|
数据采集 运维 数据挖掘
API电商接口大数据分析与数据挖掘 (商品详情店铺)
API接口、数据分析以及数据挖掘在商品详情和店铺相关的应用中,各自扮演着重要的角色。以下是关于它们各自的功能以及如何在商品详情和店铺分析中协同工作的简要说明。
|
2月前
|
数据采集 监控 算法
利用大数据和API优化电商决策:商品性能分析实践
在数据驱动的电子商务时代,大数据分析已成为企业提升运营效率、增强市场竞争力的关键工具。通过精确收集和分析商品性能数据,企业能够洞察市场趋势,实现库存优化,提升顾客满意度,并显著增加销售额。本文将探讨如何通过API收集商品数据,并将这些数据转化为对电商平台有价值的洞察。
|
3月前
|
数据采集 传感器 人工智能
大数据关键技术之电商API接口接入数据采集发展趋势
本文从数据采集场景、数据采集系统、数据采集技术方面阐述数据采集的发展趋势。 01 数据采集场景的发展趋势 作为大数据和人工智能工程的源头,数据采集的场景伴随着应用场景的发展而变化,以下是数据采集场景的发展趋势。
|
4月前
|
安全 大数据 API
elasticsearch|大数据|elasticsearch的api部分实战操作以及用户和密码的管理
elasticsearch|大数据|elasticsearch的api部分实战操作以及用户和密码的管理
57 0
|
数据采集 数据可视化 算法
电商API接口的大数据分析与挖掘技巧
随着电商行业的快速发展,电商平台上的交易数据量也越来越大。如何对这些数据进行分析和挖掘,从中获取有价值的信息,已经成为电商企业和开发者关注的重点。本文将介绍电商API接口的大数据分析与挖掘技巧。
|
3月前
|
XML JSON API
软件吞噬世界,Api快速入门到放弃
软件吞噬世界,Api快速入门到放弃
|
4月前
|
SQL 分布式计算 Hadoop
[AIGC ~大数据] 深入理解Hadoop、HDFS、Hive和Spark:Java大师的大数据研究之旅
[AIGC ~大数据] 深入理解Hadoop、HDFS、Hive和Spark:Java大师的大数据研究之旅
|
5天前
|
缓存 前端开发 API
API接口封装系列
API(Application Programming Interface)接口封装是将系统内部的功能封装成可复用的程序接口并向外部提供,以便其他系统调用和使用这些功能,通过这种方式实现系统之间的通信和协作。下面将介绍API接口封装的一些关键步骤和注意事项。
|
12天前
|
监控 前端开发 JavaScript
实战篇:商品API接口在跨平台销售中的有效运用与案例解析
随着电子商务的蓬勃发展,企业为了扩大市场覆盖面,经常需要在多个在线平台上展示和销售产品。然而,手工管理多个平台的库存、价格、商品描述等信息既耗时又容易出错。商品API接口在这一背景下显得尤为重要,它能够帮助企业在不同的销售平台之间实现商品信息的高效同步和管理。本文将通过具体的淘宝API接口使用案例,展示如何在跨平台销售中有效利用商品API接口,以及如何通过代码实现数据的统一管理。
|
24天前
|
安全 算法 API
产品经理必备知识——API接口
前言 在古代,我们的传输信息的方式有很多,比如写信、飞鸽传书,以及在战争中使用的烽烟,才有了著名的烽火戏诸侯,但这些方式传输信息的效率终究还是无法满足高速发展的社会需要。如今万物互联的时代,我通过一部手机就可以实现衣食住行的方方面面,比如:在家购物、远程控制家电、自动驾驶等等,背后都离不开我们今天要聊的API接口。

热门文章

最新文章