-
李德毅院士：再大的数据也能绕过那道弯
产生摆脱了传统的胖配置带来的系统升级开柙，更加简洁、更加灵活多样、个性化，手机、游戏机、数码相机、电视机差别细微，出现更多iCloud产品，界面人性化个性化，可成为大数据挖掘的终端。挖掘员支撑各种各样的大...文章 2017-05-02 1452浏览量 -
UC浏览器客户端的数据监控及应用
芦炎：在UC工作多年一直专注浏览器开发的方向，曾经开发过多个操作系统平台的UC浏览器，...大数据的数据监控——数据分析——大数据挖掘。PPT下载地址：http://club.alibabatech.org/resource_detail.htm?topicId=163文章 2015-12-13 7786浏览量 -
关于日志记录的一些感想
ERROR 系统出现了异常情况的时候时候 FATAL 说实话我没有用过，我都用ERROR代替了。日志的格式和分类 统一定义日志文件的名称，日志内容的格式，可以极大的方便后续日志的收集和解析工作。大的指导原则是： INFO 及...文章 2016-05-06 2983浏览量 -
对系统故障处理的思考
上面写的只是日常故障的基本处理思路和影响sql性能的一些可能点，随着系统运行的时间加长，还会有其它的问题出现，还会挖掘更多的隐患，只有那样才能触进系统更加健康良好的运行。本文转自 149banzhang 51CTO博客，...文章 2017-11-14 1013浏览量 -
关于人工智能在数据质量管理中的应用
于是出现了数据质量问题，数据质量问题又分解为技术问题和数据问题，技术问题当然是追究系统建设的原因了，当然也无法追究，毕竟上线那么多年了，数据问题要追究业务部门录入人员和使用人员的责任，就涉及到数据认责...文章 2021-11-01 131浏览量 -
异地多活没那么难
尤其是异地多机房这种部署，各种各样的异常都可能出现，当我们只考虑存储系统本身的同步功能时，就会发现无法做到真正的异地多活。解决的方案就是拓开思路，避免只使用存储系统的同步功能，可以将多种手段配合存储...文章 2017-07-03 5612浏览量 -
数据库产品如何选型
又或者如果我们有这样一个场景：某交易系统，并发量很大，对于数据一致性要求很高，业务逻辑也并不简单，怎么办？Oracle可以为我们提供很好的数据保护，面对复杂逻辑的时候也能有最好的性能，但在扩展的时候会面临...文章 2017-07-03 3640浏览量 -
异地多活设计辣么难？其实是你想多了！
尤其是异地多机房这种部署，各种各样的异常都可能出现，当我们只考虑存储系统本身的同步功能时，就会发现无法做到真正的异地多活。解决的方案就是拓开思路，避免只使用存储系统的同步功能，可以将多种手段配合存储...文章 2016-07-15 33658浏览量 -
大型网站架构演变
当然，其中还有很多的技术也未在此提及，像数据库集群、数据挖掘、搜索等，但在真实的演变过程中还会借助像提升硬件配置、网络环境、改造操作系统、CDN镜像等来支撑更大的流量，因此在真实的发展过程中还会有很多的...文章 2016-05-12 2063浏览量 -
大型网站架构演变和知识体系
当然，其中还有很多的技术也未在此提及，像数据库集群、数据挖掘、搜索等，但在真实的演变过程中还会借助像提升硬件配置、网络环境、改造操作系统、CDN镜像等来支撑更大的流量，因此在真实的发展过程中还会有很多的...文章 2017-11-10 1428浏览量 -
大型网站架构演变和知识体系
当然，其中还有很多的技术也未在此提及，像数据库集群、数据挖掘、搜索等，但在真实的演变过程中还会借助像提升硬件配置、网络环境、改造操作系统、CDN镜像等来支撑更大的流量，因此在真实的发展过程中还会有很多的...文章 2017-11-09 1253浏览量 -
走近华佗，解析自动化故障处理系统背后的秘密
MaxCompute：阿里云数加-大数据计算服务，华佗用MaxCompute进行大规模系统和故障的数据挖掘，用以提高故障检测准确率和预测故障的发生。阿里云数加-大数据计算服务MaxCompute产品地址：...文章 2016-12-18 4972浏览量 -
大华许焰：视频云让数据价值视频能力发挥更完整
我们希望图像云识别帮助用户解决大规模图像计算能力，我们希望开放大数据能力，帮助大家解决行业上大数据挖掘的能力，我们希望提供这样一朵云让我们用户让我们上层用户变得更加简单，数据价值视频能力可以发挥更加...文章 2017-09-06 2707浏览量 -
【杭州云栖】阿里云高级技术专家刘廷伟：全球CDN服务...
当用户访问到达边缘节点，从边缘节点上获取对应的直播、点播、下载、动态、实时音视频等内容，这是缓存系统在工作，再之后就是缓存节点之间、节点到用户、节点到源站之间的数据传输，这属于链路质量系统的工作。...文章 2018-09-21 4222浏览量 -
MaxCompute，基于Serverless的高可靠大数据服务
如果自行搭建大数据系统，那么运维工作将会贯穿始终的，而对于运维同学而言，也需要时时刻刻待命，以防系统出现问题。但是，如果回顾上述的步骤，真正能够产生业务价值就是第四步的编写查询和进行实际的计算，但是...文章 2019-02-17 2670浏览量 -
大数据是新时期打假利器
海量大数据挖掘，将使得假冒伪劣无处遁形。可以说，这是目前国际反假联盟都无法做到的。当IACC了解大数据是反假新式武器，是反假新趋势时，说不定如此对待阿里，肠子都悔青了。打假，是融入企业的道德血液的，特别是...文章 2017-07-03 1642浏览量 -
高并发，我把握不住啊！
数据库、缓存、依赖的第三方、负载均衡、交换机带宽等等都是系统扩展时需要考虑的因素。我们要知 道系统并发到了某一个量级之后&xff0c;哪一个因素会成为我们的瓶颈点&xff0c;从而针对性地进行扩展。高并发架构演进谁...文章 2021-12-23 83浏览量 -
会议|2017VLDB 参会总结&论文鉴赏
还有大量的大数据处理、图数据、空间数据、文本及半结构化数据、流数据、数据挖掘和分析、众包、社交网络分析、可视化等方面的内容。可以说，凡是和数据存储和处理相关的热点内容，本次会议都涵盖了。2.在学术界，两...文章 2018-01-04 2729浏览量 -
饿了么分布式服务治理及优化经验
是否可以从这些数据里面挖掘出一些东西，比如这种超时的配置，是可以基于它历史的超时配置、所有请求的响应时间去做的。这件事情正在进行中，但落地有点麻烦，比如说我们请求大概每天有三千万的调用量，你只有很小的...文章 2017-11-15 941浏览量 -
数据运营时代，如何基于AnalyticDB构建企业实时数仓？
第三个趋势就是Data Lake的分析与挖掘，在未来云上的数据分析一定不是All in One的，数据仓库一定不是终点，其他的大数据分析平台也一定不是终点。未来云上的数据可能是散落在各个地方的，一定是用最廉价、最高效的...文章 2018-06-20 4349浏览量 -
蚂蚁变大象：浅谈常规网站是如何从小变大的
这种模式既是在存储逻辑和数据系统前，增加一个叫做Message Queue（消息队列，简称MQ）的东东，前端业务逻辑将数据直接提交到MQ，MQ将数据做排队等操作，各个存储系统订阅自己想要的数据，然后让MQ推送或自己拉取...文章 2017-11-07 1383浏览量 -
前端数据可视化入门指南
它综合了图形学、数据挖掘和人机交互等技术，以可视交互界面为通道，将人感知和认知能力以可视的方式融入数据处理过程，形成人脑智能和机器智能优势互补和相互提升，建立螺旋式信息交流与知识提炼途径，完成有效的...文章 2019-07-31 4617浏览量 -
文章个性化推荐靠不靠谱？万字长文详解AI内容分发的...
Netflix是一家老牌的在线影片租赁网站，举办大赛的目的旨在解决电影评分预测问题的机器学习和数据挖掘问题。主办方为此下了血本，宣称对于那些能够将Netflix的推荐系统 Cinematch 的准确率提升 10%的个人或团队，...文章 2017-08-01 1398浏览量 -
快问快答|助教带你学习数据科学（附答疑视频领取）
A:我看数据科学相关的岗位有，比如：数据分析，数据挖掘，机器学习，自然语言处理，计算机视觉，深度学习工程师等等，还有推荐算法、搜索算法。我觉得咱们的培养目标和数据挖掘、机器学习这两个岗位的要求更贴近。...文章 2017-11-09 2478浏览量 -
你和阿里资深架构师之间，差的不仅仅是年龄（进阶必看...
数据挖掘，mahout 网络安全知识 什么是XSS XSS的防御 什么是CSRF 什么是注入攻击 SQL注入、XML注入、CRLF注入 什么是文件上传漏洞 加密与解密 MD5，SHA1、DES、AES、RSA、DSA 什么是DOS攻击和DDOS攻击 memcached为...文章 2018-11-21 2579浏览量 -
如何用Python做舆情时间序列可视化？
下面我们用情感的时间序列可视化功能，直观查看这些异常点出现在什么时间，以及它们的数值究竟有多低。我们需要使用ggplot绘图工具包。这个工具包原本只在R语言中提供，让其他数据分析工具的用户羡慕得流口水。幸好...文章 2017-07-06 1626浏览量 -
ElasticSearch学习笔记之原理介绍
当segment从文件系统缓存同步到磁盘时发生了错误怎么办？数据会不会丢失？由于Elasticsearch 在把数据写入到内存 buffer 的同时，其实还另外记录了一个 translog日志，如果在这期间故障发生时，Elasticsearch会从...文章 2018-08-23 3702浏览量 -
Oracle坏块问题处理 Oracle坏块修复 Oracle坏块怎么办
同样，如果存储子系统出现异常，数据块损坏也就随之出现了。2.2 操作系统BUG 由于Oracle进程对数据块的读写，都是以操作系统内核调用（system call）的方式完成的，如果操作系统在内核调用存在问题，必然导致Oracle...文章 2017-09-15 3219浏览量 -
解密Airbnb的定价算法
事实上，当工具能够挖掘到前所未有的历史数据的时候，它的价格提示有所改善，但算法本身并没有变得更好。去年夏天，我们开始了一个项目，以解决这两个问题。在动态定价方面，我们的目标是为每个房主，针对他们的房子...文章 2017-05-02 1205浏览量 -
【双11背后的技术】万亿交易量级下的秒级监控
阿里的监控规模早已达到了千万量级的监控项，PB级的监控数据，亿级的报警通知，基于数据挖掘、机器学习等技术的智能化监控将会越来越重要。阿里全球运行指挥中心（GOC）基于历史监控数据，通过异常检测、异常标注、...文章 2017-01-12 5699浏览量
