• 开源大数据的过去、现在及未来

    我们要输入一个查询的命令,然后把这个命令进行处理,把输出的数据放到查询环节当中以便用户随时查询,这就需要我们对数据进行预处理,然后把预处理数据放到存储器当中,然后再送到查询处理器当中以便查询。...
    文章 2017-07-05 1220浏览量
  • 从小数据分析到大数据平台,这十几年来大数据开源技术...

    我们要输入一个查询的命令,然后把这个命令进行处理,把输出的数据放到查询环节当中以便用户随时查询,这就需要我们对数据进行预处理,然后把预处理数据放到存储器当中,然后再送到查询处理器当中以便查询。...
    文章 2017-07-05 1183浏览量
  • 【云服务月刊】2018年第4期:确认过眼神?...

    解决建议:499错误是nginx的自定义报错码,也就是CDN抛出的错误码,该错误出现的场景是客户端和服务器建立连接之后,在服务器处理过程中,客户端单方面主动断开了此次连接,所以日志里面就会记录此次的499。...
    文章 2018-05-08 4919浏览量
  • 关于问题查询的见解

    怎么去排查问题?正所谓工欲善其事,必先利其器,针对不同的软件环境所需要的工具也不尽相同。在出现故障时怎么才能保持一个清醒的头脑也至关重要,不过这也来源于自信,来源于平时的积累。从工作到现在,笔者维护了...
    文章 2016-04-24 1354浏览量
  • 互联网 Java 工程师进阶知识完全扫盲

    有几百万消息持续积压几小时,说说怎么解决?如果让你写一个消息队列,该如何进行架构设计啊?说一下你的思路。搜索引擎 es 的分布式架构原理能说一下么(es 是如何实现分布式的啊)?es 写入数据的工作原理是什么啊...
    文章 2018-12-07 2231浏览量
  • Mybatis原理分析一 从JDBC到Mybaits

    假如前面可以判断没有问题,那么假如判断的结果是true,那么就需要输出的标签里面的SQL片段,但是怎么解决在标签里面使用变量名称的问题呢?这里我们需要使用一种有别于SQL的语法来嵌入变量(比如使用#变量名#)。...
    文章 2017-06-29 750浏览量
  • Hive动态分区导致的Jobtracker Hang

    怎么解决呢?利用distributeby dt把相同的dt排列到一起再进行filesink就不会造成大量的小文件产生了. update:虽然Hive0.13(https://issues.apache.org/jira/browse/HIVE-6455)提供了参数来解决这个问题,但是又...
    文章 2017-11-15 1020浏览量
  • 负载均衡故障排错指南(5)

    出现问题的是一直在用的应用还是新上线的应用?在问题出现之前一段时间,网络或应用是否进行过调整?什么类型的应用出了问题?对应的VIP地址是什么?可能的话,判断可能出问题的功能模块。确定问题发生的频度,是...
    文章 2017-11-23 1201浏览量
  • 大数据小视角4:小议Lambda 与 Kappa 架构,不可变...

    (也就是对于业务场景是挑剔的,我想也没有一种架构是解决问题的银弹,之间的取舍需要我们开发人员进行完整的评估~)而Spark能够通过一个计算框架同时解决处理计算与流计算的问题,是很值得开发与运维人员所关注...
    文章 2018-08-08 2534浏览量
  • MaxCompute问答整理之2020-02月

    问题六、使用MaxCompute SQLTask执行cost sql sql命令时报错ODPS-0130161:[1,1]Parse exception-invalid token 'cost'怎么解决呢?需要使用Java SDK中的SQLCostTask接口来实现单条SQL费用的查询。接口使用方式可以...
    文章 2020-03-06 607浏览量
  • RDS for MySQL CPU 性能问题分析

    反馈的问题查询所涉及的表数据量很少,怎么会导致实例 CPU 使用率 100%?2.4 疑问四 RDS 实例 CPU 使用率 100%是否和实例所在物理机负载有关系?3.后记 本文供《云吞铺子》使用,在后续的文章中我们会分享下 RDS for...
    文章 2019-05-16 1667浏览量
  • JPA2.1 中三个提升应用性能的新功能

    这一问题被称作 n+1 查询问题,无论我们使用的是 MySQL、SqlServer 还是其他数据库,都容易出现此类问题。因此在生产环境中,随着数据量不断增大,代码的性能就越差。我们可以通过多种方法,用一次查询获取所有要求...
    文章 2016-01-06 6600浏览量
  • ElasticSearch架构反向思路

    分布式系统,只要涉及到数据更新,必然存在数据不一致问题怎么解决。由于索引本身原因,一旦出现Sharding,就很难做联合的查询,这个应该不能实现的,至少说不可能很简单得实现。有一个网络层或者说对外服务接口层...
    文章 2018-07-23 8763浏览量
  • SLS:海量日志数据管理利器

    其实以上只是典型的在线服务系统的一部分日志,还有数据库、网络服务、文件系统等的日志能够帮助管理人员在出现问题时及时处理。6个月之后,小A的应用非常受欢迎,不仅数据量和机器数目随之增加,SLS服务能力也随之...
    文章 2016-12-25 10169浏览量
  • [译]REST API 已死,GraphQL 长存

    在使用多年的 REST API 后,当我第一次接触到 GraphQL 并了解到它试图解决问题时,我无法抗拒给本文取了这样一个标题。https://twitter.com/samerbuna/status/644548922979954688 当然,过去,这可能只是本人有趣...
    文章 2017-10-16 1422浏览量
  • 一个清理和查询都要兼顾的简单方案

    最近和开发应用的同学在讨论一个需求,目前他们碰到了一些性能问题,想让我来看看是否能够从数据库的角度有一些解决方案。假设表为消费记录,简称service_details,这是一个普通表,目前这个表数据量很大,需要定期去...
    文章 2016-01-04 703浏览量
  • 什么是缓存雪崩、缓存击穿、缓存穿透

    但是使用缓存并没有这么简单,还要考虑缓存雪崩,缓存击穿,缓存穿透的问题,什么是缓存雪崩,击穿,穿透呢,出现这些问题怎么解决呢,接下来学习一下吧。缓存雪崩 什么是缓存雪崩?当某一个时刻出现大规模的缓存...
    文章 2021-01-24 1665浏览量
  • 深度RNN解决语义搜索难题

    我们标题说的是语义搜索,但是好像半天没讲语义怎么体现出来的,其实最初那个简单语义搜索模型已经能够说明这个问题了,只要单词是以Word Embedding的方式进行的,那么其实已经能够处理那些字面不同但是语义相同的...
    文章 2017-08-01 1080浏览量
  • 散列冲突与作为特征值的散列

    见到这个问题的第一想法使用hash解决,没考虑hash冲突解决问题(其实就没想比较URL,不比较URL无法判断冲突与否)。后来意识到hash解法在内存受限情况下存在致命缺陷,才有写这个blog的想法。散列/散列函数 Hash,...
    文章 2017-11-12 1104浏览量
  • 一目了然|数据库实例性能调优利器:Performance ...

    当用户知道了SQL语句为什么有性能问题以后,接下来的问题便是:我该怎么做才能解决性能问题?我们需要明确告诉用户怎么办就能够解决性能问题。从“怎么办”到“自动办” 随着用户能够解决SQL语句性能问题以后,用户...
    文章 2019-09-25 7371浏览量
  • 数据库实例性能调优利器-Performance Insights最佳...

    当用户知道了SQL语句为什么有性能问题以后,接下来的问题便是:我该怎么做才能解决性能问题?我们需要明确告诉用户怎么办就能够解决性能问题。从“怎么办”到“自动办” 随着用户能够解决SQL语句性能问题以后,用户...
    文章 2019-09-10 4063浏览量
  • RDS CloudDBA-Performance Insights最佳实践

    当用户知道了SQL语句为什么有性能问题以后,接下来的问题便是:我该怎么做才能解决性能问题?我们需要明确告诉用户怎么办就能够解决性能问题。从“怎么办”到“自动办” 随着用户能够解决SQL语句性能问题以后,用户...
    文章 2019-07-08 899浏览量
  • 我是如何在SQLServer中处理每天四亿三千万记录的

    问题是,怎么解决不同采集设备属性不一样的问题?这时,一个同事发挥才能了,监控指标+监控值可以按XML格式存储。哇,还能这样?查询呢,可以用for XML这种形式。于是有了这种结构:No、MgrObjId、Dtime、XMLData ...
    文章 2017-10-09 1282浏览量
  • MS SQL Server和Oracle对数据库事务处理的差异性

    例如Oracle的长时间查询如果Undo Data(历史数据)给覆盖了,Oracle会抛出异常"ORA-01555:snapshot too old”,如果出现这种问题,我会从自身系统设计角度入手,为什么有那么大的查询,为什么在这个查询中其他事务会...
    文章 2017-11-19 775浏览量
  • 干货|14张图解读并发底层原理

    MESI协议解决了缓存一致性的问题,但其中有一个问题,那就是需要在等待其他处理器全部回复后才能进行下一步操作,这种等待明显是不能接受的,下面就继续来看看大神们是怎么解决处理器等待的问题的。三、写缓冲和无效...
    文章 2020-10-14 3332浏览量
  • 企查查支撑8000万+企业数据的大数据平台技术选型与...

    使用自己的服务器、自己的机房,也会遇到一些瓶颈,如突发事件怎么去处理,那个机房、那个服务器被攻击了,安全出现问题怎么解决等;遇到大规模并发攻击时素手无策,“我们之前也遇到过大规模并发攻击:在早期的时候...
    文章 2017-02-23 5844浏览量
  • JSP/Servlet 中的汉字编码问题

    早期的软件(尤其是操作系统),为了解决本地字符信息的计算机处理出现了各种本地化版本(L10N),为了区分,引进了 LANG,Codepage 等概念。但是由于各个本地字符集代码范围重叠,相互间信息交换困难;软件各个...
    文章 2016-05-06 1476浏览量
  • 分布式服务化系统一致性的“最佳实干”

    在实际应用中,上面这个过程通常是通过持久化执行任务的状态和环境信息,一旦出现问题,定时任务会捞取未执行完的任务,继续未执行完的任务,直到执行完成为止,或者取消已经完成的部分操作回到原始状态。...
    文章 2017-08-01 2157浏览量
  • react-router browserHistory刷新页面404问题解决

    因为前端路由更容易确定问题,更方便分析,而且对于react-router更熟悉,所以首先去查询react-router路由库相关配置信息,发现文档中提到了使用browserHistory时,会创建真实的URL,处理初始/请求没有问题,但是对于...
    文章 2018-06-01 2641浏览量
  • 从MapReduce的执行来看如何优化MaxCompute(原ODPS)...

    所以当分片处理的不合理,map阶段就会出现问题。而map端经过shuffle和combianer(可选)后,会把数据交给reduce端。从input&split 到map可能出现的问题 输入存在大量小文件,导致map instance数量超标>同上 ...
    文章 2017-07-21 5863浏览量
1 2 3 4 ... 48 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化