• SparkES 多维分析引擎设计

    支持自定义编程(采用原生API或者编写UDF等函数对SQL做增强) 所以在构建即席多维查询系统时,Spark 可以和ES取得良好的互补效果。通过ES的列式存储特性,我们可以非常快的过滤出数据,并且支持全文检索,之后这些过滤...
    文章 2016-09-09 1993浏览量
  • ElasticSearch聚合分析API——非常详细,如果要全面...

    说完了ES的索引与检索,接着再介绍一个ES高级功能API – 聚合(Aggregations),聚合功能为ES注入了统计分析的血统,使用户在面对大数据提取统计指标时变得游刃有余。同样的工作,你在hadoop中可能需要写mapreduce或...
    文章 2017-11-16 1180浏览量
  • ES 高级实战(一)ES 组件库介绍

    所以我们来看下 ES 在项目中是如何来代替 SQL 来工作的。我使用的 Elasticsearch 服务是 7.4.2 的版本,然后采用官方提供的 Elastiscsearch-Rest-Client 库来操作 ES,而且官方库的 API 上手简单。该组件库的官方...
    文章 2022-05-08 15浏览量
  • bboss es对比直接使用es客户端的优势

    es官方客户端有两种:restclient和transprortclient,前者是基于restful的,直接操作各种restful api和query dsl,比较简单,没有orm功能;后者是基于java api封装的orm框架,封装比较死板,不太灵活,兼容性差,不...
    文章 2017-11-25 1121浏览量
  • SQL Server扩展事件(Extended Events)-默认扩展事件...

    在抢先等待中,SQL Server 等待的是外部 API 调用。l CLR 分配失败和虚拟分配失败的调用堆栈和 session_id。l 有关内存 Broker、计划程序监视、内存节点 OOM、安全性和连接的 ring_buffer 事件。l sp_server_...
    文章 2017-11-09 1351浏览量
  • Spark通过RestHighLevelClient批量写入ES7

    ES的工具类 import org.elasticsearch.action.ActionListener;import org.elasticsearch.action.bulk.BackoffPolicy;import org.elasticsearch.action.bulk.BulkProcessor;import org.elasticsearch.action.bulk....
    文章 2020-11-29 1424浏览量
  • 海量数据的分库分表技术演进,最佳实践

    而sharding column的选取跟业务强相关,笔者认为选择sharding column的方法最主要分析你的API流量,优先考虑流量大的API,将流量比较大的API对应的SQL提取出来,将这些SQL共同的条件作为sharding column。...
    文章 2018-10-09 1993浏览量
  • 分库分表技术演进&最佳实践

    而sharding column的选取跟业务强相关,笔者认为选择sharding column的方法最主要分析你的API流量,优先考虑流量大的API,将流量比较大的API对应的SQL提取出来,将这些SQL共同的条件作为sharding column。...
    文章 2018-11-08 3608浏览量
  • 分库分表技术演进&最佳实践

    而sharding column的选取跟业务强相关,笔者认为选择sharding column的方法最主要分析你的API流量,优先考虑流量大的API,将流量比较大的API对应的SQL提取出来,将这些SQL共同的条件作为sharding column。...
    文章 2018-11-14 3406浏览量
  • elasticsearch-sql 增加 jdbc支持

    I have tried calcite to add this feature to es-sql.It's proved to be unsuitable.calcite kind like spark datasource API which provide scanTable,filterTabe,translateTable which means you cannot access ...
    文章 2016-09-12 10568浏览量
  • 使用dbms_backup_restore包修改dbname及dbid

    同时也可以直接调用API来实现。本文即是通过dbms_backup_restore方式来修改dbname及dbid,供大家参考。有关使用nid方式修改dbname及dbid,请参考:使用nid命令修改 db name 及 dbid 1、修改dbid及dbname的步骤 a、...
    文章 2014-03-29 1076浏览量
  • 在 EMR 中使用 ES-Hadoop

    这里展示使用 Hive 通过 SQL 来读写 ES 的方法。首先运行 hive 命令进入交互式环境,先创建一个表 CREATE DATABASE IF NOT EXISTS company;之后创建一个外部表,表存储在 ES 上,通过 TBLPROPERTIES 来设置对接 ES ...
    文章 2018-06-22 3776浏览量
  • 【转】在E-MapReduce中使用 ES-Hadoop

    这里展示使用 Hive 通过 SQL 来读写 ES 的方法。首先运行 hive 命令进入交互式环境,先创建一个表: CREATE DATABASE IF NOT EXISTS company;之后创建一个外部表,表存储在 ES 上,通过 TBLPROPERTIES 来设置对接 ES...
    文章 2018-10-16 1409浏览量
  • Elasticsearch 漫谈

    ES-SQL我们知道 ES是有自己的DSL的,是一个用JSON来定义的查询语言。写起来还是比较繁琐的,而相当一部分功能其实是可以映射到SQL上的。我觉得官方有必要提供对SQL的支持,Solr现在已经做了,但是ES目前还只有第三方...
    文章 2017-03-31 2687浏览量
  • 《HTML5实战》——1.4 其他API和规范

    它基于Open Graphics Library for Embedded Systems(OpenGL ES)标准,这项标准针对包括手机在内的嵌入式设备而设计了一套3D现实方案。借由它所提供的API,开发者可以使用着色器(shader)、缓冲以及绘图方法来实现...
    文章 2017-05-02 1877浏览量
  • ElasticSearch 概念介绍和部署(下)

    基于Restful API ES和所有客户端的交互都是使用JSON格式的数据.其他所有程序语言都可以使用RESTful API&xff0c;通过9200端口的与ES进行通信GET 查询PUT 添加POST 修改DELETE 删除 用户做 crudGet ...
    文章 2022-04-25 48浏览量
  • Elasticsearch的使用场景深入详解

    如果你使用了如下图所示的SQL数据库和ES存储,你需要找到一种方式使得两存储之间实时同步。需要根据数据的组成、数据库选择对应的同步插件。可供选择的插件包括: 1)mysql、oracle选择 logstash-input-jdbc 插件。2...
    文章 2019-07-01 2603浏览量
  • 抢先|支持sql的Elasticsearch6.3全景概览

    4.3 sql RESTful API使用 POST/_xpack/sql?format=txt { query":"SELECT*FROM library ORDER BY page_count DESC LIMIT 5 } 返回结果: author|name|page_count|release_date Frank Herbert|Dune|604|1965-06-01T00...
    文章 2019-07-03 260浏览量
  • 数据库数据导入Elasticsearch案例分享

    The best elasticsearch highlevel java rest api-bboss 基于bboss持久层和bboss elasticsearch客户端实现数据库数据导入es案例分享(支持各种数据库和各种es版本) 1.案例对应的源码 ...2.在工程中导入jdbc es maven...
    文章 2018-06-21 2868浏览量
  • 死磕 Elasticsearch 方法论:普通程序员高效精进的 10...

    4.ElasticHD工具其强势功能包括支持 SQL 转 DSL,不要完全依赖,可以借鉴用。如下图所示。5.中文分词工具比如有 IK分词、ANSJ分词、结巴分词。网上还有结巴分词的其他最新版本。在这里建议选用 IK 分词,原因有以下...
    文章 2018-12-14 3918浏览量
  • EMR Druid 探索(一)

    不支持SQL ES 官方目前没有支持,其查询语言是一套自定义的 DSL。Range 查询性能较差 这是由其技术基础决定的 Druid 与 ES 是两种技术上完全不同的方案。前者基于数据的预计算换取查询时延,后者则是完全基于倒排...
    文章 2018-06-01 3681浏览量
  • Apache Flink实战(一)-简介

    SQL Window和Time操作 Flink Connectors Flink部署及作业提交 Flink监控及调优 使用Flink自定义数据源读取配置数据 使用Flink完成实时数据清洗 使用Flink完成实时结果统计 统计结果可视化展示(Kibana) 5 收获 系统...
    文章 2019-04-26 2773浏览量
  • 史上最全最常用 ELK 工具清单

    ES6.3+以后的新版本会集成sql。2.9 增强类工具 17、Conveyor 工具 kibna插件——图形化数据导入工具 地址:http://t.cn/REOhwGT 18、kibana_markdown_doc_view 工具 Kibana文档查看强化插件,以markdown格式展示文档...
    文章 2018-07-23 3363浏览量
  • OPPO数据中台之基石:基于Flink SQL构建实数据仓库

    那么,基于 Flink SQL API 如何编程呢?下面是一个简单的演示: 首先是定义与注册输入/输出表,这里创建了 2 张 Kakfa 的表,指定 kafka 版本是什么、对应哪个 topic;接下来是注册 UDF,篇幅原因这里没有列出 UDF ...
    文章 2019-05-14 18686浏览量
  • 自建ELK vs 日志服务(SLS)全方位对比

    ES采用bulk api批量写入,LogSearch/Analytics 用PostLogstoreLogs API批量写入,结果如下: 类型 项目 自建ELK LogSearch/Analytics 延时 平均写入延时 40 ms 14 ms 存储 单拷贝数据量 86G 58G 膨胀率:数据量/原始...
    文章 2017-09-21 17635浏览量
  • 严选|Elasticsearch史上最全最常用工具清单

    ES6.3+以后的新版本会集成sql。2.9 增强类工具 17、Conveyor 工具 kibna插件——图形化数据导入工具 地址:http://t.cn/REOhwGT 18、kibana_markdown_doc_view 工具 Kibana文档查看强化插件,以markdown格式展示文档...
    文章 2019-07-03 377浏览量
  • 日志分析:SLS vs ELK

    在阿里集团内阿里云全站,SQL审计、鹰眼、蚂蚁云图、飞猪Tracing、阿里云谛听等都选择SLS作为日志分析引擎。而日志查询是DevOps最基础需求,从业界的调研《50 Most Frequently Used Unix Command》也验证了这一点,...
    文章 2019-01-02 14027浏览量
  • Elasticsearch 6.3.0 SQL功能使用案例分享

    初始化一个加载sql配置文件的es客户端接口 /设置sql查询的参数 Map params=new HashMap(); params.put("channelId",1); String json=clientUtil.executeHttp("/_xpack/sql","sqlQuery",params, ...
    文章 2018-06-25 1579浏览量
  • 干货|Elasticsearch 布道者Medcl对话携程Wood大叔核心...

    实际应用发现插件还是有问题,期待ES官方推出Sql查询。5.2 增加kibana丰富表现力 5.3 更快的索引速度 refresh优化:提升吞吐。6、ELK Stack最喜欢的特性 Wood大叔:丰富的扩展能力,用户不必关心底层的实现。通过...
    文章 2019-07-04 336浏览量
  • 分库分表的正确姿势,你GET到了么?

    而sharding column的选取跟业务强相关,笔者认为选择sharding column的方法最主要分析你的API流量,优先考虑流量大的API,将流量比较大的API对应的SQL提取出来,将这些SQL共同的条件作为sharding column。...
    文章 2018-09-18 5147浏览量
1 2 3 4 ... 15 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化