• 三招助你做好Oracle数据备份测试

    记录这些内容有利于数据管理员在遇到问题的时候迅速找到这些文件并且熟练的应用这些文件进行数据的恢复作业。二是需要记录备份或者恢复过程中遇到的意外事件。虽然只是模拟失败,但是这个故障以及解决故障过程中...
    文章 2022-06-15 23浏览量
  • SQL Server DBA工作内容详解

    随着业务量的继续和扩大,数据中的数据也逐渐地增加,事务日志也不断地增加。存储空间管理任务主要围绕下面几个问题。当前的数据由那些数据文件组成?事务日志的大小应该如何设置?数据的增长速度是多大?如何...
    文章 2012-03-14 903浏览量
  • SQL Server DBA工作内容详解

    随着业务量的继续和扩大,数据中的数据也逐渐地增加,事务日志也不断地增加。存储空间管理任务主要围绕下面几个问题。当前的数据由那些数据文件组成?事务日志的大小应该如何设置?数据的增长速度是多大?如何...
    文章 2015-03-04 1035浏览量
  • SQL Server DBA工作内容详解

    随着业务量的继续和扩大,数据中的数据也逐渐地增加,事务日志也不断地增加。存储空间管理任务主要围绕下面几个问题。当前的数据由那些数据文件组成?事务日志的大小应该如何设置?数据的增长速度是多大?如何...
    文章 2017-07-03 1835浏览量
  • 详解 Flink 指标、监控与告警

    下面我们来关注下一般使用哪些指标来衡量作业运行的状况。2.1 常用的指标 系统指标 系统指标在 Flink 官网有相应的说明。对于系统指标最常关注的是作业的可用性,如 uptime(作业持续运行的时间)、fullRestarts...
    文章 2020-07-23 3682浏览量
  • SQL Server DBA工作内容你知道多少?

    数据中的数据也逐渐地增加&xff0c;事务日志也不断地增加。存储空间管理任务主要围绕下面几个问题。当前的数据由那些数据文件组成?事务日志的大小应该如何设置?数据的增长速度是多大?如何配置数据文件和日志文件...
    文章 2022-02-15 50浏览量
  • SQL Server DBA工作内容你知道多少?

    数据中的数据也逐渐地增加&xff0c;事务日志也不断地增加。存储空间管理任务主要围绕下面几个问题。当前的数据由那些数据文件组成?事务日志的大小应该如何设置?数据的增长速度是多大?如何配置数据文件和日志文件...
    文章 2022-02-12 63浏览量
  • MapReduce与批处理-《Designing Data-Intensive ...

    在Pig之中,先运行一个采样任务来确定哪个键是热的,在作业实际执行时,Mapper出现数据倾斜的键值对通过随机选择分发个指定的多个Reducer。而Hive的倾斜连接优化采用了另一种方法。它需要在表元数据中显式指定...
    文章 2018-02-23 1247浏览量
  • 谈模块独立拆分上线一些经验

    在程序是,我们对重要的一起系统间的调用,使用了事务补偿的方案,比如:系统A调用系统B,在系统B产生了一条数据,如果系统A在那个事务里失败了,但又不能操作系统B的数据,那么,系统B的自动作业中,检测系统A...
    文章 2016-01-02 880浏览量
  • 搜狐畅游高级DBA:Data Guard运维中的实战经验和技巧

    主备的操作系统不同,这对于Red Hat和CentOS似乎还算兼容,但是如果跨度再大就会出现问题。(2)没有主的防火墙权限 在很多的容灾场景中,如果出现切换,为了更方便,可能直接修改备IP为主的场景更多一些,...
    文章 2017-05-02 2321浏览量
  • Improvements of Job Scheduler and Query Execution ...

    而另外一个作业执行计算的时候,TaskManager 需要创建新的网络连接,会出现作业任务执行过程中频繁创建和关闭连接,最终影响计算任务和查询作业的 latency 以及 QPS,同时在过程也会导致资源使用的不稳定,增加 CPU ...
    文章 2022-04-01 608浏览量
  • 数字驱动教育:未来的教室应该是什么样的

    有一家名为iParadigms的公司,他们利用大数据,通过对公共数据和其他线上资源进行分析,可以看出哪些学生上交的作业是抄袭的,哪些是学生自己完成的。不过,所有这些功能还需要一个关键要素支持,那就是老师。老师...
    文章 2017-05-02 1000浏览量
  • 首次揭秘!​春晚活动下快手实时链路保障实践

    首先,如果出了问题,我们可以在下游的 task 上进行控制,但是这样的话可能带来一个问题,它造成反压等阻塞行为,有可能把整个作业卡死,所以我们通过控制数据源来从本质上解决问题。下面是我们技术实现: ...
    文章 2020-06-29 864浏览量
  • Jstorm到Flink在今日头条的迁移实践

    这个平台是为了解决实际过程中遇到了一些问题,比如说整个机群挂了无法确定哪些作业在上面跑着,也通知不到具体的用户,有些用户作业都不知道自己提交了哪些作业。我们构建流式作业的时候目标实际上就是和其他的管理...
    文章 2018-11-14 2158浏览量
  • Jstorm到Flink 在今日头条的迁移实践

    这个平台是为了解决实际过程中遇到了一些问题,比如说整个机群挂了无法确定哪些作业在上面跑着,也通知不到具体的用户,有些用户作业都不知道自己提交了哪些作业。我们构建流式作业的时候目标实际上就是和其他的管理...
    文章 2018-10-15 3059浏览量
  • Apache Flink 在快手的过去、现在和未来

    除此之外,当有索引需要生成的时候,通过 Kafka 触发生成策略,下游的索引生成的 Flink 作业从各种特征中获取特征并进行处理后,形成索引,存储到索引中。最终的索引数据,为在线的推荐服务提供召回源。四、...
    文章 2021-02-26 1289浏览量
  • 如果真的要把Go语言加入OpenStack...需要考虑哪些问题...

    一旦越来越多的项目使用相同的语言就会出现共享代码的需求。因此,我觉得我们需要更好地定义一个编程语言的代码怎么在社区共享,这个挺重要的,哪怕是在编程语言被接受之前就很重要。我觉得提前做一些事情不意味着...
    文章 2017-07-03 1434浏览量
  • 如果真的要把Go语言加入OpenStack...需要考虑哪些问题...

    一旦越来越多的项目使用相同的语言就会出现共享代码的需求。因此,我觉得我们需要更好地定义一个编程语言的代码怎么在社区共享,这个挺重要的,哪怕是在编程语言被接受之前就很重要。我觉得提前做一些事情不意味着...
    文章 2017-08-02 1043浏览量
  • 数据设计

    明确该单元使用哪些数据、如何使用数据……确定系统的边界,即明确哪些功能由系统实现,哪些功能由其他方式如人工、其他已有系统等实现系统需求调查的方法跟班作业咨询专业人士开调查请业务员填写调查表查阅账本、...
    文章 2020-04-23 622浏览量
  • 2019年美团、滴滴、蘑菇街Java岗9次面试总结

    flink了解哪些,它的基本架构原理如何设计一个多级缓存系统,需要考虑到哪些问题?redis和zookeeper做分布式锁的区别,还有其他方式做分布式锁吗?一道算法:给定一个栈,使用O(1)的时间复杂度计算栈中的最小元素。...
    文章 2019-07-24 1820浏览量
  • SQL Server数据转换服务的四个妙用

    通过相关的设置,数据库会在包成功或者失败的时候自动发送一个电子邮件给数据库管理员,以提醒他作业是成功还是失败。并且会附上比较详细的信息,以便于数据库管理员进行后续的操作。数据转换功能中,还包含了一个...
    文章 2009-03-03 971浏览量
  • Apache Flink 在汽车之家的应用与实践

    平台默认保存 SQL 每一次的变更记录,用户可以在线查看历史版本,同时我们记录针对作业的各种操作,在作业维护阶段可以帮助用户追溯变更历史,定位问题。下面是一个 Demo,用于统计当天的 PV、UV 数据:3.基于 ...
    文章 2021-09-27 708浏览量
  • SQL Server 复制订阅

    2.一个发布项目不要包含的表不要太大,由于发布生成快照的过程中会锁表同时会堵塞相应表的进程,如果表太大导致生成快照的时间过长势必会导致服务器堵塞非常的严重有时候还会出现很严重的问题!可以通过多创建几个...
    文章 2014-10-08 1094浏览量
  • 阿里云实时计算Flink版产品介绍

    比如作业上线后的启动、运行、停止阶段需要关注哪些内容、出问题应该如何处理等。我们将最佳实践总结做成了诊断功能&xff0c;可以手动触发诊断&xff0c;获得诊断结果以及相关处理建议。如果作业出现异常停止或手动停止&...
    文章 2022-09-20 68浏览量
  • 开发效率提升15倍!批流融合实时平台在好未来的应用...

    比如业务数据表的 schema 信息,经过同意加工之后的 schema 信息,数据输出的表的 schema 信息,通过这些记录,后期我们排查问题的时候就能够快速梳理出作业的来龙去脉和影响范围。实时平台 Flink SQL 开发过程 在...
    文章 2021-01-07 3074浏览量
  • 大数据面试题V3.0,523道题,779页,46w字

    Spark的特点Spark源码中的任务调度Spark作业调度Spark的架构Spark的使用场景Spark on standalone模型、YARN架构模型(画架构图)Spark的yarn-cluster涉及的参数有哪些?Spark提交job的流程Spark的阶段划分Spark处理数据...
    文章 2022-09-29 15浏览量
  • 刷了两个月面试经验,我终于.

    TCP 四次挥手,如果不等 2MSL 的话整个网络会出现什么情况 有网络层的存在,为什么还要传输层 端口的实现 数据语句会用吗 联合索引,举例子什么时候不走 进程间的通信方式 除了 Java 平时看哪些技术的书多一点 ...
    文章 2019-07-26 1304浏览量
  • Redis专题(1):构建知识图谱

    一致性一般分为两种:强一致性和最终一致性,当我们要满足强一致性的时候,Redis也无法做到完美无瑕,因为数据和缓存双写,肯定会出现不一致的情况,Redis只能保证最终一致性。解决:我们如何保证最终一致性呢?第...
    文章 2019-06-12 3957浏览量
  • 如何用好云原生数据湖?

    开源组件本身都必须经过细致的调参并加上合适的硬件资源配置,才能良好运行,并且需要修复不少BUG,出现问题没有兜底。缺乏适应云的性能优化 云上的OSS、PolarDB等组件都是云原生的组件,开源组件对这部分的改造适应...
    文章 2020-10-26 8089浏览量
  • Flink 流批一体在小米的实践

    一旦作业出现问题,上游的数据都需要重做,消息队列中大多数据保存不会超过 7 天。在销售服务的某些场景中中,我们引入了离线作业,根据结果表的数据,获取状态还未结束的数据,将对应的维度数据写回到实时流中,...
    文章 2022-04-18 1512浏览量
1 2 3 4 ... 23 >

云产品推荐

视频直播 大数据计算服务 MaxCompute 国内短信套餐包 ECS云服务器安全配置相关的云产品 开发者问答 阿里云建站 新零售智能客服 万网 小程序开发制作 视频内容分析 视频集锦 代理记账服务 阿里云AIoT 阿里云科技驱动中小企业数字化