【Azure Stream Analystics】流分析服务执行遇见警告错误消息,导致上游数据堆积,下游无任何输出

简介: 【Azure Stream Analystics】流分析服务执行遇见警告错误消息,导致上游数据堆积,下游无任何输出

问题描述

Azure Stream Analystics服务运行状态正常,测试输出也正常。但是下游没有任何数据产生。

只是在概述页面中提示:

Message:Encountered error trying to discover new reference data snapshot.

Error: The job hasencountered error from Reference Data storage. Error encountered while storingreference data snapshot into the storage account.

 

问题解答

根据错误信息,找到是SQL输入源中有错误消息。但是测试数据库连接的时候,连接时成功的。

认真分析错误消息:

尝试发现新的引用数据快照时遇到了错误。错误: The job has encountered error from Reference Data storage. Error encountered while storing reference data snapshot into the storage account.

通常,访问Storage Account 出错是因为防火墙。在检查Storage  Account网络设置后,果然,它只允许特定的网络访问,在为 Stream Analystics 服务启用了 Resource Instances后,发现问题依旧。只有当配置为全部网络都可以访问Storage Account后,问题才消失。

不得其解啊!明明指定了Microsoft.StreamAnalystics/streamingjobs, 那为什么不行呢? 最后,找到流分析(Stream Analystics)配置SQL输入源的文档:https://docs.azure.cn/zh-cn/stream-analytics/sql-database-output-managed-identity?tabs=azure-sql#additional-steps-for-sql-reference-data,  特别强调:若要使用连接字符串进行身份验证,必须禁用存储帐户防火墙设置。如此看来,这就是一个产品的设定,没有道理可讲!

 

 

 

[END]

相关文章
|
10月前
|
资源调度 流计算
Flink 指标参数源码解读(读取数量、发送数量、发送字节数、接收字节数等)(下)
Flink 指标参数源码解读(读取数量、发送数量、发送字节数、接收字节数等)(下)
134 1
|
3月前
|
SQL 关系型数据库 MySQL
实时数仓 Hologres操作报错合集之遇到报错:连接到 FE 失败,剩余的连接槽保留用于非复制超级用户连接,该怎么处理
在使用阿里云实时数仓Hologres时,可能会遇到不同类型的错误。例如:1.内存超限错误、2.字符串缓冲区扩大错误、3.分区导入错误、4.外部表访问错误、5.服务未开通或权限问题、6.数据类型范围错误,下面是一些常见错误案例及可能的原因与解决策略的概览。
|
25天前
|
存储
【Azure 事件中心】Event Hubs中存在非常多的错误数据,是否能提前删除这些数据呢?
【Azure 事件中心】Event Hubs中存在非常多的错误数据,是否能提前删除这些数据呢?
|
1月前
|
算法 数据处理 流计算
流计算引擎数据问题之传播模块工作如何解决
流计算引擎数据问题之传播模块工作如何解决
35 1
|
2月前
|
弹性计算 DataWorks 关系型数据库
DataWorks操作报错合集之DataX在执行过程中接收到了意外的信号15,导致进程被终止,该怎么处理
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
|
2月前
|
Oracle 数据库 流计算
实时计算 Flink版产品使用问题之通过打印sourceRecord发现没有收到丢失的数据,是什么导致的
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架,广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器,提供了一套全面的解决方案,以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点,使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
|
4月前
基于若依的ruoyi-nbcio流程管理系统支持支持定时边界事件和定时捕获事件
基于若依的ruoyi-nbcio流程管理系统支持支持定时边界事件和定时捕获事件
46 2
|
4月前
|
JavaScript 前端开发 Java
流的概念,怎么处理
流的概念,怎么处理
|
Java 程序员
Stream流操作-结果收集终止方法-最终篇
Stream流操作-结果收集终止方法-最终篇
95 0
|
10月前
|
监控 流计算
Flink 指标参数源码解读(读取数量、发送数量、发送字节数、接收字节数等)(上)
Flink 指标参数源码解读(读取数量、发送数量、发送字节数、接收字节数等)(上)
76 1