azure-eventhub相关内容

适用于Python的Azure Eventhub库

我正在使用eventhub接收很多事件.我有多个使用者正在运行一个扩展组,该组从具有多个分区的eventhub中读取这些事件.我正在查看python中的Azure SDK,对使用什么感到困惑.有eventhubconsumerclient,eventprocessorHost .... 我想使用一个库,我的多个使用者可以使用使用者组进行连接,将分区动态分配给每个使用者,并在存储帐户中进行检查 ..
发布时间:2021-04-13 20:49:06 Python

Azure Event Hub Java客户端未处理数据

遵循此和 解决方案 据我对EventProcessor的了解,您将重新处理事件,而不是丢失事件.可能还有另一个潜在的问题. 当您调用 checkpoint 时发生的事情是,它保留了 EventData 的序列号(偏移量等)流,并说“我已经处理了".; 当您收到 StorageException 时,这意味着序列号未成功持久保存,因此较旧事件的序列号将保留在您的Blob存储中.如 ..
发布时间:2021-04-13 20:49:03 Java开发

eventhub发布非常慢

我正在使用这些代码段在eventhub上发布事件: //...var eventHubClient = EventHubClient.CreateFromConnectionString(ConnectionString,EventHubName);//...var serializerSettings = new JsonSerializerSettings {TypeNameHandling ..
发布时间:2021-04-13 20:05:24 C#/.NET

将Azure Functions与事件中心链集成的最佳参数是什么

我们需要设置4个EventHub和3个Azure函数.那么,具有高吞吐量和可扩展参数的最佳方法是什么?我们可以将其设置为具有能够处理75,000条消息/秒的系统? Local.settings.json hosts.json 预取计数 最大批处理量 解决方案 这篇文章绝对值得一读,是我根据自己的一些工作做的,我需要达到50k p/sec. https://azure.micro ..

Azure事件中心-顺序接收事件

我正在使用以下代码从Azure Event-Hub接收事件 https://docs.microsoft.com/zh-CN/azure/event-hubs/event-hubs-dotnet-framework-getstarted-send#receive-events 我想按顺序处理进入事件中心的请求.例如,某人在很短的时间内发送了5个事件,我想完成请求1的处理,然后我要处理第 ..
发布时间:2021-04-13 19:49:23 C#/.NET

EventHubProducerClient是否提供具有单个EventData的SendAsync?

从官方文档看来,它们仅支持发送批处理.只是想知道是否存在某种东西(除了将其作为课程列表发送之外) 解决方案 EventHubProduerClient 不提供发送单个事件的方法.在设计新SDK的过程中,我们了解到,许多使用单事件重载的开发人员都是在这种情况下对其应用程序的性能和吞吐量产生负面影响的. 旧版过载仅执行隐式的 new [] {yourEvent} ,并调用 IEnumer ..
发布时间:2021-04-13 19:48:58 C#/.NET

Azure事件中心-REST API身份验证

我有一个生成流数据的Python程序.每条数据都存储为名为 message 的变量. 由于事件中心不提供Python SDK,因此我选择使用本教程,以尝试创建共享访问签名.使用 curl 确认我生成的令牌正常工作后,我收到了 HTTP/1.1 401 40103:无效的授权令牌签名响应. 有没有更好的方法来发送数据,同时仍在Python中生成数据?创建共享访问签名的更好方法? 解 ..
发布时间:2021-04-13 19:31:03 其他开发

如何在本地调试EventHubTrigger?

我正在尝试在本地调试Azure功能.这是一个EventHubTrigger. 问题是我需要在本地调试代码,因为我仍然没有“真实"设置. 我的代码当前如下所示: 公共静态类通告程序{[FunctionName("Notificator")]公共静态异步任务运行([EventHubTrigger("achievements")] UserAchivementNofication通知,IL ..
发布时间:2021-04-13 19:29:34 其他开发

EventGrid vs EventHub

我正在研究服务结构应用程序,并希望从该应用程序发布一些事件,并在另一个应用程序中订阅或处理这些发布事件. 我尝试了EventGrid概念,发现在发布和处理事件时存在延迟.所以,现在我正在寻找其他替代品,例如EventHub或Queues等. 如果有人已经使用过EventGrid,EventHud或Queues等.,请建议当我们处理更多事件时,哪一个将带来更高的性能. 设计方法 ..

Azure事件中心-地理恢复:是否复制到辅助区域?

根据Microsoft文章- https://docs.microsoft.com/zh-CN/azure/event-hubs/event-hubs-geo-dr 根据设计,事件中心地理灾难恢复不会复制数据,因此您不能在辅助事件中心上重用主要事件中心的旧偏移值.我们建议您使用以下方法之一重新启动事件接收器: EventPosition.FromStart()-如果您希望读取辅助事件中 ..
发布时间:2021-04-13 19:03:19 其他开发

带有DeviceLifecycleEvents源的IoT中心消息路由不起作用

我已经在使用IoT中心,并且已配置消息路由以将 TwinChangeEvents 路由到事件中心.带有 EventHubTrigger 的Azure函数处理消息.效果很好. 现在,我想配置消息路由以将 DeviceLifecycleEvents 路由到另一个事件中心.同样,另一个具有 EventHubTrigger 的Azure函数应该处理消息. 但是,当我连接或断开设备时不会触发该功 ..
发布时间:2021-04-13 18:57:14 其他开发

Spark结构化流中的流数据帧读取模式

我是Apache Spark结构化流媒体的新手.我正在尝试从事件中心(XML格式)中读取一些事件,并尝试从嵌套的XML中创建新的Spark DF. 我正在使用 https://github.com/databricks/spark-xml ,并且在批处理模式下可以完美运行,但在结构化Spark流中却无法运行. spark-xml Github库的代码块 导入com.databrick ..

选择哪种Azure消息传递服务以不同的消息发布给不同的订阅者?

来自假设我们将订单对象保存在名为 SaveOrder 的azure函数中,成功保存订单后,我们想向3个订阅者/消费者发送不同的消息(内容),即还使用天蓝色函数实现/触发, 订户/天蓝色功能1 将用于报告-带有消息1 ,例如 { 'reportHeader':'Order Report for ID 012913', 'report_notes':'A few additional ..
发布时间:2020-09-17 03:59:41 其他开发

Azure EventHub:可以进行脱机事件缓冲/排队吗?

我在这里找不到任何明确的答案.我的物联网服务需要容忍不稳定的连接.目前,我自己管理本地缓存,并根据需要重试一次云blob传输.我可以将其替换为Azure EventHub服务吗?即EventHub客户端(在IoT-Core上)是否会缓冲事件直到连接可用?如果是这样,有关此的信息在哪里? 解决方案 根据以下情况似乎并非如此: https://azure.microsoft.com/zh-我们 ..
发布时间:2020-09-17 03:59:34 其他开发

为Azure功能配置通知标签

我正在使用Azure功能从事件中心提取消息并通过Azure通知中心发送通知.很棒!现在,我想看看是否可以在这些消息中添加标签,以允许通过这些标签进行用户定位. 通知中心的输出具有一个“标记表达式"参数,您可以对其进行配置.但这似乎是静态文本.我需要根据从事件中心收到的消息动态设置这些标签.我不确定是否可以以某种方式在其中放置动态内容? 我还发现我正在使用的GcmNotification ..

Azure事件中心更改分区键

应用程序在启动时会将EventData.PartitionKey的值设置为新的Guid.因此,对于每个新的部署,分区密钥都会更改. 我知道事件中心利用哈希机制将消息路由到特定分区.重新生成分区密钥是否会以任何有害的方式阻碍或影响该机制? 尽管有时基础EventHubClient.SendBatchAsync方法不会抛出Exception事实,但我不时注意到在多次部署之后消息不会出现在事 ..
发布时间:2020-09-17 03:59:23 其他开发

使用Azure流分析进行资产跟踪

我有一个事件中心和一个将数据发送到Power BI的流分析作业.我想知道配置事件中心/资产跟踪的最佳方法是什么? 例如,我有多个客户端发送到事件中心->流分析作业,并且我希望能够确定具有特定ID的客户端是否离线? 干杯! 解决方案 如果ID列表相对静态,则可以使用引用数据连接输出每个时间窗口中缺少的所有ID. 如果要从流本身推断ID,并且要检测何时在前一个窗口中激活的ID ..
发布时间:2020-09-17 03:58:13 其他开发