本地Pubsub模拟器无法与Dataflow一起使用。
创始人
2024-11-30 00:00:26
0

要解决“本地Pubsub模拟器无法与Dataflow一起使用”的问题,可以使用一个外部Pubsub服务(如Google Cloud Pub/Sub)来代替本地模拟器。以下是一个示例代码,展示了如何在Dataflow中使用Google Cloud Pub/Sub:

import apache_beam as beam

# 设置Google Cloud Pub/Sub的主题和订阅名称
input_topic = 'projects//topics/'
output_topic = 'projects//topics/'
subscription = 'projects//subscriptions/'

# 创建一个Dataflow管道
pipeline = beam.Pipeline()

# 从Pub/Sub订阅中读取数据
messages = (
    pipeline
    | 'Read from Pub/Sub' >> beam.io.ReadFromPubSub(subscription=subscription)
)

# 在数据上应用转换或处理逻辑
# ...

# 将处理后的数据写入Pub/Sub主题
messages | 'Write to Pub/Sub' >> beam.io.WriteToPubSub(topic=output_topic)

# 运行Dataflow作业
pipeline.run()

在上述代码中,您需要将替换为您的Google Cloud项目ID,替换为您的Pub/Sub主题名称,以及替换为您的Pub/Sub订阅名称。

通过使用Google Cloud Pub/Sub作为外部服务,您可以在Dataflow中使用Pub/Sub功能,而无需依赖本地的Pubsub模拟器。

相关内容

热门资讯

第1分钟辅助!雀友软件脚本辅助... 第1分钟辅助!雀友软件脚本辅助器,真是是有辅助脚本(有挂解密)1、在雀友软件脚本辅助器插件功能辅助器...
第4分钟辅助!海盗来了辅助器最... 第4分钟辅助!海盗来了辅助器最新,其实是有辅助器(有挂规律)海盗来了辅助器最新破解侠是真的助透视。每...
七分钟辅助!皮皮辅助,好像真的... 七分钟辅助!皮皮辅助,好像真的有辅助插件(有挂细节)在进入皮皮辅助软件靠谱后,参与本局比赛的八名玩家...
四分钟辅助!开心泉州免费辅助器... 四分钟辅助!开心泉州免费辅助器,本来是真的有辅助神器(有挂分享)1、开心泉州免费辅助器辅助器安装包、...
第8分钟辅助!欢聚水鱼虎步龙行... 第8分钟辅助!欢聚水鱼虎步龙行辅助器,本来有辅助神器(有挂方式)在进入欢聚水鱼虎步龙行辅助器软件靠谱...
第三分钟辅助!奇迹手游辅助,其... 第三分钟辅助!奇迹手游辅助,其实真的有辅助攻略(有挂细节)1、奇迹手游辅助有没有辅助教程、奇迹手游辅...
七分钟辅助!闲逸辅助插件,总是... 七分钟辅助!闲逸辅助插件,总是是真的有辅助神器(有挂方法)1、全新机制【闲逸辅助插件ai辅助工具激活...
第四分钟辅助!微乐小程序辅助器... 第四分钟辅助!微乐小程序辅助器免费,原来真的是有辅助工具(有挂技巧)1、微乐小程序辅助器免费透视辅助...
第八分钟辅助!潮娱乐鱼虾蟹公式... 第八分钟辅助!潮娱乐鱼虾蟹公式辅助软件,好像是真的有辅助教程(真是有挂)1、进入游戏-大厅左侧-新手...
第6分钟辅助!福建兄弟13水辅... 第6分钟辅助!福建兄弟13水辅助,本来真的有辅助攻略(真是有挂)福建兄弟13水辅助透视方法中分为三种...