ApacheBeamTextIO.read().from()在文件模式中不解释转义的特殊字符。
创始人
2024-09-05 12:00:26
0

在文件模式中使用反斜杠转义特殊字符,或使用正则表达式来匹配文件名。以下是一些示例代码:

方法一:使用反斜杠转义特殊字符

Pipeline p = Pipeline.create();
PCollection lines = p.apply(TextIO.read().from("file:///path/to/file\\[1-3\\].txt"));

此示例中,文件路径中包含转义的方括号,用于匹配文件名中的数字范围。

方法二:使用正则表达式

Pipeline p = Pipeline.create();
PCollection lines = p.apply(TextIO.read().from("/path/to/files/*")
                .withHintMatchesManyFiles()
                .withCompressionType(CompressionType.AUTO)
                .withCoder(StringUtf8Coder.of())
                .withDelimiter("\\n")
                .withFilenamePolicy(
                        DefaultFilenamePolicy.constructUsingStandardParameters(
                                new SerializableFunction() {
                                    @Override
                                    public ResourceId apply(String input) {
                                        return FileBasedSink.convertToFileResourceIfPossible(input);
                                    }
                                },
                                "output",
                                ".txt",
                                false
                        ))
                .withParseFn(new DoFn() {
                    @ProcessElement
                    public void processElement(ProcessContext c) {
                        // process each line
                        String line = c.element();
                        c.output(line);
                    }
                }));

此示例中,文件路径中使用通配符“*”来匹配文件名。但是,使用withHintMatchesManyFiles()方法和withFilenamePolicy()方法来指定文件名的过滤器和解释器,并使用正则表达式来匹配文件名的模式。同时,使用withParseFn()方法来处理每一行的数据。

相关内容

热门资讯

科技新动态!决战十三辅助辅助器... 科技新动态!决战十三辅助辅助器,互游拼三张脚本,详细器(有挂功能)运决战十三辅助辅助器辅助工具,进入...
近日!aapoker透视脚本下... 近日!aapoker透视脚本下载,德扑之星辅助工具如何设置,其实确实有挂(真实有挂)1、上手简单,内...
玩家爆料!闲逸亲友圈app辅助... 玩家爆料!闲逸亲友圈app辅助,江西上饶辅助器,详细教程(有挂规律)1、打开软件启动之后找到中间准星...
黑科技辅助挂!wepoker作... 黑科技辅助挂!wepoker作弊视频,智星德州插件怎么下载,真是确实有挂(有挂解密)智星德州插件怎么...
程序员教你!闲来透视辅助器最新... 程序员教你!闲来透视辅助器最新版,欢乐茶馆辅助,详细器(有挂教程)亲,关键说明,闲来透视辅助器最新版...
2026版辅助挂!hhpoke... 2026版辅助挂!hhpoker德州真的假的,德扑之星有透视辅助吗,总是确实有挂(有挂头条)1、下载...
总算了解!九九山城插件,皮皮衡... 总算了解!九九山城插件,皮皮衡阳字牌科技,详细攻略(有挂神器)1、用户打开应用后不用登录就可以直接使...
今天下午!wpk辅助哪里买,德... 今天下午!wpk辅助哪里买,德扑之星辅助工具如何设置,总是是有挂(证实有挂)1、进入游戏-大厅左侧-...
玩家必看科普!天天微友助手破解... 玩家必看科普!天天微友助手破解版,哥哥打大a辅助神器,详细挂(有挂方针)一、天天微友助手破解版可以开...
现有关情况通报如下!pokem... 现有关情况通报如下!pokemmo辅助器手机版下载,智星德州插件怎么下载,真是是真的有挂(详细教程)...