flat-file相关内容

Spring Batch:如何处理多行日志文件

我正在尝试使用Spring Batch将日志文件的内容导入数据库。 我目前正在使用FlatFileItemReader,但遗憾的是很多日志条目那没有抓住。两个主要问题是: 包含多行JSON字符串的行: 2012-03-22 11:47:35,307 DEBUG main someMethod(SomeClass.java:56):Do Something(18,true,nul ..
发布时间:2018-12-29 20:48:25 Java开发

将平面文件转换为Java对象

有人知道将平面文件转换为Java对象的任何好库吗?我找到了扁虫,但我正在寻找替代品。 解决方案 FFP - 平面文件解析库 http://jffp.sourceforge.net/ ..
发布时间:2018-12-07 12:08:40 Java开发

SQL Server导入向导将NULL视为文字字符串'NULL'

当我尝试将.csv逗号分隔的平面文件导入Microsoft SQL Server 2008R2 64位实例时,对于字符串列,原始数据中的NULL变为文字字符串“NULL”,并且在我收到的数字列中导入错误。谁能请帮忙???在此先感谢! 解决方案 将数据放入临时表,然后使用SQL代码插入生产表。 更新table1 set field1 = NULL 其中field1 ='null' ..
发布时间:2018-08-01 11:47:57 数据库

使用where子句将txt文件导入SQL Server

我有一个6.00 GB的 .txt 文件。它是制表符分隔的文件,因此当我尝试将其加载到SQL Server时,列分隔符是制表符。 我需要将 .txt 文件加载到数据库中,但我不需要所有的行6.00 Gb文件。我需要能够使用像 这样的条件选择* 到 其中column5 in('ab,'cd') 但这是一个文本文件并且无法将其加载到具有该条件的db ..
发布时间:2018-08-01 11:13:19 数据库

如何将平面文件(不是分隔文件)加载到HBase中?

我是hbase的新手,我有一个平面文件(非分隔文件),我希望将其加载到单个hbase表中。 这里是预览 0107E07201512310015071C11100747012015123100 我知道一个例子,从位置1到位置7是一个id,从位置7到15这是一个日期.... 问题是如何构建一个与我的文件对应的模式,或者如果有方法将其转换为分隔文件或使用jaql读取此类文件,因为 ..
发布时间:2018-06-01 12:38:05 分布式计算/Hadoop

防止使用PHP的多个条目

与网页上的投票设施并列显示的是以下输入字段,使访问者(投票人)能够以抽奖的形式输入他们的细节,作为他们参与投票的努力的奖励。 抽奖条目表单脚本未附加到投票脚本。抽奖条目表单脚本中的所有输入都将进行验证,并将信息发送到平面文件。这是一个短期的民意测验,只需7天就可能在小城镇论坛上不时发生的不同主题进行调查。 (ip也被收集) 名称: ..
发布时间:2018-03-13 20:47:55 PHP

SSIS Foreach循环与特定的平面文件

我试图从包含不同csv文件类型的文件夹导入不同的csv文件。 所以我需要筛选我的foreach循环与起始平面文件名称。 我只想处理以MyFileType_1 * .csv开头的文件,而不是同一文件夹中的其他文件。 任何建议是值得欢迎的,谢谢。 解决方案在你的for-each容器中可以指定哪些文件读作Ocaso在说。在for-each容器的变量映射选项卡中,您可以在其中设置要保存找到的文件的 ..
发布时间:2018-01-26 21:11:06 其他开发

平面文件数据库示例

我想看一些简单平面文件数据库的例子,以及如何通过数据层访问它们。我之前已经写过并从平面文件读取,但是我还没有创建一个使用文本文件访问应用程序数据的数据层。 如果可能的话看到有一个使用一个简单的,自定义的平面文件数据库的数据层的教程是很好的。以XML格式保存自定义业务对象,然后将其上传的示例将很好,因为XML非常受欢迎,易于使用。 我也将感谢任何链接讨论有关平面文件数据库设计的最佳实践的 ..
发布时间:2017-03-22 00:37:34 其他数据库

使用Java将SQL查询结果输出为平面文件

在Java中有一种简单或直接的方式将DB查询的结果输出到文件(csv,tab等)。也许在Hibernate中? 我知道一个查询结果可以转储到DB服务器上的一个平面文件。我正在寻找一种方法,一个应用程序可以运行查询,并获得这些结果到一个文件。 我实现一个选项是只是迭代结果集和输出记录一次一行用分隔符分隔。但是如果有一个内置的方式,或者一个Hibernate的方式 - 会更好! 我真 ..
发布时间:2017-03-19 22:45:42 Java开发

映射平面文本文件

在文本文件中,每行末尾的\\\ 检测到行。为此,需要读取整个文件,这对于大文件(例如2GB)来说是一个大问题。我正在寻找一个方法来读取单行而不走遍整个文件(虽然我知道这应该是一个复杂的过程)。 我知道的第一种方式是使用fseek()与偏移;但不实用。 创建键/值的平面文件;但我不知道是否有一种方法可以避免将整个内存加载到RAM中(应该像在php中读取数组一样)。 或者,我们可以数字 ..
发布时间:2017-03-18 19:56:26 PHP

NHibernate可以持久化为平面文件而不是数据库吗?

这里是一个好奇心的问题。我有一个应用程序必须支持平面文件和数据库作为一个地方来保存数据。我想可能使用.csv或制表符分隔的文件集作为输入... 是否可以使用NHibernate写入以执行持久化任务? / p> 解决方案 尝试使用Jet引擎(请参阅 this ) 方言和其他休眠设置应该是 for Microsoft Access 。 ..
发布时间:2017-03-14 04:39:09 其他数据库

平面文件数据库

有关在PHP中创建平面文件数据库结构的最佳做法是什么?很多更成熟的PHP平面文件框架,我看到尝试实现类似SQL的查询语法,这是超过了我的目的在大多数情况下(我只是使用一个数据库在那一点)。 有没有什么优雅的技巧,以获得良好的性能和功能与小代码开销,一个人会想通过这个问题,首先处理? 解决方案 那么,平面数据库的性质是什么。它们是大还是小。它是简单的数组与数组在其中?如果它的东西简单说 ..
发布时间:2017-03-14 03:05:33 PHP

为什么要使用MySQL over flatfiles?

一个朋友和我正在辩论他是否应该使用MySQL或flatfile数据库用于他的网站的后端。我告诉他要和MySQL一起去,因为它是结构化的,持有的记录很好,并且是一致的。他另一方面说他宁愿去速度。读取文件比连接MySQL更快得多,它让我想知道他是否是对的。例如,为什么不只为每个表创建一个文件夹,例如: users / groups / posts / ,文件夹中有以ID命名的文件( 1 , 2 , 3 ..
发布时间:2017-03-14 00:37:35 数据库

如何使用C#和FileHelpers 3.1中的智能格式检测器动态解析CSV文件?

根据此 FileHelpers 3.1示例,您可以自动检测CSV文件格式使用FileHelpers.Detection.SmartFormatDetector类。 但示例不再进一步。如何使用此信息动态解析CSV文件?它必须与DelimitedFileEngine有关,但我看不到如何。 更新: 我想出了一个可能的方法,但不得不求助于使用反射(这感觉不对)。有没有另一个/更好的方法? ..
发布时间:2017-02-24 21:30:23 Office

不能单独的文本文件通过分隔符|

我使用C#。 我想在一个文本文件为对象来拉。我使用的是ODBC连接,它看起来像这样 驱动= {Microsoft文本驱动程序(* .TXT; * .csv的)}; DBQ = C:\Users \Owner\Desktop\IR\IR_Files\Absolute;扩展= ASC,csv,选项卡,TXT; 我能够进行连接,但我不能让我的列分开。我使用的是schema.ini文件, ..
发布时间:2016-10-01 18:34:35 C#/.NET

逃避棘手的字符串CSV格式

我要创建Web服务,从输出一个CSV文件,CSV文件使用带有逗号分隔符带引号的字符串。 我不能改变格式 ... 所以,如果我有一个字符串它成为“串” ... 。如果数值已经被替换,则用双引号引号。 例如,一个海峡“ING 变成”海峡“,”ING“ ... 不过,最近我的进口一直因为以下 失败原来输入的字符串: “”,“字词1,word2和......” 每个单引号替换为双导 ..
发布时间:2016-09-18 12:56:22 C#/.NET

转换COMP和COMP-3压缩十进制到用C可读价值

我必须从大型机到C模块处理的EBCDIC平面文件。有什么可以在转换COMP和COMP-3的值转换为可读取值的好方法?我必须对EBCDIC字符转换为ASCII然后COMP-3六角?怎么样的COMP?谢谢 解决方案 伍杰比尔给你一些非常好的建议,通过他的评论是你的问题,其实他回答了这个问题,应该有 发表他的言论作为一个答案。 我想重申他的几个点,扩大对其他几个人。 如果你需要转换创建的文 ..
发布时间:2016-08-24 14:00:56 C/C++

从非平面文件处理文本(以提取信息,就好像它*其中*平面文件)

我有一台电脑模拟产生一个纵向数据集可以重新通过下面的表格psented $ P $('变种'是变量): 时代主题VAR1 VAR2 VAR3 T1 subjectA ... T2 subjectB ... 和主题名称 subjectA NAMEA subjectB nameB 不过,生成的文件中写入的格式类似于下面的数据文件:时间t1 描述 subjectA NAMEA VAR1 ..
发布时间:2016-07-28 16:35:47 Python