标签: flat-file

所以我的程序需要一行一行地通过纯文本文件:

Read line 1:
Do commands
loop
Read line2:
Do Commands
loop

等等,直到完成整个文件,任何人都知道任何好的编码示例,所有的教程似乎显示打开和写/读文本文件,但没有关于如何逐行进行.

这是一个相当长的故事,但为了缩短它我需要在文件系统中本地存储我的数据库的一部分.我不能使用像MySQL这样的普通数据库而且我不能使用XML文件(理论上我可以使用XML-s但它们不够灵活,我需要一些非常复杂的PHP代码层来使XML可用).是否有某种解决方案可以将多个DB表移动到文件系统并使用它们进行正常操作？

几年前我使用平面文件,它们非常接近我需要的东西.然而我对平面文件不喜欢的是它们很粗糙 - 你需要手动完成所有操作,你不能只做"SELECT name FROM some_table WHERE age> 30"之类的事情,而是你需要手动浏览文件并选择所需的条目.

那么,您能否提出一些模仿SQL但将所有内容存储在本地文件中的解决方案.此外,这不应该是非常奇特的东西,因为该产品将部署在许多随机主机上,通常我们无法控制那里安装的内容.

谢谢你的帮助!

我有一个固定宽度的文件,大约1200个字符宽,有大约300多列.我正在寻找一种在SSIS中创建固定宽度数据源的方法,而无需使用平面文件连接管理器的UI.有没有办法修改列定义而无需在SSIS中使用UI？我无法在项目的任何位置找到数据连接的文件.

我注定要逐个手动地将300多列添加到平面文件连接管理器中吗？

我有一个大的(450MB/2.5亿行)1s和0s的平面文件,看起来像这样......

    1
    0
    0
    1
    0
    1
    0
    etc...

我使用以下方法将其读入R ...

dat <- as.numeric(readLines("my_large_file"))

我得到了理想的数据结构,但需要很长时间.有什么建议可以更快的方法来达到相同的效果吗？

NB.1和0的顺序对于保存很重要.我会在unix命令行的python中考虑选项,但是在R中需要最终的数据结构来绘制图形.

只是寻找一个可以通过编程方式调用的组件,以一种非常简单的方式导入平面数据文件.数据通常为100,000-500,000行,每行包含大约200个字段的文本,长度约为5到250个字符.数据可以是CSV,制表符分隔等.

这有一些预算,但如果可能的话,我希望保持相当便宜.

我正在尝试使用SSIS平面文件目标，但是无法解决使输出文件具有命名为同一事物的两列的问题。

我要求输出文件具有列标题：

first1, last1, email, shortname, email

每当我尝试映射源数据时，都会收到错误消息，提示诸如“此列名称已存在”和“有多个数据源列，名称为”电子邮件”之类的信息。

最好的解决方法是什么？

谢谢

我目前正在WinXP上运行Strawberry Perl,我正在尝试处理一个unix格式的平面文件.平面文件使用换行符来分隔字段,并使用换行符来分隔记录.我试图将FF转换为其他任何东西(CRLF,';',TAB等).我尝试过使用以下perl one-liners但没有成功:

perl -p -e 's/\f/\r\n/g' < unix.txt > dos.txt
perl -p -e 's/\x0c/\x0d\x0a/g' < unix.txt > dos.txt
perl -p -e 's/\f/\t/g' < unix.txt > dos.txt

我唯一注意到的是dos.txt最终将所有LF字符转换为CRLF,但FF字符仍然存在.我甚至试图重新处理dos.txt文件,再次尝试替换FF,但仍然没有骰子.我仍然是一个perl新手,所以也许我错过了什么？有谁知道为什么上面的命令不能做我想让他们做的事情？

好吧,我有2个"扇区"的行,由换行符分隔

[RandomThings1]
[RandomThings1]
[RandomThings1]
[RandomThings1]

[RandomThings2]
[RandomThings2]
[RandomThings2]
[RandomThings2]

我希望有这个:

[RandomThings1][RandomThings2]
[RandomThings1][RandomThings2]
[RandomThings1][RandomThings2]
[RandomThings1][RandomThings2]

我怎样才能做到这一点？如果没有正则表达式或记事本++,还有另一种方法可以做到这一点,欢迎使用(w indows的工具)

我要在BizTalk中选择一个csv文件,经过一些过程后我想用两个或更多不同的系统更新它.

为了获取csv文件,我使用默认设置Flatfile Disassembler来破解它并在生成模式的帮助下将其构建为XML.我可以使用一些一致的数据成功地做到这一点但是如果我在其中使用带逗号的数据(除了分隔符),BizTalk失败了!

没有使用自定义管道组件的任何其他方法吗？期待flatfile反汇编程序组件中的简单配置!

我找不到使用数据库而不是普通文件的优点和缺点.你能帮帮我吗？