有什么好方法批量处理文本中的信息？

[Mizzi]

比如批量命名、删除替换其中信息、每行分割成新的文件等等

[Shared]

我不会向你推荐 awk, sed, grep, find 和 xargs 的

[Mizzi]

@Shared 想实现每行创建一个新文件，以此行前5位字符命名，有什么方法吗？

[frankzeng]

python可满足你的要求

[huson]

python +1

[Tink]

sed

[Tomilay]

Perl

[lululau]

简单的 sed/awk，复杂的 Perl

[Shared]

@Mizzi awk '{ system("touch "substr($0, 0, 5)".txt") }' input.txt

[Shared]

@Mizzi 上面好多人推荐 Python，那来个 Python 一行的：

[open(line[:5] + ".txt", 'a') for line in open("input.txt", 'r').readlines()]

[wilsonxyz]

@Shared 几千万条的数据也可以这样子打开吗？

[Shared]

@wilsonxyz 请不要讲极端情况，极端情况有别的处理方法

[Shared]

@wilsonxyz 另外，awk 的方案对行数无要求

[wilsonxyz]

@Shared 我不谈极端情况，我只是请教。

[dofine]

awk sed 一般都能满足要求啦
python 更好写也容易懂一点
个人感觉

[vivisidea]

@Shared 文件对象本身可以迭代的，.readlines()应该是可以去掉的

@wilsonxyz 千万条数据的情况，我觉得是可以这么处理的，慢慢建就行了阿，首先文件系统里创建千万个文件要能撑住

[Mizzi]

@Shared 学到了，感谢大神，另外向上面说的，如果是无上限的数据也可如此处理不会有问题吗？

[Shared]

@vivisidea 好的，学到了。


@Mizzi 你需要考虑的是 IO 性能