问题标签 [filesplitting]

我需要将大约 10 GB 的大文本文件拆分为多个文本文件（主要是 1 GB 文件）并将这些相同的文本文件合并到一个文件中。

下午好！

长期阅读，第一次海报！我一直在尝试修改一个工作批处理文件以解决可变性问题。情况是我有一个可变大小的文本文档，通常可以分成 252 行的部分。下面的代码就像一个冠军：

但是，文本格式发生了一些变化，现在每个拆分文件不再是四页 63 行，而是完全可变的。唯一不变的是最后一行，它位于 63 行页面的剩余空间之前：

请注意，它前面有一个空格，还有多个空格、冒号和下划线字符。作为我的肉头，我想我可以在 for 循环中插入一个 if-then 语句来触发批处理拆分到下一页。但是，我现在可能更进一步。这是我一直在用的代码：

前提是每 63 行检查一次停止变量 (S)。如果它关闭 (0)，则批处理将继续写入另外 63 行（一页）。如果 stopvar 与 for 循环正在读取的行匹配，则 S 变为 1。当程序再次检查时，它将创建一个新文件并开始写入该新文件。现在，基于关闭 @echo 关闭挂断是在 for 循环。见下文：

你觉得呢？你有没有什么想法？我的批次哪里出错了？我希望我可以使用不同的东西，但可惜我不能，因为公司内部的原因。谢谢你的帮助！

我们有目前的情况。我使用 Apache Camel，为小型交换拆分大文件（使用拆分器，见下文）并验证它们。然后我需要聚合消息，但我使用聚合器，它需要设置编译大小或其他。我可以在不设置限制的情况下汇总当前文档中的所有交换吗？

我的路线：

要设置聚合器，我用来设置交换次数或时间，但我不知道会有多少次交换。

我正在阅读很多线程 - 但对我个人而言没有任何内容。我需要以以下形式拆分文本文件：

按行划分内容------------- Instance Type and Transmission --------------并在较新的文件中输出文本。

像这样：

文件1：

文件2：

Perl 和 awk 做到这一点非常简单，我找到了一些示例，在 powershell 中没有任何内容，只有按大小拆分的文本文件。

感谢@CB。我以对多个文件有效的解决方案结束：

我的示例文本文件如下：

我想分隔每个数字块。这些块由包含#N/A #N/A. 每个块必须保存到不同的名为segment"blocknumber".txt.

有没有一种简单的方法可以通过批处理文件来做到这一点？

我有一个包含 n 页的 PDF 页面作为输入。在每第 m 页上，都有一个我想裁剪并保存为图像的区域。

具体例子：

• 500 页 PDF
• 在每 10 页上，我想从点 (10,10) 到 (110,110) 裁剪区域并将其保存为单个图像

我认为最好的解决方案是一个工具，它只需一个命令行调用就可以做到这一点，这样就不需要使用迭代编程/将输出作为输入传递给其他调用。不幸的是，我还没有找到这样的工具。任何想法？

需要在 Linux 上运行。

我在批处理文件中使用以下命令来存档 MY_LARGE_FOLDER 并且我的 .rar 文件太大：

1. 如何使用批处理文件将 MY_LARGE_FOLDER 归档为 4MB 的小 .rar 文件？（或者换句话说，如何使用批处理文件使用“拆分为卷，字节”选项？）

谢谢。

谢谢您的帮助！我使用了 -v 开关：

我现在得到了 4 个 4000 字节的文件，但是在打开一些文件后，我看到这些文件在多个存档中重复（例如在 Part01.rar 和 Part02.rar 上）？1.我也试过-s（solid）开关，结果是一样的吗？
我该如何解决？

我正在尝试修改最初用于 gnuplot 的数据。数据如下所示：

我只想阅读包含 11 列的第二部分。Gnuplot 通过指示 ind 0 或 ind 1 以一种智能的方式执行此操作。知道如何在 R 中拆分文件吗？

我的应用程序中有一个文件上传功能，它无法上传大小超过 10MB 的 JSON 文件。如果用户上传的文件 >= 10 MB ，我的应用程序应将其拆分为较小的 JSON 文件，每个文件小于 10MB。此外，需要在新的小文件中维护正确的 JSON 对象。

有没有办法在 Javascript 或 jQuery 中做到这一点？

对于我正在进行的一个项目，我试图尽快计算文本文件中的元音。为了做到这一点，我正在尝试一种并发方法。我想知道是否可以同时读取文本文件以加快计数？我相信瓶颈是 I/O，因为现在我正在通过缓冲读取器读取文件并逐行处理，所以我想知道是否可以一次读取文件的多个部分。

我最初的想法是使用 拆分文件 - Java/Linux

但显然 MappedByteBuffers 在性能方面并不是很好，一旦我拆分，我仍然需要从每个 MappedByteBuffer 中逐行读取。

另一种选择是在阅读一定数量的行后拆分，但这违背了目的。

将不胜感激任何帮助。