在 zsh 里将一个文本的各行展开为 N 个命令行参数

2022-09-14 23:55:49 +08:00
 lululau

TLDR:

MY_CMD ${(f)"$(<MY_FILE.txt)"}

解析:

示例场景:

需求:

根据一定条件从 DB 中查询到若干 OSS 对象的 key ,然后将 OSS 对象下载到本地

解决:

  1. 为了提高下载速度,需要并行下载,可以结合 parallel 命令和 rclone 进行下载,如使用 20 个并发下载: parallel -ij 20 rclone copy MY_STORAGE:MY_BUCKET/{} ./ -- key1 key2 key3
  2. 但是可能通常做法是按照条件将 OSS 对象的 key 列表输出到文本文件: arql -e MY_DB 'puts OrderItem.where(conditions...).pluck(:oss_key)' > oss_keys.txt, 而 parallel 不支持直接从文件中读取参数
  3. 因此可以借助这里的 ${(f)"$(<MY_FILE.txt)" 用法,将文本文件中的每一行转换成一个参数: parallel -ij 20 rclone copy MY_STORAGE:MY_BUCKET/{} ./ -- ${(f)"$(<oss_keys.txt)"; 文本行中即便存在空格等 shell 的 meta char 也没关系;但是需要注意进程参数列表的长度是有限制的,所以这个方法不适用于比较大的文本
540 次点击
所在节点   Z shell
0 条回复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/880106

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX