jupyter notebook 参数传递给shell命令行实例

在使用Jupyter Notebook进行数据分析或机器学习项目时，有时我们需要将Notebook中的变量或结果传递给操作系统中的命令行工具，例如执行系统级别的脚本、处理文件等。本篇内容将介绍如何在Jupyter Notebook中调用shell命令行，并传递参数。 在Jupyter Notebook中，可以使用`!`符号来执行shell命令。例如，在`for`循环中，我们想要根据不同的模型（model）、数据集（dataset）和步长（stride）组合，读取对应日志文件的最后三行。这可以通过以下方式实现： ```python dataset = ["el", "tv"] model = ["model"] stride = [32, 64, 256, 512] for m in model: for d in dataset: for s in stride: print(f"{m} {d} {s}") # 构建tail命令的参数，N{m}_hp_emb{s}_adam_{d}_log_1.txt c = f"tail -n3 N{m}_hp_emb{s}_adam_{d}_log_1.txt" # 使用!执行shell命令 !$c print("-" * 100) ``` 这段代码中，`!$c`会执行由字符串`c`构建的shell命令，即`tail -n3`命令，它会读取指定文件的最后三行。这样，我们就可以根据循环中的变量动态地调整命令行操作。 补充一下Jupyter Notebook的快捷键知识，这对于提高效率非常重要： - **编辑模式**：在编辑模式下，用户可以直接输入代码或文本。可以通过按`Enter`进入编辑模式，此时单元格边框呈绿色。在此模式下，常用的快捷键包括： - `Shift + Enter`: 运行当前单元，选择下一个单元。 - `Ctrl + Enter`: 运行当前单元。 - `Alt + Enter`: 运行当前单元并在其下方插入新单元。 - `Tab`: 代码补全或缩进。 - `Ctrl + ]`: 缩进。 - `Ctrl + [`: 解除缩进。 - `Esc`: 退出编辑模式进入命令模式。 - `Ctrl + M`: 同样可退出编辑模式进入命令模式。 - **命令模式**：在命令模式下，用户可以执行全局操作。按`Esc`键进入命令模式，此时单元格边框呈灰色。在命令模式下，常用快捷键包括： - `A/a`: 在当前单元上方插入新单元。 - `B/b`: 在当前单元下方插入新单元。 - `DD/dd`: 删除当前选中的单元。 - `Shift-M`: 合并选中的单元。 - `L`: 切换当前单元的行号显示。 - `H`: 显示快捷键帮助。 - `Y`: 将单元转换为代码单元。 - `M`: 将单元转换为Markdown单元。 - `1`到`6`: 分别设定1到6级标题。 了解并熟练使用这些快捷键，可以极大地提高在Jupyter Notebook中的工作效率。 通过结合Jupyter Notebook的shell命令调用和快捷键使用，我们可以更高效地与系统交互，处理各种任务，如文件操作、数据预处理、结果可视化等。掌握这些技巧，对于数据科学家和开发人员来说是非常重要的。