IT界的每个人都应该知道终端(Terminal)的基本知识,数据科学家也不例外。有时,终端是你的全部,尤其是在将模型和数据管道部署到远程机器时。
1、wget
wget实用程序用于从远程服务器下载文件。你可以用它来下载数据集,只要你知道网址,可以使用wget命令下载它,我以如下url为例:
https://raw.githubusercontent.com/jbrownlee/Datasets/master/airline-passengers.csv
如果你在Mac上,默认情况下wget不可用,请从终端执行brew install wget进行安装。数据集现在已经下载,让我们继续一些基本的探索。
2、head
如果你是Python用户,这会让您感到熟悉。否则,head命令用于打印文件的前N行。默认打印10行:
如果你想要一个不同的数字,比如说3,你可以使用-n参数。完整的命令是:
head -n 3 airline-passengers.csv
3、tail
tail命令与head命令非常相似,但它将打印最后N行。
默认打印10行:
与head一样,还可以使用-n参数指定要打印的行数。
我们现在已经介绍了基础知识,所以让我们继续讲一些更有趣的内容。
4、wc
有时你想知道文件中有多少个数据点。不需要打开它并手动滚动到底部。一个简单的命令可以为您节省一些时间:
总之,airline-passengers.csv文件包含144行。
5、grep
此命令用于处理文本,可以匹配字符串和正则表达式。我们将使用它只提取包含字符串“1949”的行。这是一个简单的数据集,所以我们不会有任何问题。默认情况下,grep命令将打印结果,但我们可以将其保存到另一个CSV文件:
6、cat
为了验证上一个操作是否成功,我们可以使用cat命令。它用于将整个文件打印到shell。你也可以用它来组合文件和更多,但这是另一个时间的主题。
现在,让我们打印整个文件。数据是按月汇总的,因此总共应该有12行:
7、find
你可以使用find命令搜索文件和文件夹。例如,执行以下命令将当前目录(由点指定)中的所有CSV文件打印到shell:
星号(*)表示文件名无关紧要,只要它以“.csv”结尾。
8、sort
顾名思义,sort命令可用于按某种标准对文件内容进行排序。例如,以下命令按乘客数量升序对数据集进行排序:
-k2参数指定对第二列进行排序。如果要按降序对文件排序,可以指定一个附加的-r参数:
9、nano
虽然技术上不是shell命令,但执行它会打开Nano编辑器。下面是如何创建Python文件:
nano pyfile.py
在这里,让我们编写一些简单的Python代码:
您可以在编辑器中编写任何Python代码,并进行对于简单终端命令来说过于复杂的分析。完成后,可以运行Python文件:
10、Variables
让我们用Variables来结束今天的文章。例如,当文件路径变长时,或者您需要多次使用它们时,它们可以派上用场。
下面是如何声明两个字符串变量并使用mv命令将airline-passengers-1949.csv文件重命名为new.csv:
ls命令用于列出目录中的文件,如我们所见,重命名操作成功。
以上就是python学习与数据挖掘应知应会的十大终端命令的详细内容,更多关于python数据挖掘十大终端命令的资料请关注服务器之家其它相关文章!
原文链接:https://blog.csdn.net/weixin_38037405/article/details/118077361