Linux 中的各种事物比如像文档、目录（Mac OS X 和 Windows 系统下称之为文件夹）、键盘、监视器、硬盘、可移动媒体设备、打印机、调制解调器、虚拟终端，还有进程间通信（IPC）和网络通信等输入/输出资源都是定义在文件系统空间下的字节流。 一切都可看作是文件，其最显著的好处是对于上面所列出的输入/输出资源，只需要相同的一套 Linux 工具、实用程序和 API。你可以使用同一套api(read, write)和工具(cat , 重定向, 管道)来处理unix中大多数的资源. 设计一个系统的终极目标往往就是要找到原子操作，一旦锁定了原子操作，设计工作就会变得简单而有序。“文件”作为一个抽象概念，其原子操作非常简单，只有读和写，这无疑是一个非常好的模型。通过这个模型，API的设计可以化繁为简，用户可以使用通用的方式去访问任何资源，自有相应的中间件做好对底层的适配。 现代操作系统为解决信息能独立于进程之外被长期存储引入了文件，文件作为进程创建信息的逻辑单元可被多个进程并发使用。在 UNIX 系统中，操作系统为磁盘上的文本与图像、鼠标与键盘等输入设备及网络交互等 I/O 操作设计了一组通用 API，使他们被处理时均可统一使用字节流方式。换言之，UNIX 系统中除进程之外的一切皆是文件，而 Linux 保持了这一特性。为了便于文件的管理，Linux 还引入了目录（有时亦被称为文件夹）这一概念。目录使文件可被分类管理，且目录的引入使 Linux 的文件系统形成一个层级结构的目录树
Linux上的文件系统一般来说就是EXT2或EXT3，但这篇文章并不准备一上来就直接讲它们，而希望结合Linux操作系统并从文件系统建立的基础——硬盘开始，一步步认识Linux的文件系统。
02_Linux基础-ls-mkdir-cd-pwd-man-useradd-su-rm-tree-tab-passwd-w-ssh-touch-date-stat-cp-mv-du-文件系统层次结构-提示符-进程-命令格式-隐藏文件-通配符-绝对/相对路径-{1..100}---一. 基本命令lsls --- 查看文件夹内容 ==> list图片ls -l//ls -l显示文件的详细信息图片//ls -l显示文件的详细信息 (大概能看到文件时间 ，不详细)ll是 ls -l 的别名图片其他参数-l
一、HDFS分布式文件系统的shell操作 HDFS的shell操作基本和Linux的shell命令差不多，我这边重点介绍几个常用的文件操作的命令，其它更多的操作命令很少用到，当然你也可以通过“fs -help”查看所有命令。 重点在第二部分，介绍HDFS的基本工作机制。 1）–ls显示当前目录结构 -ls:该命令选项表示查看指定路径的当前目录结构，参数：-R递归显示目录结构，后面跟hdfs路径。 hadoop fs -ls / hadoop fs -ls hdfs://Hadoop1:9000/ha
语法： ls [选项][目录或文件] 功能：对于目录，该命令列出该目录下的所有子目录与文件。对于文件，将列出文件名以及其他信息 常用选项：
假设有这样一个任务，希望对某个文件夹（包括所有子文件夹与文件）中的所有文件进行处理。这就需要遍历整理目录树， 处理遇到的每个文件。
Linux目录结构的组织形式和Windows有很大的不同。首先Linux没有“盘(C盘、D盘、E盘)”的概念。已经建立文件系统的硬盘分区被挂载到某一个目录下，用户通过操作目录来实现磁盘读写。
du [-abcDhHklmsSx] [-L <符号连接>][-X <文件>][--block-size][--exclude=<目录或文件>] [--max-depth=<目录层数>][--help][--version][目录或文件]
Linux 作为最大也是最成功的开源项目，吸引了全球程序员的贡献，到目前为止，共有两万多名开发者给 Linux Kernel 提交过代码。令人惊讶的是，在项目的前十年(1991 ~ 2002)中，Linus 作为项目管理员并没有借助任何配置管理工具，而是以手工方式通过 patch 来合并大家提交的代码。倒不是说 Linus 喜欢手工处理，而是因为他对于软件配置管理工具(SCM)非常挑剔，无论是商用的 clearcase 还是开源的 cvs、svn 等都不能入他的法眼。在他看来，一个能够满足 Linux 内核项目开发使用的版本控制系统需要满足几个条件：1) 快 2)支持多分支场景（几千个分支并行开发场景） 3) 分布式 4) 能够支持大型项目。直到2002年，Linus 终于找到了一款基本满足他要求的工具——BitKeeper, 而 BitKeeper 是商业工具，他们愿意给 Linux 社区免费使用，但是需要保证遵守不得进行反编译等条款。BitKeeper 提供的默认接口显然不能满足社区用户的全部需要，一位社区开发者反编译 BitKeeper 并利用了未公开接口，这让 BitKeeper 公司撤回了免费使用的 License。不得已，Linus 利用假期十天时间，实现一款 DVCS —— Git，并推送给社区开发者们使用。
这一部分主要是讲解Linux常用命令工具，比如文件管理，文本处理等等，主要是为了让读者用最少的实践掌握和熟练应用基本的Linux操作，对于每个命令的举例，尽量做到小而精。 废话少说，我们先从最基础的开始： 1. ls ls命令是Linux下最常用的命令，ls命令就是list的缩写。 缺省下ls用来打印出当前目录的清单，如果ls指定其他目录，那么就会显示指定目录里的文件及文件夹清单。 通过ls命令不仅可以查看Linux文件夹包含的文件，而且可以查看文件权限(包括目录、文件夹、文件权限)，查看目录信息等等，l
在 windows 系统中，有一个 CMD 指令可以生成目录树，该条指令是 "tree" 。
引入用户 Linux是一个多用户、多任务的系统，由于常常会有多个人同时使用这台主机，所以“文件所有者”的角色就显得非常重要，我们可以管理自己的隐私和适应的工作环境。Linux根据uid来标记用户，而用户的名字只是为了我们能够一目了然。
du [-abcDhHklmsSx] [-L <符号连接>][-X <文件>][--block-size][--exclude=<目录或文件>] [--max-depth=目录层数>][--help][--version][目录或文件]
2、返回当前文件夹名称的字符串。当前文件夹中子文件夹字符串列表。当前文件夹中文件字符串的列表。
编写一个程序，遍历一个目录树，查找特的那个拓展名的文件（如，.jpg或.pdf）。不论这些文件位置在哪里，将它们拷贝到一个新的文件夹中
1. PIL库是python里官方的图像处理库，全名为python image library。
du [-abcDhHklmsSx] [-L <符号连接>][-X <文件>][–block-size][–exclude=<目录或文件>] [–max-depth=<目录层数>][–help][–version][目录或文件]
Python 应用程序经常会使用一些不属于标准库的包和模块。应用程序有时候需要某个特定版本的库，因为它需要一个特定的 bug 已得到修复的库或者它是使用了一个过时版本的库的接口编写的。 这就意味着可能无法安装一个 Python 来满足每个应用程序的要求。如果应用程序 A 需要一个特定模块的 1.0 版本但是应用程序 B 需要该模块的 2.0 版本，这两个应用程序的要求是冲突的，安装版本 1.0 或者版本 2.0 将会导致其中一个应用程序不能运行。 这个问题的解决方案就是创建一个 虚拟环境 （通常简称为 “virtualenv”），包含一个特定版本的 Python，以及一些附加的包的独立的目录树。 不同的应用程序可以使用不同的虚拟环境。为了解决前面例子中的冲突，应用程序 A 可以有自己的虚拟环境，其中安装了特定模块的 1.0 版本。而应用程序 B 拥有另外一个安装了特定模块 2.0 版本的虚拟环境。如果应用程序 B 需求一个库升级到 3.0 的话，这也不会影响到应用程序 A 的环境。
os.walk() 方法用于通过在目录树中游走输出在目录中的文件名，向上或者向下。
###Python文件夹与文件的操作 最近频繁的与文件操作打交道，这块比较弱，在百度上找到一篇比较不错的文章，这是原文的传送门 有关文件夹与文件的查找，删除等功能在os模块中实现，使用时需要导入这个模块: import os ####一、获取当前目录 s = os.getwd() s中保存的就是当前的目录（即文件夹） 下面是一个例子：将abc.py放在A文件夹，不管A放置在硬盘的哪个位置，都可以在A文件夹内生成一个新的文件夹。且文件夹的名字跟据时间自动生成： import os import time fi
在Git项目中，代码的频繁迭代会使得追踪项目文件结构变化的过程异常艰难，尤其是历史 commit 中存在、当前最新版本中已经不存在的文件/文件夹。
本节主要介绍路径操作和文件夹操作的命令，包括更换路径、显示目录、创建和删除文件夹。本节命令速览：
tree 命令显示当前文件夹的目录结构，这是一个非常有用的命令，可以帮我们迅速了解当前目录的结构。
标准库函数os.listdir()是在文件操作和文件遍历时常用的函数之一，用来获取指定文件夹中的所有文件和子文件夹名称组成的列表，完整语法为：
《使用 tree 命令格式化输出目录结构》一文介绍了如何使用 tree 命令输出目录结构。tree 命令可以用于显示文件和文件夹的层次结构，包括它们的文件和子文件夹。在文章中还介绍了如何使用 tree 命令列出目录及文件、仅列出目录、更详细的参数设置等。
TreeSize 作为一款时下极其出色且专业好用的硬盘空间管理工具，凭借着其全新智能化检测技能和强大的功能系统，深得广大用户喜爱哦！该软件精致小巧、界面清爽简约，通过软件我们可以一键进行智能化检测磁盘文件与存储量操作，并实时为你显示文件大小、实际占空间数以及其浪费的空间等数据，从而让你可以根据自身使用需求删除一些不中用的文件。从而节省电脑的磁盘空间，尤其对于清理C盘特别有帮助！
cat /etc/shells //查看当前系统有那些shell cat $SHELL
大部分情况下大家分享nas中的文件都是通过直接生成连接的形式发给朋友，但如果有些东西我没有存在nas中，上传到nas再去生成链接再发给基友，多少有点不方便了，于是文件分享站变有了它存在的意义。我们可以将一些nas中没有存放的文件放上面供基友自行查看。
linux命令格式： command [-options] [parameter1] [parameter2] ... 命令 选项 参数
对文件的操作算是Python中一个基础又重要的知识点了，无论是在爬虫、数据分析、Web开发，还是在编写图形界面、进行数据分析，都有可能需要用到文件相关的操作。
官方文档：https://docs.microsoft.com/zh-cn/dotnet/csharp/programming-guide/file-system/
后台运行 python的输出有缓冲，导致日志文件并不能够马上看到输出 nohup python3 -u xxxx.py > nohup.out & # -u参数，使得python不启用缓冲 批量移动/删除 可以解决移动文件数目过大的问题（Argument list too long） find test/ -name "*.jpg" -exec cp {} train ; find test/ -name "*.jpg" | xargs -i rm {} 查看端口 一般管道符grep和nets
那么我们该怎么像大佬一样优秀呢？其实很简单，我们可以使用windows自带的 tree 命令。
新来的实习生【悲郭】因为不太熟悉git的使用，总是把自己的代码给弄丢了，这次好了，把辛苦写了一个月的功能全弄丢了。还好我力挽狂澜帮他恢复了过来。下面我们分两种代码丢失的场景情况来讨论。
在数据整理过程中，有时会生成一些临时的文件，数据整理完之后往往需要将其删除。本文就介绍下如何用 Stata 删除路径下的所有文件。
本次分享的需要进行数据恢复的设备是一台NetApp存储，共有24块磁盘组成。由于管理员误操作删除文件夹，导致数据丢失。而后使用时才发现数据丢失，联系到北亚进行数据恢复。
下图是《Python程序设计开发宝典》第330页例12-7的代码，本意是使用多线程技术进行文件复制，重点演示嵌套函数定义、多线程编程技术以及队列在多线程同步时的用法。
遍历”Day1-homework”目录下文件； 找到文件名包含“2020”的文件； 将文件名保存到数组result中； 按照序号、文件名分行打印输出。 注意：提交作业时要有代码执行输出结果
cd目标文件夹路径,然后 tree 一下，会将该层级下所有文件都遍历了输出，不管层级多深
我在生产服务器上有一个很大的200GB的日志文件需要删除。我的rm和ls命令已经崩溃，我担心这是由于巨大的磁盘IO造成的，要删除这个大文件，输入：
以上这些命令行在前端开发中经常使用，能够熟练掌握它们，可以更方便地在Linux系统中进行文件操作和日常维护。
Windows 系统用久了，磁盘中就会产生大量的“垃圾”文件。这些文件有的是程序使用过的临时文件，有的是操作记录和日志信息等。因为往往不能被有效地清理干净，越积越多，导致用户的可用空间越来越小。同时也会因为碎片文件过多，使得系统的运行速度受到一定影响。 像我这种强迫症用户显然受不了这种状况，定期清理垃圾文件很有必要。 对于 Windows 系统，网上有一些现成的垃圾文件清理脚本。不过作为一个 Python 学习者，当然要自己动手来实现一个才合理嘛。 Python 的 os 模块，提供了较为丰富的处理系统文件
林纳斯·本纳第克特·托瓦兹（Linus Benedict Torvalds，1969年12月28日- ）也就是Linux之父：
linux系统是用户权限管理非常明确，目录结构是一个根目录的目录树。每个文件有所有者u，所在组g，其他组o，不同组对文件处理权限有读r写w执行x。
linux mkdir 命令用来创建指定的名称的目录，要求创建目录的用户在当前目录中具有写权限，并且指定的目录名不能是当前目录中已有的目录。
努力与运动兼备～有任何问题可以加我好友或者关注微信公众号，欢迎交流，我们一起进步！
os.path.isdir(name) #判断指定对象是否为目录。是True,否则False。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
