<<The Linux Command Line>> 第二一章笔记 文本处理

cat -A

显示非打印字符

dos2unix & unix2dos

在windows和linux的文本格式之间转换

sort

程序能接受命令行中的多个文件作为参数，所以有可能把多个文件合并成一个有序的文件。
例如， 如果我们有三个文本文件，想要把它们合并为一个有序的文件，我们可以这样做：

1
sort file1.txt file2.txt file3.txt > final_sorted_list.txt

uniq

会删除任意重复行
sort 程序支持一个 -u 选项，其可以从排好序的输出结果中删除重复行。

cut

1
cut -f 3 distros.txt | cut -c 7-10

expand & unexpand

它既可以接受一个或多个文件参数，也可以接受标准输入，并且把 修改过的文本送到标准输出。
Coreutils 软件包也提供了 unexpand 程序，用 tab 来代替空格。

paste

与cut相反

1
paste distros-dates.txt distros-versions.txt

join

操作通常与关系型数据库有关联，在关系型数据库中来自多个享有共同关键域的表格的 数据结合起来，得到一个期望的结果。

comm

comm -12 file1.txt file2.txt

diff

patch

tr

translate

sed

stream editor

aspell

展开全文 >>

<<The Linux Command Line>> 第二十章笔记 正则表达式

grep, global regular expression print

  • -c 打印匹配的数量（或者是不匹配的数目，若指定了-v 选项），而不是文本行本身。 也可用--count选项来指定。
  • -l 打印包含匹配项的文件名，而不是文本行本身，也可用--files-with-matches 选项来指定。
  • -L 相似于-l 选项，但是只是打印不包含匹配项的文件名。也可用--files-without-match 来指定。

/usr/share/dict下有英文字典

你知道你的 Linux 系统中带有一本英文字典吗？千真万确。
看一下 /usr/share/dict 目录，你就能找到一本， 或几本。

locale

使用 locale 命令，来查看 locale 的设置。
把这个 LANG 变量设置为 POSIX，来更改 locale，使其使用传统的 Unix 行为。

1
[me@linuxbox ~]$ export LANG=POSIX

注意这个改动使系统为它的字符集使用 U.S.英语（更准确地说，ASCII），所以要确认一下这 是否是你真正想要的效果。
通过把这条语句添加到你的.bashrc 文件中，你可以使这个更改永久有效。

Alternation

例:

1
echo "AAA" | grep -E 'AAA|BBB|CCC'

为了把 alternation 和其它正则表达式元素结合起来，我们可以使用()来分离 alternation。

1
[me@linuxbox ~]$ grep -Eh '^(bz|gz|zip)' dirlist*.txt

限定符

扩展的正则表达式支持几种方法，来指定一个元素被匹配的次数。

1
^\(?[0-9]{3}\)?  [0-9]{3}-[0-9]{4}$

这样一种扫描会发现包含空格和其它潜在不规范字符的路径名：

1
[me@linuxbox ~]$ find . -regex '.*[^-\_./0-9a-zA-Z].*'

zgrep 程序

grep 的前端，允许 grep 来读取压缩文件。

展开全文 >>

<<The Linux Command Line>> 第十九章笔记 归档和备份

gzip, gunzip, zcat, zless

bzip2, bunzip2, bzcat, bzip2recover

tar

是 tape archive 的简称
除非你是超级用户，要不然从归档文件中抽取的文件 和目录的所有权由执行此复原操作的用户所拥有，而不属于原始所有者。

tar 命令另一个有趣的行为是它处理归档文件路径名的方式。默认情况下，路径名是相对的，而不是绝对 路径。
当创建归档文件的时候，tar 命令会简单地删除路径名开头的斜杠。
z参数使用gzip压缩, j参数使用bzip2压缩

1
find playground -name 'file-A' | tar czf playground.tgz -T -

zip, unzip

rsync

(remote sync之意), 用来备份挺好的,

1
2
3
sudo rsync -av --delete /etc /home /usr/local /media/BigDisk/backup
sudo rsync -av --delete --rsh=ssh /etc /home /usr/local remote-sys:/backup
rsync -av -delete rsync://rsync.gtlib.gatech.edu/fedora-linux-core/development/i386/os fedora-devel

展开全文 >>

<<The Linux Command Line>> 第十八章笔记 查找文件

locate & updatedb

数据库由另一个叫做 updatedb 的程序创建

find

添加测试条件-type d 限制了只搜索目录。-type f 限制只搜索文件, -size 指定大小

1
find ~ -type f -name "\*.JPG" -size +1M | wc -l

find命令的预定义操作例如-delete,一定要放到末尾,否则可能会有灾难性后果,因为可能测试(如-type, -name)还没做就删除了
-ok参数可以在执行前询问用户是否确认

1
find ~ -type f -name 'foo*' -exec ls -l '{}' +

处理古怪的文件名

类 Unix 的系统允许在文件名中嵌入空格（甚至换行符）。
这就给一些程序，如为其它 程序构建参数列表的 xargs 程序，造成了问题。
一个嵌入的空格会被看作是一个界定符，生成的 命令会把每个空格分离的单词解释为单独的参数。
为了解决这个问题，find 命令和 xarg 程序 允许可选择的使用一个 null 字符作为参数分隔符。
一个 null 字符被定义在 ASCII 码中，由数字 零来表示（相反的，例如，空格字符在 ASCII 码中由数字32表示）。
find 命令提供的 -print0 行为， 则会产生由 null 字符分离的输出，并且 xargs 命令有一个 –null 选项，这个选项会接受由 null 字符 分离的输入。
这里有一个例子：

1
find ~ -iname ‘*.jpg’ -print0 | xargs –null ls -l

使用这项技术，我们可以保证所有文件，甚至那些文件名中包含空格的文件，都能被正确地处理。

stat命令

显示文件详细信息

展开全文 >>

<<The Linux Command Line>> 第十七章笔记 网络系统

ping命令

发送一个特殊的网络数据包，叫做 IMCP ECHO_REQUEST，到 一台指定的主机。
大多数接收这个包的网络设备将会回复它，来允许网络连接验证。

注意：大多数网络设备（包括 Linux 主机）都可以被配置为忽略这些数据包。
通常，这样做是出于网络安全 原因，部分地遮蔽一台主机免受一个潜在攻击者地侵袭。配置防火墙来阻塞 IMCP 流量也很普遍。

traceroute （一些系统使用相似的 tracepath 程序来代替）

显示从本地到指定主机 要经过的所有“跳数”的网络流量列表。

netstat -ie

netstat -r

IP 地址以零结尾是指网络，而不是个人主机， 所以这个目的地意味着局域网中的任何一台主机。
Gateway， 是网关（路由器）的名字或 IP 地址，用它来连接当前的主机和目的地的网络。 若这个字段显示一个星号，则表明不需要网关。
目的地 default,指的是发往任何表上没有列出的目的地网络的流量。

sftp

正如其名字所示，它是 ftp 程序的安全替代品。
sftp 工作起来与我们 之前使用的 ftp 程序很相似；然而，它不用明码形式来传递数据，它使用加密的 SSH 通道。
sftp 有一个 重要特性强于传统的 ftp 命令，就是 sftp 不需要远端系统中运行 FTP 服务器。它仅仅要求 SSH 服务器。
这意味着任何一台能用 SSH 客户端连接的远端机器，也可当作类似于 FTP 的服务器来使用。

小贴示：这个 SFTP 协议被许多 Linux 发行版中的图形化文件管理器支持。
使用 Nautilus (GNOME), 或者是 Konqueror (KDE)，我们都能在位置栏中输入以 sftp:// 开头的 URI， 来操作存储在运行着 SSH 服务器的远端系统中的文件。

展开全文 >>

<<The Linux Command Line>> 第十六章笔记 存储媒介

/etc/fstab

/etc/fstab 的文件可以列出系统启动时要挂载的设备（典型地，硬盘分区）
/etc/fstab 字段

  • 设备名 传统上，这个字段包含与物理设备相关联的设备文件的实际名字，比如说/dev/hda1（第一个 IDE 通道上第一个主设备分区）。然而今天的计算机，有很多热插拔设备（像 USB 驱动设备），许多 现代的 Linux 发行版用一个文本标签和设备相关联。当这个设备连接到系统中时， 这个标签（当储存媒介格式化时，这个标签会被添加到存储媒介中）会被操作系统读取。 那样的话，不管赋给实际物理设备哪个设备文件，这个设备仍然能被系统正确地识别。
  • 挂载点 设备所连接到的文件系统树的目录。
  • 文件系统类型 Linux 允许挂载许多文件系统类型。大多数本地的 Linux 文件系统是 ext3， 但是也支持很多其它的，比方说 FAT16 (msdos), FAT32 (vfat)，NTFS (ntfs)，CD-ROM (iso9660)，等等。
  • 选项 文件系统可以通过各种各样的选项来挂载。有可能，例如，挂载只读的文件系统， 或者挂载阻止执行任何程序的文件系统（一个有用的安全特性，避免删除媒介。）
  • 频率 一位数字，指定是否和在什么时间用 dump 命令来备份一个文件系统。
  • 次序 一位数字，指定 fsck 命令按照什么次序来检查文件系统。

mount & umount

用来挂载文件系统。执行这个不带参数的命令，将会显示 一系列当前挂载的文件系统

一个挂载点就是文件系统树中的一个目录。它没有 什么特殊的。
它甚至不必是一个空目录，即使你把设备挂载到了一个非空目录上，你也不能看到 这个目录中原来的内容，直到你卸载这个设备。

我们不能卸载一个设备，如果某个用户或进程正在使用这个设备的话。
在这种 情况下，我们把工作目录更改到了 CD-ROW 的挂载点，这个挂载点导致设备忙碌。
我们可以很容易地修复这个问题 通过把工作目录改到其它目录而不是这个挂载点。
umount很重要,如果不umount可能会丢失缓冲区中的暂未发往设备的数据

Linux 存储设备名称

  • /dev/fd* 软盘驱动器
  • /dev/hd* 老系统中的 IDE(PATA)磁盘。典型的主板包含两个 IDE 连接器或者是通道，每个连接器 带有一根缆线，每根缆线上有两个硬盘驱动器连接点。缆线上的第一个驱动器叫做主设备， 第二个叫做从设备。
  • 设备名称这样安排，/dev/hda 是指第一通道上的主设备名；/dev/hdb 是第一通道上的从设备名；/dev/hdc 是第二通道上的主设备名，等等。末尾的数字表示 硬盘驱动器上的分区。例如，/dev/hda1是指系统中第一硬盘驱动器上的第一个分区，而 /dev/hda 则是指整个硬盘驱动器。
  • /dev/lp* 打印机
  • /dev/sd SCSI 磁盘。在最近的 Linux 系统中，内核把所有类似于磁盘的设备（包括 PATA/SATA 硬盘， 闪存，和 USB 存储设备，比如说可移动的音乐播放器和数码相机）看作 SCSI 磁盘。 剩下的命名系统类似于上述所描述的旧的/dev/hd命名方案。
  • /dev/sr* 光盘（CD/DVD 读取器和烧写器）

fsck

除了检查文件系统的完整性之外，fsck 还能修复受损的文件系统，其成功度依赖于损坏的数量。
在类 Unix 的文件系统中，文件恢复的部分被放置于 lost+found 目录里面，位于每个文件 系统的根目录下面。

dd

直接把数据移入/出设备
把第一个驱动器中的所有数据复制到第二个 驱动器中
dd if=/dev/sdb of=/dev/sdc
如果只有第一个驱动器被连接到计算机上，我们可以把它的内容复制到一个普通文件中供 以后恢复或复制数据
dd if=/dev/sdb of=flash_drive.img
警告！这个 dd 命令非常强大。虽然它的名字来自于“数据定义”，有时候也把它叫做“清除磁盘” 因为用户经常会误输入 if 或 of 的规范。在按下回车键之前，要再三检查输入与输出规范！

通过CD-ROM制作iso
dd if=/dev/cdrom of=ubuntu.iso
这项技术也适用于 DVD 光盘，但是不能用于音频 CD，因为它们不使用文件系统来存储数据。 对于音频 CD，看一下 cdrdao 命令。

genisoimage

创建一个包含目录内容的 iso 映像文件，我们使用 genisoimage 程序。
为此，我们首先创建 一个目录，这个目录中包含了要包括到此映像中的所有文件，然后执行这个 genisoimage 命令 来创建映像文件。
例如，如果我们已经创建一个叫做~/cd-rom-files 的目录，然后用文件 填充此目录，再通过下面的命令来创建一个叫做 cd-rom.iso 映像文件：
genisoimage -o cd-rom.iso -R -J ~/cd-rom-files
“-R”选项添加元数据为 Rock Ridge 扩展，这允许使用长文件名和 POSIX 风格的文件权限。
同样地，这个”-J”选项使 Joliet 扩展生效，这样 Windows 中就支持长文件名了。

直接挂载一个 ISO 镜像

有一个诀窍，我们可以用它来挂载 iso 映像文件，虽然此文件仍然在我们的硬盘中，但我们 当作它已经在光盘中了。
添加 “-o loop” 选项来挂载（同时带有必需的 “-t iso9660” 文件系统类型）， 挂载这个映像文件就好像它是一台设备，把它连接到文件系统树上：
mkdir /mnt/iso_image
mount -t iso9660 -o loop image.iso /mnt/iso_image

wodim

清除一张可重写入的 CD-ROM
可重写入的 CD-RW 媒介在被重使用之前需要擦除或清空。
为此，我们可以用 wodim 命令，指定 设备名称和清空的类型。此 wodim 程序提供了几种清空类型。最小（且最快）的是 “fast” 类型：
wodim dev=/dev/cdrw blank=fast

写入一个映像文件，我们再次使用 wodim 命令，指定光盘设备名称和映像文件名：
wodim dev=/dev/cdrw image.iso

md5sum检验完整性

一个以 disk-at-once 模式写入的 CD-R，可以用下面的方式检验完整性
md5sum /dev/cdrom
34e354760f9bb7fbf85c96f6a3f94ece /dev/cdrom
与iso文件的md5sum对比即可

展开全文 >>

<<The Linux Command Line>> 第十四章笔记 自定义shell提示符

Shell 提示符中用到的转义字符

  • \a 以 ASCII 格式编码的铃声 . 当遇到这个转义序列时，计算机会发出嗡嗡的响声。
  • \d 以日，月，天格式来表示当前日期。例如，“Mon May 26.”
  • \h 本地机的主机名，但不带末尾的域名。
  • \H 完整的主机名。
  • \j 运行在当前 shell 会话中的工作数。
  • \l 当前终端设备名。
  • \n 一个换行符。
  • \r 一个回车符。
  • \s shell 程序名。
  • \t 以24小时制，hours:minutes:seconds 的格式表示当前时间.
  • \T 以12小时制表示当前时间。
  • \@ 以12小时制，AM/PM 格式来表示当前时间。
  • \A 以24小时制，hours:minutes 格式表示当前时间。
  • \u 当前用户名。
  • \v shell 程序的版本号。
  • \V Version and release numbers of the shell.
  • \w 当前工作目录名。
  • \W 当前工作目录名的最后部分。
  • \! 当前命令的历史号。
  • \# 当前 shell 会话中的命令数。
  • \\$ 这会显示一个"$"字符，除非你拥有超级用户权限。在那种情况下， 它会显示一个"#"字符。
  • \[ 标志着一系列一个或多个非打印字符的开始。这被用来嵌入非打印 的控制字符，这些字符以某种方式来操作终端仿真器，比方说移动光标或者是更改文本颜色。
  • \] 标志着非打印字符序列结束

用转义序列来设置文本颜色

  • \033[0;30m 黑色 \033[1;30m 深灰色
  • \033[0;31m 红色 \033[1;31m 浅红色
  • \033[0;32m 绿色 \033[1;32m 浅绿色
  • \033[0;33m 棕色 \033[1;33m 黄色
  • \033[0;34m 蓝色 \033[1;34m 浅蓝色
  • \033[0;35m 粉红 \033[1;35m 浅粉色
  • \033[0;36m 青色 \033[1;36m 浅青色
  • \033[0;37m 浅灰色 \033[1;37m 白色

用转义序列来设置背景颜色

  • \033[0;40m 蓝色 \033[1;44m 黑色
  • \033[0;41m 红色 \033[1;45m 粉红
  • \033[0;42m 绿色 \033[1;46m 青色
  • \033[0;43m 棕色 \033[1;47m 浅灰色

例: PS1='[\033[0;31m]<\u@\h \W>\$[\033[0m]'

注意：除了正常的 (0) 和黑体 (1) 字符属性之外，文本也可以具有下划线 (4)，闪烁 (5)等属性。
为了拥有好品味，许多终端仿真器拒绝使用这个闪烁属性。

光标移动转义序列

  • \033[l;cH 把光标移到第 l 行，第 c 列。
  • \033[nA 把光标向上移动 n 行。
  • \033[nB 把光标向下移动 n 行。
  • \033[nC 把光标向前移动 n 个字符。
  • \033[nD 把光标向后移动 n 个字符。
  • \033[2J 清空屏幕，把光标移到左上角（第零行，第零列）。
  • \033[K 清空从光标位置到当前行末的内容。
  • \033[s 存储当前光标位置。
  • \033[u 唤醒之前存储的光标位置。

例:
PS1='[\033[s\033[0;0H\033[0;41m\033[K\033[1;33m\t\033[0m\033[u]<\u@\h \W>\$ '
每次当这个提示符出现的时候，会在屏幕的上方画出一个 包含时钟（由黄色文本渲染）的红色长条。

展开全文 >>

<<The Linux Command Line>> 第十二章笔记 shell 环境

set & printenv

set 命令可以 显示 shell 和环境变量两者且按字母顺序排列，而 printenv 只是显示环境变量。
printenv | less
printenv USER

alias

查看所有别名

登录 shell 会话的启动文件

  • /etc/profile 应用于所有用户的全局配置脚本。
  • ~/.bash_profile 用户私人的启动文件。可以用来扩展或重写全局配置脚本中的设置。
  • ~/.bash_login 如果文件 ~/.bash_profile 没有找到，bash 会尝试读取这个脚本。
  • ~/.profile 如果文件 ~/.bash_profile 或文件 ~/.bash_login 都没有找到，bash 会试图读取这个文件。 这是基于 Debian 发行版的默认设置，比方说 Ubuntu。

非登录 shell 会话的启动文件

  • /etc/bash.bashrc 应用于所有用户的全局配置文件。
  • ~/.bashrc 用户私有的启动文件。可以用来扩展或重写全局配置脚本中的设置。

展开全文 >>

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true