0%

在学习Linux的时候,应该也要思考为什么API是这样的,这样设计的目的/历史原因是什么?要如何设计一个功能强大,容易使用,较高性能的接口?

在重读Operating Systems: Three Easy Pieces的时候看到了这个问题的解答。
在第五章Process API的第5.4中Why?Motivating The API作者做了一些解释。

UNIX通过一对system calls: fork()exec()(一组函数)来创建新进程。另外可以使用wait()来进行进程等待。

其中fork()用于创建一个新进程。wait()用于parent进程等待child结束。exec*用来让子进程执行另一个命令。

回到问题,就是为什么要用两个函数fork()exec()来完成创建新进程这件事?

原因在于这样的设计可以让shellfork()的后面,exec()的前面调用一些代码,特别对于UNIX中重要的shell,它可以利用这部分代码可以用来改变子进程的环境(env)等。
基本的流程:

  1. shell等待用户输入
  2. 用户输入某个command+参数
  3. shell 从 filesystem上找到这个command
  4. 通过调用fork创建子进程
  5. 调用exec*去执行命令
  6. 通过wait等待子进程结束(输出结果)
  7. 重复步骤1

通过分离fork()exec()的好处是可以在4)和5)之间允许shell进行额外的操作,实现诸如pipeline的功能。 例如下面这个命令:

prompt> wc p3.c > newfile.txt

fork之后, 执行wc这个命令之前,先关闭了stdout, 然后打开newfile.txt。在这之后wc的输出就会到newfile.txt中了。(在shell中是应该是用了pipe)

记录一些日常会在各个方面使用的工具,熟练这些工具可以提高效率。
gnu coreutils作为出发,对每个工具进行更深入的学习。算是之前写过的Linux 常用命令合集2.0版本。

对一个工具的熟练使用分成几步:

  1. 了解用法, 列出几种常见场景
  2. 融入日常的操作中,能够帮助优化工作效率和解决问题
  3. 学习源码
  4. 自己实现和改进

欢迎留言介绍常用的工具/更好的替代

Utils
arch base64 basename cat chcon
chgrp chmod chown chroot cksum
comm cp csplit cut date
dd df dir dircolors dirname
du echo env expand expr
factor false fmt fold groups
head hostid hostname id install
join kill link ln logname
ls md5sum mkdir mkfifo mknod
mktemp mv nice nl nohup
nproc numfmt od paste pathchk
pinky pr printenv printf ptx
pwd readlink realpath rm rmdir
runcon seq shred shuf sleep
sort split stat stdbuf stty
sum tac tail tee test
timeout touch tr true truncate
tsort tty uname unexpand uniq
unlink uptime users vdir wc
who whoami yes

More

text searching, filtering and manipulation

awk

sed

find

grep

silversearcher-ag

disk manipulate

df

du

process && memory

ps

top

htop

JSON

jq

misc

GNU Stow

异常和恢复流程

Problem 1: harddisk is removed

  1. 首先通过sudo mdadm -D /dev/md0 可以看到有两块disk显示removed
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
/dev/md0:
Version : 1.2
Creation Time : Thu Jan 2 15:23:16 2020
Raid Level : raid10
Array Size : 7813772288 (7451.79 GiB 8001.30 GB)
Used Dev Size : 3906886144 (3725.90 GiB 4000.65 GB)
Raid Devices : 4
Total Devices : 2
Persistence : Superblock is persistent

Intent Bitmap : Internal

Update Time : Tue Feb 18 20:55:04 2020
State : clean, degraded
Active Devices : 2
Working Devices : 2
Failed Devices : 0
Spare Devices : 0

Layout : near=2
Chunk Size : 512K

Consistency Policy : bitmap

Number Major Minor RaidDevice State
- 0 0 0 removed
1 8 48 1 active sync set-B
- 0 0 2 removed
4 8 80 3 active sync set-B
  1. sudo fdisk -l 查看所有硬盘, 找到是哪些硬盘,例如/dev/sdc, /dev/sde没有添加上
  2. sudo mdadm --re-add /dev/md0 /dev/sdc 重新添加硬盘进raid,添加成功会显示is added
  3. 此时再 sudo mdadm -D /dev/md0 则会显示rebuilding
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10

    Consistency Policy : bitmap

    Rebuild Status : 99% complete

    Number Major Minor RaidDevice State
    0 8 32 0 spare rebuilding /dev/sdc
    1 8 48 1 active sync set-B
    2 8 96 2 spare rebuilding /dev/sdg
    4 8 80 3 active sync set-B
  4. 可以通过cat /proc/mdadm 查看状态

Debugging FUSE Filesystem.

Collect some tip/tricks for debugging FUSE.

Program options

  1. -f : Run foreground
  2. -s : Disable multiple threading
  1. Enable debugging
    1. Compiling with debugging symbols enabled(-g to gcc)
    2. enable core dumps: ulimit -c unlimited
    3. If program crashes, it will have core dump in current directory
    4. load the core file: `gdb

Tools

  1. Valgrind: Valgrind is an instrumentation framework for building dynamic analysis tools.

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    #include <valgrind/valgrind.h>

    if (RUNNING_ON_VALGRIND) {
    fprintf(stderr,
    "******** Valgrind has been detected by %s\n"
    "******** If you have difficulties getting %s to work under"
    " Valgrind,\n"
    "******** see the following thread:\n"
    "******** http://www.nabble.com/valgrind-and-fuse-file-systems"
    "-td13112112.html\n"
    "******** Sleeping for 5 seconds so this doesn't fly by ....",
    progname, progname);
    sleep(5);
    fprintf(stderr, "\n");
    }

    Reference: Code from Tim Post

  2. User-Mode Linux

Documents/Tutorials

  1. CS135 FUSE Document
  2. Use GDB to Understand FUSE File System

最近VSCode真香中…人老了就感觉不喜欢话时间再折腾一些生产工具, 当然Emacs/Vim还是用的很多,但是越来越多在source code reading 的时候会更倾向与打开vscode了。

换一种编辑器最大问题在于熟悉快捷键(反之一款好编辑器就应该让快捷键很直观,就像”The design of Everyday Everything” 中有提到的那样, 符合人们的mentor model)

分享一些不常用但很有用的快捷键, 根据个人喜好可以改一下和系统的冲突。 有新发现的会继续更新

官方的文档可以通过Ctrl-P然后输入”> help keyboard shortcuts” 获取
文档

Select

原生支持:

  1. Expand Select

    1
    Shift + Alt + RightArrow
  2. Shrink Select

    1
    Shift + Alt + LeftArrow
  3. Select In Words

    这个我一直习惯用Ctrl+Alt+Left/Right, 但是和Ubuntu的workspace切换冲突了..

    1
    Ctrl + Shift + Right/LeftArrow

    插件:

  4. “Quick and Simple Text Selection” by David Bankier. 支持更多的快速选择

    Ctrl+k 之后再按一个以下字符,可以选择被包括在其中的字符串

    1
    2
    3
    4
    5
    6
    7
    8
    Ctrl + K ' select everything between single quotes
    Ctrl + K " select everything between double quotes
    Ctrl + K ` select everything between back ticks
    Ctrl + K ( select everything inside parenthesis
    Ctrl + K ) select everything inside parenthesis and include them
    Ctrl + K [ or ] select everything between square brackets and include them
    Ctrl + K { or } select everything between curly braces and include them
    Ctrl + K < or > select everything between angle brackets and include them

Windows management

原生支持:

  1. Re-open a closed editor
    1
    Ctrl+Shift+T
    这个操作和Chrome浏览器一样, Nice~!

Text Edition

原生支持

1. Move line up/down

1
Alt + Up/DownArrow


Further Reading

  1. vscode power user tips

References

21 VSCode Shortcuts To Code Faster and Funner


欢迎在留言补充更多Tricks;)