2017年1月总结

工作方面:
a)这个月是在调试中度过的:两周调试多线程bug(参考这篇文章:An example of debugging parallel program),一周调试性能问题。收获颇丰:-);
b)学习了OpenMP技术。

业余时间(技术):

a)学习了这套Linux X86_64汇编教程
b)写了3Unix公众号文章。

业余时间(读书):
Clean, Well-Lighted Sentences: A Guide to Avoiding the Most Common Errors in Grammar and Punctuation :这本书真得很不错,很薄。利用小长假时间读了一下,弄清楚很多英语语法疑问。当然一遍不一定都能记住,还需要反复阅读。

如何选择Linux发行版?

@YeimMeMeMes 在其个人社交媒体主页上贴出了一张如何选择Linux发行版的图(原图链接:https://pbs.twimg.com/media/C3PoAagWMAAe5YT.jpg:large):

C3PoAagWMAAe5YT

因为这幅图上所列举的大部分Linux发行版我都没怎么使用过,所以我没有资格对这张图是否合理发表评论,仅供读者参考。下面我仅对我曾经使用过的一些Linux发行版谈些感受:

(1)这个图上并没有出现一些Linux的商业版本,譬如,RedHatRed Hat Enterprise LinuxSuSESUSE Linux Enterprise Server,等等。我以前做过这两个Linux商业版本上的测试工作,感觉还是很稳定的。给我一个很深的印象就是在Red Hat Enterprise Linux上编译和安装最新版本的Linux内核总是非常顺利,而在其它发行版上有时会遇到一些莫名其妙的问题。从去年开始,Red Hat Enterprise Linux对开发者已经免费了(可参考这篇文章:As in beer: Red Hat offers RHEL free to developers),有兴趣的朋友可以体验一下。

(2)最近两个月,在工作中我主要使用Arch LinuxArch Linux在软件包更新方面非常及时。有时你发现当前软件包不是最新的,只要在其网站上提一个请求,很快就会有维护者响应。如果你总是希望可以使用上最新的软件版本,不妨尝试一下Arch Linux

Linux系统上如何查看进程(线程)所运行的CPU

本文介绍如何在Linux系统上查看某个进程(线程)所运行的CPU,但在此之前我们需要弄清楚两个基本概念:

(1)Linux操作系统上的进程和线程没有本质区别,在内核看来都是一个task。属于同一个进程的各个线程共享某些资源,每一个线程都有一个ID,而“主线程”的线程ID同进程ID,也就是我们常说的PID是一样的。

(2)使用lscpu命令,可以得到当前系统CPU的数量:

$ lscpu
......
CPU(s):                24
On-line CPU(s) list:   0-23
Thread(s) per core:    2
Core(s) per socket:    6
Socket(s):             2
......

系统有2个物理CPUSocket(s): 2),每个CPU6coreCore(s) per socket: 6),而每个core又有2hardware threadThread(s) per core: 2)。所以整个系统上一共有2X6X2=24CPU(s):24)个逻辑CPU,也就是实际运行程序的CPU

使用htop命令可以得到进程(线程)所运行的CPU信息,但是htop默认情况下不会显示这一信息:

1
开启方法如下:
(1)启动htop后,按F2Setup):

2
(2) Setup中选择Columns,然后在Available Columns中选择PROCESSOR - ID of the CPU the process last executed, 接下来按F5Add)和F10Done)即可:

3

现在htop就会显示CPU的相关信息了。需要注意的是,其实htop显示的只是“进程(线程)之前所运行的CPU”,而不是“进程(线程)当前所运行的CPU”,因为有可能在htop显示的同时,操作系统已经把进程(线程)调度到其它CPU上运行了。

下面是一个运行时会包含4个线程的程序:

#include <omp.h>

int main(void){

        #pragma omp parallel num_threads(4)
        for(;;)
        {
        }

        return 0;
}

编译并运行代码:

$ gcc -fopenmp thread.c
$ ./a.out &
[1] 17235

使用htop命令可以得到各个线程ID,以及在哪个CPU上运行:

4

参考资料:
How to find out which CPU core a process is running on
闲侃CPU(一)

Linux线程模型浅析

Linux的线程是“轻量级进程”(Light-Weight Process,即LWP)。在Linux系统上运行一个程序时,操作系统会为这个程序创建一个进程,其实也就是“主线程”,后续则可以产生出更多的线程。每个进程都有一个PIDProcess ID),每个线程也会有一个TIDThread ID),属于同一进程的线程各自有拥有不同的TID,但它们的PID是相同的,都等于“主线程”的TID。因此从本质上来讲,Linux系统下的进程和线程没有区别,只不过同一进程中的线程可以共享某些资源。下面看一个例子:

#include <unistd.h>
#include <omp.h>

int main(void){

        #pragma omp parallel num_threads(4)
        for(;;)
        {
            sleep(1);
        }

        return 0;
}

编译并在后台运行这个程序:

$ gcc -fopenmp threads.c
$ ./a.out &
[1] 9802

进程的PID9802,用ps -T pid命令查看进程的线程信息:

$ ps -T 9802
  PID  SPID TTY      STAT   TIME COMMAND
 9802  9802 pts/1    Sl     0:00 ./a.out
 9802  9803 pts/1    Sl     0:00 ./a.out
 9802  9804 pts/1    Sl     0:00 ./a.out
 9802  9805 pts/1    Sl     0:00 ./a.out

其中SPID即为TID。可以看到当前进程的PID9802,共包含4个线程,其TID依次为:9802980398049805,其中PIDSPID相同的线程即为主线程。

CUDA编程笔记(16)——Shared Memory

这篇笔记摘自Professional CUDA C Programming

Global memory is large, on-board memory and is characterized by relatively high latencies. Shared memory is smaller, low-latency on-chip memory that offers much higher bandwidth than global memory. You can think of it as a program-managed cache. Shared memory is generally useful as:
➤ An intra-block thread communication channel
➤ A program-managed cache for global memory data
➤ Scratch pad memory for transforming data to improve global memory access patterns

Shared memory is partitioned among all resident thread blocks on an SM; therefore, shared memory is a critical resource that limits device parallelism. The more shared memory used by a kernel, the fewer possible concurrently active thread blocks.

 

2016年终总结

2016年就这样过去了,它真的是令我难忘的一年。在这一年中我经历了太多的“第一次”,也有了很多新收获。在2017年的第一天,我再好好地回忆一下这“跌宕起伏”的一年吧。

首先,我在自己的个人博客上开辟了“每月简讯”这个专栏,用来总结每个月的经历。这样可以更清楚地了解自己过去一个月的状态,知道该从哪些方面改进和提高自己。

1月份的时候,我开通了一个微信新公众号:Unix。开始的时候,是每天发一个小tip,后来感觉这种形式其实对人们的帮助并不大。所以在停办一段时间后,又走到发原创文章这条路上。目前发表了不到10篇作品,不敢说写的多好,只能说都是自己用心之作。

DTrace这个公众号这一年并没有写什么的有价值的文章,主要是现在工作中基本不会用到DTrace,所以也没有什么好的材料用来分享。

7月份参加了人生第一次的IELTS考试。

今年写了两个初级教程:一个是关于Go语言:Go 101 Hacks;一个是关于FreeBSDFreeBSD 101 Hacks

1月份至9月份,我在H公司工作。工作主要侧重在两部分:Docker性能测试和Swarm/Swarmkit的功能开发。很遗憾,9月份的时候,公司结构调整,我们整个部门被裁掉了。但是H公司还是很厚道的,给了足够的补偿。在这个时候,才能体现一家公司是否真的是“人性化”。

9月中旬到12月份,我一直处于失业状态,也是我第一次失业。整天过得浑浑噩噩。以前每天上班很辛苦,但是并不觉得有多累。现在闲下来了,反而每天无精打采,还生了病。看来人真的是要折腾的。

12月份来到了当前的公司,开始了新的工作。目前感觉还好,没有什么不适应。

中英文博客这一年中还是坚持更新。中文博客更多的是记一些笔记,英文博客倒是写了一些个人还比较满意的文章。

年初的时候第一次出国,去了新加坡,感受了一下“异国他乡”是什么样子。

好了,就这样吧。新年新开始!