皮皮网

1.cscopeCscope 使用
2.安全干货DockerCVE-2018-6552
3.万字攻略|云风Skynet源码剖析及原理实战（一）
4.要成为一名专业的源码程序员，从零开始需要怎么一步步来比较好，源码要把最底层的源码先学精通吗？(个人认为)求学长
5.如何在 Linux 中使用 Fio 来测评硬盘性能
6.Seed Everything - 可复现的 PyTorch（一）

cscopeCscope 使用

       Cscope的安装与配置步骤如下：

       2.1 安装步骤

       2.1.1 下载：访问[1]获取软件。

       2.1.2 安装过程：

       执行 `./configure --with-flex`（Linux平台建议加上此选项）

       执行 `make`，源码通常无需处理错误

       通过 `make install` 安装完成

       在Ubuntu中，源码可使用 `sudo apt-get install vim` 命令行安装。源码微客多源码

       2.2 配置Vim

       编辑vim配置文件vimrc，源码将cscope_map.vim的源码内容（从`if has("cscope")`到`endif`）复制到系统或个人配置文件中。具体参考[2]获取详细指令。源码

       2.3 Cscope的源码使用

       2.3.1 建立索引文件：

       在源码根目录（如Linux源码）下运行 `:cscope -Rbkq`，其中R包含子目录，源码b禁用用户界面，源码q生成索引文件以加速查找。源码

       排除/usr/include目录：`k`。源码

       2.3.2 查找功能：

       `cs find`命令可用于查找，源码如查找调用do_fork的函数：`:cs f g do_fork`。

       按键配合：Ctrl+\ + s 输入`:cs find s`，支持其他如g、d等命令。

       2.3.2.4 Cscope_map.vim的键映射示例：

       `nmap s`：在普通模式下，输入`:cs find s`，通过=expand("")获取光标处的变量或函数。

安全干货DockerCVE--

       cve--

       此漏洞未有公开分析，唯一的参考是长亭在滴滴安全大会的PPT，信息简略，仅在完成利用后发现一些未注意到的细节。漏洞基于条件竞争，主要影响未修复版本的is_same_as函数，通过特殊方法使其不执行正常逻辑，继续往下执行。

       源码分析

       展示了is_same_as源码，以及修复前后版本的对比。apport源码位于2..9版本，追踪源码找到更改过的pid进入get_pid_info，贴出源码。

       apport为ubuntu程序，用于处理程序崩溃信息，配置文件如/sys/kernel/core_pattern影响生成core文件的命名方式。核心是确定生成的core文件路径，以及内核coredump.c传入的reactvue源码区别参数。

       核心配置文件为/sys/kernel/core_uses_pid，值为1代表生成的core文件带.pid，0代表不带。同时，/proc/sys/kernel/pid_max限制最大pid值，影响核心循环计数。logrotate配置用于日志管理。

       在Ubuntu .中，apport与漏洞版本差异大，选择替换整个apport文件。遇到程序不运行问题，可能涉及core_pattern配置。通过日志分析发现入参多了一个%E，删去后程序恢复正常。

       逃逸步骤

       利用条件竞争绕过分支，首先kill对应pid，然后通过大量fork等待创建进程，占用pid。利用docker内进程路径控制物理机中core生成路径。生成core前检查ulimit -c，限制core文件大小，设置ulimit -c unlimited。

       逃逸第二步

       通过logrotate定时任务触发执行core中的指令，将想运行的指令写成字符串形式，保存在core文件中。使用logrotate格式编写命令，确保成功执行。手动触发logrotate命令，监听对应端口以获取返回结果。

万字攻略|云风Skynet源码剖析及原理实战（一）

       云风的Skynet源码详解和实战指南

       Skynet是一款基于C和lua的轻量级并发框架，专为在线游戏服务器设计，基于TrinityCore的魔兽后端开源框架。它采用单进程多线程的Actor模型，确保了高效的消息驱动和资源管理。

       1. Skynet简介

       Skynet以消息驱动为核心，每个服务都有独立的消息队列，通过回调函数处理。建议使用单节点以减少节点间通信成本，避免不必要的lol源码模板通讯开销。框架要求发送者分配内存并处理接收方的清理，以减少数据复制。

       核心功能是启动和管理符合规范的C模块，给每个模块分配一个唯一的handle，实现服务间的通信，模块在无消息时处于挂起状态，避免CPU资源浪费。

       2. Skynet原理与实现

       Skynet的消息队列设计模仿Actor模型，每个服务拥有私有的MailBox。消息通过worker线程从全局队列中调度，以线程权重和回调函数进行消费。服务模块需提供特定接口，如xxx_create、xxx_init等，以供框架调用。

       服务的生命周期管理通过skynet_context，它是Skynet的核心结构，支持指令操作，如启动、退出和删除服务。snlua沙盒服务是lua服务的入口，lua服务在独立的沙盒环境中运行，初始化时加载lua脚本和设置环境变量。

       3. 搭建与应用

       在Ubuntu上，可通过git获取Skynet源代码，编译和运行服务器，客户端通过lua脚本与服务交互。编写和配置服务API，包括lua脚本和配置文件，以及服务启动和错误处理。

       4. API与服务类型

       - 普通服务支持创建多个实例，通过唯一的id区分。

       - 全局唯一服务类似单例，每个节点仅创建一次，可用uniqueservice接口检测和创建。

       - 多节点环境中的全局服务有特定规则，如全节点服务的查询。

       5. 服务别名与同步

       - 服务可以通过别名标识，本地别名和全局别名区分，极星源码注册和查询接口灵活。

       - 服务调度可通过sleep和fork控制，协程机制支持简单同步和定时器使用。

       6. 错误处理与资源管理

       - 错误处理通过lua的assert和error进行，可以选择pcall来避免中断协程。

       - 获取和管理时间，保持良好的错误处理和资源使用习惯。

要成为一名专业的程序员，从零开始需要怎么一步步来比较好，要把最底层的先学精通吗？(个人认为)求学长

       前言

       你是否觉得自己从学校毕业的时候只做过小玩具一样的程序？走入职场后哪怕没有什么经验也可以把以下这些课外练习走一遍（朋友的抱怨：学校课程总是从理论出发，作业项目都看不出有什么实际作用，不如从工作中的需求出发）

       建议：

       不要乱买书，不要乱追新技术新名词，基础的东西经过很长时间积累而且还会在未来至少年通用。

       回顾一下历史，看看历史上时间线上技术的发展，你才能明白明天会是什么样。

       一定要动手，例子不管多么简单，建议至少自己手敲一遍看看是否理解了里头的细枝末节。

       一定要学会思考，思考为什么要这样，而不是那样。还要举一反三地思考。

       注：你也许会很奇怪为什么下面的东西很偏Unix/Linux，这是因为我觉得Windows下的编程可能会在未来很没有前途，原因如下：

       现在的用户界面几乎被两个东西主宰了，1）Web，2）移动设备iOS或Android。Windows的图形界面不吃香了。

       越来越多的企业在用成本低性能高的Linux和各种开源技术来构架其系统，Windows的成本太高了。

       微软的东西变得太快了，很不持久，他们完全是在玩弄程序员。详情参见《Windows编程革命史》

       所以，我个人认为以后的趋势是前端是Web+移动，后端是Linux+开源。开发这边基本上没Windows什么事。zoo keeper源码

       启蒙入门

       1、 学习一门脚本语言，例如Python/Ruby

       可以让你摆脱对底层语言的恐惧感，脚本语言可以让你很快开发出能用得上的小程序。实践项目:

       处理文本文件，或者csv (关键词 python csv, python open, python sys) 读一个本地文件，逐行处理（例如 word count，或者处理log）

       遍历本地文件系统 (sys, os, path)，例如写一个程序统计一个目录下所有文件大小并按各种条件排序并保存结果

       跟数据库打交道 (python sqlite)，写一个小脚本统计数据库里条目数量

       学会用各种print之类简单粗暴的方式进行调试

       学会用Google (phrase, domain, use reader to follow tech blogs)

       为什么要学脚本语言，因为他们实在是太方便了，很多时候我们需要写点小工具或是脚本来帮我们解决问题，你就会发现正规的编程语言太难用了。

       2、 用熟一种程序员的编辑器(不是IDE) 和一些基本工具

       Vim / Emacs / Notepad++，学会如何配置代码补全，外观，外部命令等。

       Source Insight (或 ctag)

       使用这些东西不是为了Cool，而是这些编辑器在查看、修改代码/配置文章/日志会更快更有效率。

       3、 熟悉Unix/Linux Shell和常见的命令行

       如果你用windows，至少学会用虚拟机里的linux， vmware player是免费的，装个Ubuntu吧

       一定要少用少用图形界面。

       学会使用man来查看帮助

       文件系统结构和基本操作 ls/chmod/chown/rm/find/ln/cat/mount/mkdir/tar/gzip …

       学会使用一些文本操作命令 sed/awk/grep/tail/less/more …

       学会使用一些管理命令 ps/top/lsof/netstat/kill/tcpdump/iptables/dd…

       了解/etc目录下的各种配置文章，学会查看/var/log下的系统日志，以及/proc下的系统运行信息

       了解正则表达式，使用正则表达式来查找文件。

       对于程序员来说Unix/Linux比Windows简单多了。（参看我四年前CSDN的博文《其实Unix很简单》）学会使用Unix/Linux你会发现图形界面在某些时候实在是太难用了，相当地相当地降低工作效率。

       4、 学习Web基础（HTML/CSS/JS) + 服务器端技术 (LAMP)

       未来必然是Web的世界，学习WEB基础的最佳网站是W3School。

       学习HTML基本语法

       学习CSS如何选中HTML元素并应用一些基本样式（关键词：box model）

       学会用 Firefox + Firebug 或 chrome 查看你觉得很炫的网页结构，并动态修改。

       学习使用Javascript操纵HTML元件。理解DOM和动态网页（Dynamic HTML: The Definitive Reference, 3rd Edition - O'Reilly Media) 网上有免费的章节，足够用了。或参看 DOM 。

       学会用 Firefox + Firebug 或 chrome 调试Javascript代码（设置断点，查看变量，性能，控制台等）

       在一台机器上配置Apache 或 Nginx

       学习PHP，让后台PHP和前台HTML进行数据交互，对服务器相应浏览器请求形成初步认识。实现一个表单提交和反显的功能。

       把PHP连接本地或者远程数据库 MySQL（MySQL 和 SQL现学现用够了）

       跟完一个名校的网络编程课程（例如：mand[];

       void main()

       {

       int rtn; /*子进程的返回数值*/

       while(1) {

       /* 从终端读取要执行的命令 */

       printf( ">" );

       fgets( command, , stdin );

       command[strlen(command)-1] = 0;

       if ( fork() == 0 ) {

       /* 子进程执行此命令 */

       execlp( command, command );

       /* 如果exec函数返回，表明没有正常执行命令，打印错误信息*/

       perror( command );

       exit( errorno );

       }

       else {

       /* 父进程， 等待子进程结束，并打印子进程的返回值 */

       wait ( &rtn );

       printf( " child process return %d\n",. rtn );

       }

       }

       }

       此程序从终端读入命令并执行之，执行完成后，父进程继续等待从终端读入命令。熟悉DOS和WINDOWS系统调用的朋友一定知道DOS/WINDOWS也有exec类函数，其使用方法是类似的，但DOS/WINDOWS还有spawn类函数，因为DOS是单任务的系统，它只能将"父进程"驻留在机器内再执行"子进程"，这就是spawn类的函数。WIN已经是多任务的系统了，但还保留了spawn类函数，WIN中实现spawn函数的方法同前述UNIX中的方法差不多，开设子进程后父进程等待子进程结束后才继续运行。UNIX在其一开始就是多任务的系统，所以从核心角度上讲不需要spawn类函数。

       在这一节里，我们还要讲讲system（）和popen（）函数。system（）函数先调用fork（），然后再调用exec（）来执行用户的登录shell，通过它来查找可执行文件的命令并分析参数，最后它么使用wait（）函数族之一来等待子进程的结束。函数popen（）和函数system（）相似，不同的是它调用pipe（）函数创建一个管道，通过它来完成程序的标准输入和标准输出。这两个函数是为那些不太勤快的程序员设计的，在效率和安全方面都有相当的缺陷，在可能的情况下，应该尽量避免。

       2.3 Linux下的进程间通信

       详细的讲述进程间通信在这里绝对是不可能的事情，而且笔者很难有信心说自己对这一部分内容的认识达到了什么样的地步，所以在这一节的开头首先向大家推荐著名作者Richard Stevens的著名作品：《Advanced Programming in the UNIX Environment》，它的中文译本《UNIX环境高级编程》已有机械工业出版社出版，原文精彩，译文同样地道，如果你的确对在Linux下编程有浓厚的兴趣，那么赶紧将这本书摆到你的书桌上或计算机旁边来。说这么多实在是难抑心中的景仰之情，言归正传，在这一节里，我们将介绍进程间通信最最初步和最最简单的一些知识和概念。

       首先，进程间通信至少可以通过传送打开文件来实现，不同的进程通过一个或多个文件来传递信息，事实上，在很多应用系统里，都使用了这种方法。但一般说来，进程间通信（IPC：InterProcess Communication）不包括这种似乎比较低级的通信方法。Unix系统中实现进程间通信的方法很多，而且不幸的是，极少方法能在所有的Unix系统中进行移植（唯一一种是半双工的管道，这也是最原始的一种通信方式）。而Linux作为一种新兴的操作系统，几乎支持所有的Unix下常用的进程间通信方法：管道、消息队列、共享内存、信号量、套接口等等。下面我们将逐一介绍。

        2.3.1 管道

       管道是进程间通信中最古老的方式，它包括无名管道和有名管道两种，前者用于父进程和子进程间的通信，后者用于运行于同一台机器上的任意两个进程间的通信。

       无名管道由pipe（）函数创建：

       #include <unistd.h>

       int pipe(int filedis[2])；

       参数filedis返回两个文件描述符：filedes[0]为读而打开，filedes[1]为写而打开。filedes[1]的输出是filedes[0]的输入。下面的例子示范了如何在父进程和子进程间实现通信。

       #define INPUT 0

       #define OUTPUT 1

       void main() {

       int file_descriptors[2];

       /*定义子进程号 */

       pid_t pid;

       char buf[];

       int returned_count;

       /*创建无名管道*/

       pipe(file_descriptors);

       /*创建子进程*/

       if((pid = fork()) == -1) {

       printf("Error in fork\n");

       exit(1);

       }

       /*执行子进程*/

       if(pid == 0) {

       printf("in the spawned (child) process...\n");

       /*子进程向父进程写数据，关闭管道的读端*/

       close(file_descriptors[INPUT]);

       write(file_descriptors[OUTPUT], "test data", strlen("test data"));

       exit(0);

       } else {

       /*执行父进程*/

       printf("in the spawning (parent) process...\n");

       /*父进程从管道读取子进程写的数据，关闭管道的写端*/

       close(file_descriptors[OUTPUT]);

       returned_count = read(file_descriptors[INPUT], buf, sizeof(buf));

       printf("%d bytes of data received from spawned process: %s\n",

       returned_count, buf);

       }

       }

       在Linux系统下，有名管道可由两种方式创建：命令行方式mknod系统调用和函数mkfifo。下面的两种途径都在当前目录下生成了一个名为myfifo的有名管道：

       方式一：mkfifo("myfifo","rw");

       方式二：mknod myfifo p

       生成了有名管道后，就可以使用一般的文件I/O函数如open、close、read、write等来对它进行操作。下面即是一个简单的例子，假设我们已经创建了一个名为myfifo的有名管道。

       /* 进程一：读有名管道*/

       #include <stdio.h>

       #include <unistd.h>

       void main() {

       FILE * in_file;

       int count = 1;

       char buf[];

       in_file = fopen("mypipe", "r");

       if (in_file == NULL) {

       printf("Error in fdopen.\n");

       exit(1);

       }

       while ((count = fread(buf, 1, , in_file)) > 0)

       printf("received from pipe: %s\n", buf);

       fclose(in_file);

       }

       /* 进程二：写有名管道*/

       #include <stdio.h>

       #include <unistd.h>

       void main() {

       FILE * out_file;

       int count = 1;

       char buf[];

       out_file = fopen("mypipe", "w");

       if (out_file == NULL) {

       printf("Error opening pipe.");

       exit(1);

       }

       sprintf(buf,"this is test data for the named pipe example\n");

       fwrite(buf, 1, , out_file);

       fclose(out_file);

       }

       2.3.2 消息队列

       消息队列用于运行于同一台机器上的进程间通信，它和管道很相似，事实上，它是一种正逐渐被淘汰的通信方式，我们可以用流管道或者套接口的方式来取代它，所以，我们对此方式也不再解释，也建议读者忽略这种方式。

       2.3.3 共享内存

       共享内存是运行在同一台机器上的进程间通信最快的方式，因为数据不需要在不同的进程间复制。通常由一个进程创建一块共享内存区，其余进程对这块内存区进行读写。得到共享内存有两种方式：映射/dev/mem设备和内存映像文件。前一种方式不给系统带来额外的开销，但在现实中并不常用，因为它控制存取的将是实际的物理内存，在Linux系统下，这只有通过限制Linux系统存取的内存才可以做到，这当然不太实际。常用的方式是通过shmXXX函数族来实现利用共享内存进行存储的。

       首先要用的函数是shmget，它获得一个共享存储标识符。

       #include <sys/types.h>

       #include <sys/ipc.h>

       #include <sys/shm.h>

       int shmget(key_t key, int size, int flag);

       这个函数有点类似大家熟悉的malloc函数，系统按照请求分配size大小的内存用作共享内存。Linux系统内核中每个IPC结构都有的一个非负整数的标识符，这样对一个消息队列发送消息时只要引用标识符就可以了。这个标识符是内核由IPC结构的关键字得到的，这个关键字，就是上面第一个函数的key。数据类型key_t是在头文件sys/types.h中定义的，它是一个长整形的数据。在我们后面的章节中，还会碰到这个关键字。

       当共享内存创建后，其余进程可以调用shmat（）将其连接到自身的地址空间中。

       void *shmat(int shmid, void *addr, int flag);

       shmid为shmget函数返回的共享存储标识符，addr和flag参数决定了以什么方式来确定连接的地址，函数的返回值即是该进程数据段所连接的实际地址，进程可以对此进程进行读写操作。

       使用共享存储来实现进程间通信的注意点是对数据存取的同步，必须确保当一个进程去读取数据时，它所想要的数据已经写好了。通常，信号量被要来实现对共享存储数据存取的同步，另外，可以通过使用shmctl函数设置共享存储内存的某些标志位如SHM_LOCK、SHM_UNLOCK等来实现。

哪些Linux命令可能导致数据丢失并需要谨慎使用？

       Linux Shell命令需谨慎，9个危险命令需避免

       Linux终端命令威力强大，但其潜在风险不容忽视，简单的命令就可能对文件夹、文件或路径造成不可逆的破坏。特别是当它在无提示的情况下执行，数据丢失的风险倍增。

       虽然有些人认为这些命令在经验丰富的用户手中是安全的，但作为新手，必须了解它们的危险性。这里，我们将探讨一些对系统有潜在危害的Linux命令，务必引起重视。记住：这些代码极其危险，可能通过修改变得更危险。

       特别注意，某些命令在特定环境下才会产生危害。例如，在Ubuntu中，Linux Fork Bomb Command，如：(: (){ :: };:)，可能导致拒绝服务攻击。另外，Mv Folder/Dev/Null Command，会将文件夹中的内容误导向null device，看似成功却导致数据丢失。

       rm -Rf Command，用于快速删除文件夹和内容，如果不正确使用，后果严重。需要了解其各种组合，如rm -rf、rm -rf*等，以免误操作。

       其他危险命令还包括：Mkfs Command，格式化硬盘的命令，以及用于创建大型存档的Tar Bomb。误用dd命令，如dd if=/dev/zero of=/dev/had，也可能对硬盘造成严重损坏。

       避免恶意脚本和源代码是保护系统安全的关键，如wget pression Bomb，看似小的压缩文件实际上可能包含大量数据，解压时可能导致硬盘崩溃。

       总之，使用Linux命令时务必小心，遵循最佳实践，只执行来自可信任来源的命令，避免潜在的灾难性后果。