登录注册

  • 项目学习

    LinuxGoDockerRunGoByExample

    黑派客
    项目， 学习， 理解， linux， 进程

  • 参考书籍

    理解Unix进程Unix编程艺术Unix环境高级编程Go Web编程Go并发编程实战

    黑派客
    参考， 书籍， 理解， linux， 进程

  • 系统调用sendfile

    Sendfile是Linux实现的系统调用，可以通过避免文件在内核态和用户态的拷贝来优化文件传输的效率。其中大名鼎鼎的分布式消息队列服务Kafka就使用sendfile来优化效率，具体用法可参见其官方文档。优化策略在普通进程中，要从磁盘拷贝数据到网络，其实是需要通过系统调用，进程也会反复在用户态和内核态切换，频繁的数据传输在此有效率问题。

    黑派客
    系统调用， sendfile， 理解， linux， 进程

  • 捕获SIGKILL

    SIGKILL是常见的Linux信号，我们使用kill命令杀掉进程也就是像进程发送SIGKILL信号。和其他信号不同，SIGKILL和SIGSTOP是不可被Catch的，因此下面的代码是能编译通过但也是无效的，更多细节可以参考golang/go#9463.c := make(chan os.Signal, 1)signal.Notify(c, syscall.SIGKILL, syscall.

    黑派客
    捕获， sigkill， 理解， linux， 进程

  • 创建目录权限

    如果你想创建一个目录并授予777权限，你需要怎么做？查看Go的API文档我们可以这样写。源文件为mkdir.go。package mainimport ( "fmt" "os")func main() { err := os.MkdirAll("/tmp/gotest/", 0777) if err != nil { panic(err) } fmt.

    黑派客
    创建目录， 权限， 理解， linux， 进程

  • 第五章 注意事项

    对进程有了深入理解后，我们编写实际应用可能遇到这些坑，这里总结一下。

    黑派客
    第五章， 注意事项， 理解， linux， 进程

  • 实现Run

    实现Flock前面提到进程的文件锁，实际上Run也用到了，可以试想下以下的场景。用户A执行run pt-summary，由于本地已经缓存了所以会直接运行本地的脚本。同时用户B执行run -u pt-summary，加上-u或者--update参数后Run会从远端下载并运行最新的脚本。如果不加文件锁的话，用户A的行为就不可预测了，而文件锁很好得解决了这个问题。具体使用方法如下，我们封装了以下的接口。

    黑派客
    实现， run， 理解， linux， 进程

  • Run项目架构

    Run是一个命令行工具，没有复杂的CS或BS架构，只是通过解析命令行或者配置文件来下载运行相应的脚本。FlockRun使用了前面提到的进程文件锁，避免同时运行同一个脚本。同时运行同一个脚本会有什么问题呢？例如我们run pt-summary，同时另一个终端执行run -u pt-summary，这样前一个命令可能使用旧脚本也可能使用新脚本，这是我们要规避的问题。

    黑派客
    run， 项目， 架构， 理解， linux

  • 第四章 项目实例Run

    Run是开源的脚本管理工具，官方网站http://runscripts.org，项目地址https://github.com/runscripts/run。Run可以执行任意的脚本，当然使用到Go库提供的系统调用程序。

    黑派客
    第四章， 项目实例， run， 理解， linux

  • Namespaces简介

    Linux Namespaces是资源隔离技术，在2.6.23合并到内核，而在3.12内核加入对用户空间的支持。Namespaces是容器技术的基础，因为有了命名空间的隔离，才能限制容器之间的进程通信，像虚拟内存对于物理内存那样，开发者无需针对容器修改已有的代码。使用Namespaces阅读以下教程前建议看看，https://blog.jtlebi.fr/2013/12/22/introduction-to-linux-namespaces-part-1-uts/。

    黑派客
    namespaces， 简介， 理解， linux， 进程

  • 写时复制(Copy On Write)

    一般我们运行程序都是Fork一个进程后马上执行Exec加载程序，而Fork的时候实际上用的是父进程的堆栈空间，Linux通过Copy On Write技术极大地减少了Fork的开销。Copy On Write的含义是只有真正写的时候才把数据写到子进程的数据，Fork时只会把页表复制到子进程，这样父子进程都指向同一个物理内存页，只有再写子进程的时候才会把内存页的内容重新复制一份。

    黑派客
    复制， copy， write， 理解， linux

  • 共享内存

    对于共享内存是好是坏，我们不能妄下定论，不过学习一下总是好的。不同进程之间内存空间是独立的，也就是说进程不能访问也不会干扰其他进程的内存。如果两个进程希望通过共享内存的方式通信呢？可以通过mmap()系统调用实现。Go实例Go也实现了mmap()函数支持共享内存，不过也是通过cgo来调用C实现的系统调用函数。Cgo是什么？

    黑派客
    共享， 内存， 理解， linux， 进程

  • 文件描述符

    Linux很重要的设计思想就是一切皆文件，网络是文件，键盘等外设也是文件，很神奇吧？于是所有资源都有了统一的接口，开发者可以像写文件那样通过网络传输数据，我们也可以通过/proc/的文件看到进程的资源使用情况。内核给每个访问的文件分配了文件描述符(File Descriptor)，它本质是一个非负整数，在打开或新建文件时返回，以后读写文件都要通过这个文件描述符了。

    黑派客
    文件， 描述符， 理解， linux， 进程

  • 守护(Daemon)进程

    我们可以认为守护进程就是后台服务进程，因为它会有一个很长的生命周期提供服务，关闭终端不会影响服务，也就是说可以忽略某些信号。实现守护进程首先要保证进程在后台运行，可以在启动程序后面加&，当然更原始的方法是进程自己fork然后结束父进程。if (pid=fork()) { exit(0); // Parent process}然后是与终端、进程组、会话(Session)分离。

    黑派客
    守护， daemon， 进程， 理解， linux

  • 孤儿进程概念

    我们经常听别人说到孤儿进程(Orphan Process)，究竟是什么呢，现在我们一次理解透。根据维基百科的解释，孤儿进程指的是在其父进程执行完成或被终止后仍继续运行的一类进程。孤儿进程与僵尸进程是完全不同的，后面会详细介绍僵尸进程。而孤儿进程借用了现实中孤儿的概念，也就是父进程不在了，子进程还在运行，这时我们就把子进程的PPID设为1。

    黑派客
    孤儿， 进程， 概念， 理解， linux

  • 第三章 进程进阶

    学习进程基础和 Go 编程时候后，我们会接触进程更底层的概念，包括信号、进程锁和系统调用等。通过学习这章我们对进程的所有概念都了如指掌了，充分理解这些概念后有助于我们实现更高效的应用程序。

    黑派客
    第三章， 进程， 进阶， 理解， linux

  • 复制(Fork)进程

    如果我们仅仅想复制父进程的堆栈空间呢，很遗憾Go没有提供这样的接口，因为使用Spawn、Exec和Goroutine已经能覆盖绝大部分的使用案例了。事实上无论是Spawn还是Exec都是通过实现Fork系统调用来实现的，后面将会详细介绍它的实现原理。

    黑派客
    复制， fork， 进程， 理解， linux

  • 衍生(Spawn)新进程

    这是来自GoByExample的例子，代码在https://gobyexample.com/spawning-processes。它能够执行任意Go或者非Go程序，并且等待返回结果，外部进程结束后继续执行本程序。代码实现package mainimport "fmt"import "io/ioutil"import "os/exec"func main() { dateCmd := exec.Command("date") dateOut, err := dateCmd.Output() if err !

    黑派客
    衍生， spawn， 进程， 理解， linux

  • Nohup命令

    每个开发者都会躺过这个坑，在命令行跑一个后台程序，关闭终端后发现进程也退出了，网上搜一下发现要用nohup，究竟什么原因呢？原来普通进程运行时默认会绑定TTY(虚拟终端)，关闭终端后系统会给上面所有进程发送TERM信号，这时普通进程也就退出了。当然还有些进程不会退出，这就是后面将会提到的守护进程。

    黑派客
    nohup， 命令， 理解， linux， 进程

  • POSIX简介

    POSIX(Portable Operation System Interface)听起来好高端，就是一种操作系统的接口标准，至于谁遵循这个标准呢？就是大名鼎鼎的Unix和Linux了，有人问Mac OS是否兼容POSIX呢，答案是Yes苹果的操作系统也是Unix-based的。有了这个规范，你就可以调用通用的API了，Linux提供的POSIX系统调用在Unix上也能执行，因此学习Linux的底层接口最好就是理解POSIX标准。

    黑派客
    posix， 简介， 理解， linux， 进程
上一页 下一页

热门标签

关注时代Java

Copyright © 2014-2024NowJava. All Rights Reserved. 时代Java 版权所有 京ICP备14059627号-7

关注时代Java