进程、线程、协程、并发、并行

目录 一、进程、线程 概念 与并行、并发的关系 python中的多进程、多线程 二、并行 实现并行计算有三种方式 三、与DL分布式训练的关系 四、多个进程同时操作一个文件 一、进程、线程 概念 进程是操作系统资源分配（内存，显卡，磁盘）的最小单位； 线程是执行调度（即cpu调度）的最小单位（cpu看到的都是线程而不是进程），一个进程可以有一个或多个线程，线程之间共享进程的资源。 与并行、并发的关系

>>阅读原文<<