python高性能第二版_Python高性能第2版

第 1 章 基准测试与剖析 1

1.1　设计应用程序　2

1.2　编写测试和基准测试程序　7

1.3　使用pytest-benchmark 编写更佳的测试和基准测试程序　10

1.4　使用cProfile 找出瓶颈　12

1.5　使用line_profiler 逐行进行剖析　16

1.6　优化代码　17

1.7　模块dis　19

1.8　使用memory_profiler 剖析内存使用情况　19

1.9　小结　21

第　2 章 纯粹的Python 优化　22

2.1　有用的算法和数据结构　22

2.1.1　列表和双端队列　23

2.1.2　字典　25

2.1.3　集　28

2.1.4　堆　29

2.1.5　字典树　30

2.2　缓存和memoization　32

2.3　推导和生成器　34

2.4　小结　36

第3　章 使用NumPy 和Pandas 快速执行数组操作　37

3.1　NumPy 基础　37

3.1.1　创建数组　38

3.1.2　访问数组　39

3.1.3　广播　43

3.1.4　数学运算　45

3.1.5　计算范数　46

3.2　使用NumPy 重写粒子模拟器　47

3.3　使用numexpr zui大限度地提高性能　49

3.4　Pandas　51

3.4.1　Pandas 基础　51

3.4.2　使用Pandas 执行数据库式操作　55

3.5　小结　59

第4　章 使用Cython 获得C 语言性能　60

4.1　编译Cython 扩展　60

4.2　添加静态类型　62

4.2.1　变量　63

4.2.2　函数　64

4.2.3　类　65

4.3　共享声明　66

4.4　使用数组　67

4.4.1　C 语言数组和指针　67

4.4.2　NumPy 数组　69

4.4.3　类型化内存视图　70

4.5　使用Cython 编写粒子模拟器　72

4.6　剖析Cython 代码　75

4.7　在Jupyter 中使用Cython　78

4.8　小结　80

第5　章 探索编译器　82

5.1　Numba　82

5.1.1　Numba 入门　83

5.1.2　类型特殊化　84

5.1.3　对象模式和原生模式　85

5.1.4　Numba 和NumPy　88

5.1.5　JIT 类　91

5.1.6　Numba 的局限性　94

5.2　PyPy 项目　95

5.2.1　安装PyPy　95

5.2.2　在PyPy 中运行粒子模拟器　96

5.3　其他有趣的项目　97

5.4　小结　97

第6　章 实现并发性　98

6.1　异步编程　98

6.1.1　等待I/O　99

6.1.2　并发　99

6.1.3　回调函数　101

6.1.4　future　104

6.1.5　事件循环　105

6.2　asyncio 框架　108

6.2.1　协程　108

6.2.2　将阻塞代码转换为非阻塞代码　111

6.3　响应式编程　113

6.3.1　被观察者　113

6.3.2　很有用的运算符　115

6.3.3　hot 被观察者和cold 被观察者　118

6.3.4　打造CPU 监视器　121

6.4　小结　123

第7　章 并行处理　124

7.1　并行编程简介　124

7.2　使用多个进程　127

7.2.1　Process 和Pool 类　127

7.2.2　接口Executor　129

7.2.3　使用蒙特卡洛方法计算pi 的近似值　130

7.2.4　同步和锁　132

7.3　使用OpenMP 编写并行的Cython代码　134

7.4　并行自动化　136

7.4.1　Theano 初步　137

7.4.2　Tensorflow　142

7.4.3　在GPU 中运行代码　144

7.5　小结　146

第8　章 分布式处理　148

8.1　分布式计算简介　148

8.2　Dask　151

8.2.1　有向无环图　151

8.2.2　Dask 数组　152

8.2.3　Dask Bag 和DataFrame　154

8.2.4　Dask distributed　158

8.3　使用PySpark　161

8.3.1　搭建Spark 和PySpark 环境　161

8.3.2　Spark 架构　162

8.3.3　弹性分布式数据集　164

8.3.4　Spark DataFrame　168

8.4　使用mpi4py 执行科学计算　169

8.5　小结　171

第9　章 高性能设计　173

9.1　选择合适的策略　173

9.1.1　普通应用程序　174

9.1.2　数值计算代码　174

9.1.3　大数据　176

9.2　组织代码　176

9.3　隔离、虚拟环境和容器　178

9.3.1　使用conda 环境　178

9.3.2　虚拟化和容器　179

9.4　持续集成　183

9.5　小结　184