Python大数据处理代码性能优化

在作大数据处理时，可能会涉及到大矩阵运算和并行计算，python原生对这些支持的不是太好，必需要进行优化。 大数据、大矩阵、并行计算时，能够从如下几点对python代码进行优化：python 矩阵计算 对向量、矩阵作运算（拼接）时，使用numpy，效率会高于list。web 用joblib将numpy格式存储矩阵为’.jl’格式，读入asm opcode 1,2,3,4-gram（8G）数据（格式

>>阅读原文<<