140种Python标准库、第三方库和外部工具

导读:Python数据工具箱涵盖从数据源到数据可视化的完整流程中涉及到的经常使用库、函数和外部工具。其中既有Python内置函数和标准库,又有第三方库和工具。python

这些库可用于文件读写、网络抓取和解析、数据链接、数清洗转换、数据计算和统计分析、图像和视频处理、音频处理、数据挖掘/机器学习/深度学习、数据可视化、交互学习和集成开发以及其余Python协同数据工做工具。mysql

 

做者:宋天龙  来源:大数据(ID:hzdashuju)git

 

为了区分不一样对象的来源和类型,本文将在描述中经过如下方法进行标识:正则表达式

 

  • Python内置函数:Python自带的内置函数。函数无需导入,直接使用。例如要计算-3.2的绝对值,直接使用abs函数,方法是redis

 

abs(-3.2) 

 

  • Python标准库:Python自带的标准库。Python标准库无需安装,只须要先经过import方法导入即可使用其中的方法。例如导入string模块,而后使用其中的find方法:算法

import stringstring.find('abcde','b')
  • 第三方库:Python的第三方库。这些库须要先进行安装(部分可能须要配置)。sql

 

  • 外部工具:非Python写成的库或包,用于Python数据工做的相关工具。shell

 

「推荐度」3星最高,1星最低。数据库

 

 

01 文件读写

 

文件的读写包括常见的txt、Excel、xml、二进制文件以及其余格式的数据文本,主要用于本地数据的读写。编程

 

 

1. open(name[, mode[, buffering]])

 

  • 类型:Python内置函数

  • 描述:Python默认的文件读写方法

  • 推荐度:★★★

 

2. numpy.loadtxt、numpy.load和numpy.fromfile

 

  • 类型:第三方库

  • 描述:Numpy自带的读写函数,包括loadtxt、load和fromfile,用于文本、二进制文件读写

  • 推荐度:★★★

 

3. pandas.read_*

 

  • 类型:第三方库

  • 描述:Pandas自带的read文件方法,例如ead_csv、read_fwf、read_table等,用于文本、Excel、二进制文件、HDF五、表格、SAS文件、SQL数据库、Stata文件等的读写

  • 推荐度:★★★

 

4. xlrd

 

  • 类型:第三方库

  • 描述:用于Excel文件读取

  • 推荐度:★★

 

5. xlwt

 

  • 类型:第三方库

  • 描述:用于Excel文件写入

  • 推荐度:★★

 

6. pyexcel-xl

 

  • 类型:第三方库

  • 描述:用于Excel文件读写

  • 推荐度:★★

 

7. xluntils

 

  • 类型:第三方库

  • 描述:用于Excel文件读写

  • 推荐度:★★

 

8. pyExcelerator

 

  • 类型:第三方库

  • 描述:用于Excel文件读写

  • 推荐度:★

 

9. openpyxl

 

  • 类型:第三方库

  • 描述:用于Excel文件读写

  • 推荐度:★

 

10. lxml

 

  • 类型:第三方库

  • 描述:xml和HTML读取和解析

  • 推荐度:★★★

 

11. xml

 

  • 类型:Python标准库

  • 描述:xml对象解析和格式化处理

  • 推荐度:★★★

 

12. libxml2

 

  • 类型:第三方库

  • 描述:xml对象解析和格式化处理

  • 推荐度:★

 

13. xpath

 

  • 类型:第三方库

  • 描述:xml对象解析和格式化处理

  • 推荐度:★★

 

14. win32com

 

  • 类型:第三方库

  • 描述:有关Windows系统操做、Office(Word、Excel等)文件读写等的综合应用库

  • 推荐度:★

 

 

02 网络抓取和解析

 

网络抓取和解析用于从互联网中抓取信息,并对HTML对象进行处理,有关xml对象的解析和处理的库在“01 文件读写”中找到。

 

 

15. requests

 

  • 类型:第三方库

  • 描述:网络请求库,提供多种网络请求方法并可定义复杂的发送信息

  • 推荐度:★★★

 

16. urllib

 

  • 类型:Python标准库

  • 描述:Python自带的库,简单的读取特定URL并得到返回的信息

  • 推荐度:★★

 

17. urllib2

 

  • 类型:Python标准库

  • 描述:Python自带的库,读取特定URL并得到返回的信息,相对于urllib可处理更多HTTP信息,例如cookie、身份验证、重定向等

  • 推荐度:★★

 

18. urlparse

 

  • 类型:Python标准库

  • 描述:Python自带的URL解析库,可自动解析URL不一样的域、参数、路径等

  • 推荐度:★★★

 

19. HTMLParser

 

  • 类型:Python标准库

  • 描述:Python自带的HTML解析模块,可以很容易的实现HTML文件的分析

  • 推荐度:★★★

 

20. Scapy

 

  • 类型:第三方库

  • 描述:分布式爬虫框架,可用于模拟用户发送、侦听和解析并假装网络报文,经常使用于大型网络数据爬取

  • 推荐度:★★★

 

21. Beautiful Soup

 

  • 类型:第三方库

  • 描述:Beautiful Soup是网页数据解析和格式化处理工具,一般配合Python的urllib、urllib2等库一块儿使用

  • 推荐度:★★★

 

 

03 数据库链接

 

数据库链接可用于链接众多数据库以及访问通用数据库接口,可用于数据库维护、管理和增、删、改、查等平常操做。

 

 

22. mysql-connector-python

 

  • 类型:第三方库

  • 描述:MySQL官方驱动链接程序

  • 推荐度:★★★

 

23. pymysql

 

  • 类型:第三方库

  • 描述:MySQL链接库,支持Python3

  • 推荐度:★★★

 

24. MySQL-python

 

  • 类型:第三方库

  • 描述:MySQL链接库

  • 推荐度:★★

 

25. cx_Oracle

 

  • 类型:第三方库

  • 描述:Oracle链接库

  • 推荐度:★★★

 

26. psycopg2

 

  • 类型:第三方库

  • 描述:Python编程语言中很是受欢迎的PostgreSQL适配器

  • 推荐度:★★★

 

27. redis

 

  • 类型:Python标准库

  • 描述:Redis链接库

  • 推荐度:★★★

 

28. pymongo

 

  • 类型:第三方库

  • 描述:MongoDB官方驱动链接程序

  • 推荐度:★★★

 

29. HappyBase

 

  • 类型:第三方库

  • 描述:HBase链接库

  • 推荐度:★★★

 

30. py2neo

 

  • 类型:第三方库

  • 描述:Neo4j链接库

  • 推荐度:★★★

 

31. cassandra-driver

 

  • 类型:第三方库

  • 描述:Cassandra(1.2+)和DataStax Enterprise(3.1+)链接库

  • 推荐度:★★★

 

32. sqlite3

 

  • 类型:Python标准库

  • 描述:Python自带的模块,用于操做SQLite数据库

  • 推荐度:★★★

 

33. pysqlite2

 

  • 类型:第三方库

  • 描述:SQLite 3.x链接库

  • 推荐度:★★

 

34. bsddb3

 

  • 类型:第三方库

  • 描述:Berkeley DB链接库

 

35. bsddb

 

  • 类型:Python标准库

  • 描述:Python自带的模块,提供了一个到Berkeley DB库的接口

  • 推荐度:★★

 

36. dbhash

 

  • 类型:Python标准库

  • 描述:Python自带的模块,dbhash模块提供了使用BSD数据库库打开数据库的功能。该模块镜像了提供对DBM样式数据库访问的其余Python数据库模块的接口。bsddb模块须要使用dbhash

  • 推荐度:★★

 

37. adodb

 

  • 类型:第三方库

  • 描述:ADOdb是一个数据库抽象库,支持常见的数据和数据库接口并可自行进行数据库扩展,该库能够对不一样数据库中的语法进行解析和差别化处理,具备很高的通用性

  • 推荐度:★★★

 

38. SQLObject

 

  • 类型:第三方库

  • 描述:SQLObject是一种流行的对象关系管理器,用于向数据库提供对象接口,其中表为类、行为实例、列为属性

  • 推荐度:★★

 

39. SQLAlchemy

 

  • 类型:第三方库

  • 描述:SQLAlchemy是Python SQL工具包和对象关系映射器,为应用程序开发人员提供了SQL的所有功能和灵活性控制

  • 推荐度:★★

 

40. ctypes

 

  • 类型:第三方库

  • 描述:ctypes是Python的一个外部库,提供和C语言兼容的数据类型,能够很方便地调用C DLL中的函数

  • 推荐度:★★★

 

41. pyodbc

 

  • 类型:第三方库

  • 描述:Python经过ODBC访问数据库的接口库

  • 推荐度:★★★

 

42. Jython

 

  • 类型:第三方库

  • 描述:Python经过JDBC访问数据库的接口库

  • 推荐度:★★★

 

 

04 数据清洗转换

 

数据清洗转换主用于数据正式应用以前的预处理工做。

 

 

43. frozenset([iterable])

 

  • 类型:Python内置函数

  • 描述:返回一个新的frozenset对象,可选择从iterable取得的元素

  • 推荐度:★★★

 

44. int(x)

 

  • 类型:Python内置函数

  • 描述:返回x的整数部分

  • 推荐度:★★★

 

45. isinstance(object, classinfo)

 

  • 类型:Python内置函数

  • 描述:返回object是不是指定的classinfo实例信息

  • 推荐度:★★★

 

46. len(s)

 

  • 类型:Python内置函数

  • 描述:返回对象的长度或项目数量

  • 推荐度:★★★

 

47. long(x)

 

  • 类型:Python内置函数

  • 描述:返回由字符串或数字x构造的长整型对象

  • 推荐度:★★★

 

48. max(iterable[, key])

 

  • 类型:Python内置函数

  • 描述:返回一个可迭代或最大的两个或多个参数中的最大项

  • 推荐度:★★★

 

49. min(iterable[, key])

 

  • 类型:Python内置函数

  • 描述:返回一个可迭代或最大的两个或多个参数中的最小项

  • 推荐度:★★★

 

50. range(start, stop[, step])

 

  • 类型:Python内置函数

  • 描述:用于与for循环一块儿建立循环列表,经过指定start(开始)、stop(结束)和step(步长)控制迭代次数并获取循环值

  • 推荐度:★★★

 

51. raw_input(prompt)

 

  • 类型:Python内置函数

  • 描述:捕获用户输入并做为字符串返回(不推荐使用input做为用户输入的捕获函数)

  • 推荐度:★★★

 

52. round(number[, ndigits])

 

  • 类型:Python内置函数

  • 描述:返回number小数点后ndigits位的四舍五入的浮点数

  • 推荐度:★★★

 

53. set([iterable])

 

  • 类型:Python内置函数

  • 描述:返回一个新的集合对象,可选择从iterable获取的元素

  • 推荐度:★★★

 

54. slice(start, stop[, step])

 

  • 类型:Python内置函数

  • 描述:返回表示由范围(start、stop、step)指定的索引集的切片对象

  • 推荐度:★★

 

55. sorted(iterable[, cmp[, key[, reverse]]])

 

  • 类型:Python内置函数

  • 描述:从iterable的项中返回一个新的排序列表

  • 推荐度:★★★

 

56. xrange(start, stop[, step])

 

  • 类型:Python内置函数

  • 描述:此函数与range()很是类似,但返回一个xrange对象而不是列表

  • 推荐度:★★★

 

57. string

 

  • 类型:Python标准库

  • 描述:字符串处理库,可实现字符串查找、分割、组合、替换、去重、大小写转换及其余格式化处理

  • 推荐度:★★★

 

58. re

 

  • 类型:Python标准库

  • 描述:正则表达式模块,在文本和字符串处理中常用

  • 推荐度:★★★

 

59. random

 

  • 类型:Python标准库

  • 描述:该模块为各类分布实现伪随机数生成器,支持数据均匀分布、正态(高斯)分布、对数正态分布、负指数分布、伽马和β分布等

  • 推荐度:★★★

 

60. os

 

  • 类型:Python标准库

  • 描述:用于新建、删除、权限修改、切换路径等目录操做,以及调用执行系统命令

  • 推荐度:★★★

 

61. os.path

 

  • 类型:Python标准库

  • 描述:针对目录的遍历、组合、分割、判断等操做,经常使用于数据文件的判断、查找、合并

  • 推荐度:★★★

 

62. prettytable

 

  • 类型:Python标准库

  • 描述:格式化表格输出模块

  • 推荐度:★★

 

63. json

 

  • 类型:Python标准库

  • 描述:Python对象与json对象的转换

  • 推荐度:★★★

 

64. base64

 

  • 类型:Python标准库

  • 描述:将任意二进制字符串编码和解码为文本字符串的Base16,Base32和Base64

  • 推荐度:★★★

 

 

05 数据计算和统计分析

 

数据计算和统计分析主要用于数据探查、计算和初步数据分析等工做。

 

 

65. numpy

 

  • 类型:第三方库

  • 描述:NumPy是Python科学计算的基础工具包,不少Python数据计算工做库都依赖它

  • 推荐度:★★★

 

66. scipy

 

  • 类型:第三方库

  • 描述:Scipy是一组专门解决科学和工程计算不一样场景的主题工具包

  • 推荐度:★★★

 

67. pandas

 

  • 类型:第三方库

  • 描述:Pandas是一个用于Python数据分析的库,它的主要做用是进行数据分析。Pandas提供用于进行结构化数据分析的二维的表格型数据结构DataFrame,相似于R中的数据框,能提供相似于数据库中的切片、切块、聚合、选择子集等精细化操做,为数据分析提供了便捷

  • 推荐度:★★★

 

68. statsmodels

 

  • 类型:第三方库

  • 描述:Statsmodels是Python的统计建模和计量经济学工具包,包括一些描述性统计、统计模型估计和统计测试,集成了多种线性回归模型、广义线性回归模型、离散数据分布模型、时间序列分析模型、非参数估计、生存分析、主成分分析、核密度估计以及普遍的统计测试和绘图等功能

  • 推荐度:★★★

 

69. abs(x)

 

  • 类型:Python内置函数

  • 描述:返回x的绝对值

  • 推荐度:★★★

 

70. cmp(x, y)

 

  • 类型:Python内置函数

  • 描述:比较两个对象x和y,并根据结果返回一个整数。若是x <y,则返回值为负数,若是x == y则为零,若是x> y则返回值为正

  • 推荐度:★★

 

71. float(x)

 

  • 类型:Python内置函数

  • 描述:返回从数字或字符串x构造的浮点数

  • 推荐度:★★★

 

72. pow(x, y[, z])

 

  • 类型:Python内置函数

  • 描述:返回x的y次幂。若是z存在,则返回x的y次幂,模z

  • 推荐度:★★★

 

73. sum(iterable[, start])

 

  • 类型:Python内置函数

  • 描述:从左到右依次迭代,返回总和

  • 推荐度:★★★

 

74. math

 

  • 类型:Python标准库

  • 描述:数学函数库,包括正弦、余弦、正切、余切、弧度转换、对数运算、圆周率、绝对值、取整等数学计算方法

  • 推荐度:★★★

 

75. cmath

 

  • 类型:Python标准库

  • 描述:与math基本一致,区别是cmath运算的是复数

  • 推荐度:★★

 

76. decimal

 

  • 类型:Python标准库

  • 描述:10进制浮点运算

  • 推荐度:★★

 

77. fractions

 

  • 类型:Python标准库

  • 描述:分数模块提供对有理数算术的支持

  • 推荐度:★★

 

 

06 天然语言处理和文本挖掘

 

天然语言处理和文本挖掘库主要用于以天然语言文本为对象的数据处理和建模。

 

 

78. nltk

 

  • 类型:第三方库

  • 描述:NLTK是一个Python天然语言处理工具,它用于对天然语言进行分类、解析和语义理解。目前已经有超过50种语料库和词汇资源

  • 推荐度:★★★

 

79. pattern

 

  • 类型:第三方库

  • 描述:Pattern是一个网络数据挖掘Python工具包,提供了用于网络挖掘(如网络服务、网络爬虫等)、天然语言处理(如词性标注、情感分析等)、机器学习(如向量空间模型、分类模型等)、图形化的网络分析模型

  • 推荐度:★★★

 

80. gensim

 

  • 类型:第三方库

  • 描述:Gensim是一个专业的主题模型(发掘文字中隐含主题的一种统计建模方法)Python工具包,用来提供可扩展统计语义、分析纯文本语义结构以及检索语义上类似的文档

  • 推荐度:★★★

 

81. 结巴分词

 

  • 类型:第三方库

  • 描述:结巴分词是国内流行的Python文本处理工具包,分词模式分为三种模式:精确模式、全模式和搜索引擎模式,支持繁体分词、自定义词典等,是很是好的Python中文分词解决方案,能够实现分词、词典管理、关键字抽取、词性标注等

  • 推荐度:★★★

 

82. SnowNLP

 

  • 类型:第三方库

  • 描述:SnowNLP是一个Python写的类库,能够方便的处理中文文本内容。该库是受到了TextBlob的启发而针对中文处理写的类库,和TextBlob不一样的是这里没有用NLTK,全部的算法都是本身实现的,而且自带了一些训练好的字典

  • 推荐度:★★

 

83. smallseg

 

  • 类型:第三方库

  • 描述:Smallseg是一个开源的、基于DFA的轻量级的中文分词工具包。可自定义词典、切割后返回登陆词列表和未登陆词列表、有必定的新词识别能力

  • 推荐度:★★

 

84. spaCy

 

  • 类型:第三方库

  • 描述:spaCy是一个Python天然语言处理工具包,它结合Python和Cython使得天然语言处理能力达到了工业强度

  • 推荐度:★★★

 

85. TextBlob

 

  • 类型:第三方库

  • 描述:TextBlob 是一个处理文本数据的Python库,可用来作词性标注、情感分析、文本翻译、名词短语抽取、文本分类等

  • 推荐度:★★

 

86. PyNLPI

 

  • 类型:第三方库

  • 描述:PyNLPI是一个适合各类天然语言处理任务的集合库,可用于中文文本分词、关键字分析等,尤为重要的是其支持中英文映射,支持UTF-8和GBK编码的字符串等

  • 推荐度:★★★

 

87. synonyms

 

  • 类型:第三方库

  • 描述:中文近义词工具包,可用于天然语言理解的不少任务:文本对齐,推荐算法,类似度计算,语义偏移,关键字提取,概念提取,自动摘要,搜索引擎等。

  • 推荐度:★★★

 

 

07 图像和视频处理

 

图像处理和视频处理主要适用于基于图像的操做、处理、分析和挖掘,如人脸识别、图像识别、目标跟踪、图像理解等。

 

 

88. PIL/Pillow

 

  • 类型:第三方库

  • 描述:PIL是一个经常使用的图像读取、处理和分析的库,提供了多种数据处理、变换的操做方法和属性。PIL仅支持到2.7版本且已经好久没有更新,一群志愿者基于PIL发布了新的分支Pillow。Pillow同时支持Python2和Python3而且加入不少新的功能

  • 推荐度:★★

 

89. OpenCV

 

  • 类型:第三方库

  • 描述:OpenCV是一个强大的图像和视频工做库。它提供了多种程序接口,支持跨平台(包括移动端)应用。OpenCV的设计效率很高,它以优化的C / C ++编写,库能够利用多核处理。除了对图像进行基本处理外,还支持图像数据建模,并预制了多种图像识别引擎,如人脸识别

  • 推荐度:★★★

 

90. scikit-image

 

  • 类型:第三方库

  • 描述:scikit-image(也称skimage)是一个图像处理库,支持颜色模式转换、滤镜、绘图、图像处理、特征检测等多种功能

  • 推荐度:★★

 

91. imageop

 

  • 类型:Python标准库

  • 描述:Python自带的函数,对图像基本操做,包括裁剪、缩放、模式转换

  • 推荐度:★

 

92. colorsys

 

  • 类型:Python标准库

  • 描述:Python自带的函数,实现不一样图像色彩模式的转换

  • 推荐度:★

 

93. imghdr

 

  • 类型:Python标准库

  • 描述:Python自带的函数,返回图像文件的类型

  • 推荐度:★

 

 

08 音频处理

 

音频处理主要适用于基于声音的处理、分析和建模,主要应用于语音识别、语音合成、语义理解等。

 

 

94. TimeSide

 

  • 类型:第三方库

  • 描述:TimeSide是一个可以进行音频分析、成像、转码、流媒体和标签处理的Python框架,能够对任何音频或视频内容很是大的数据集进行复杂的处理

  • 推荐度:★★★

 

95. audiolazy

 

  • 类型:第三方库

  • 描述:audiolazy是一个用于实时声音数据流处理的库,支持实时数据应用处理、无限数据序列表示、数据流表示等

  • 推荐度:★★

 

96. pydub

 

  • 类型:第三方库

  • 描述:pydub支持多种格式声音文件,可进行多种信号处理(例如压缩、均衡、归一化)、信号生成(例如正弦、方波、锯齿等)、音效注册、静音处理等

  • 推荐度:★★★

 

97. audioop

 

  • 类型:Python标准库

  • 描述:Python自带的函数,可实现对声音片断的一些经常使用操做

  • 推荐度:★★

 

98. tinytag

 

  • 类型:第三方库

  • 描述:tinytag用于读取多种声音文件的元数据,涵盖MP三、OGG、OPUS、MP四、M4A、FLAC、WMA、Wave等格式

  • 推荐度:★★

 

99. aifc

 

  • 类型:Python标准库

  • 描述:Python自带的函数,读写AIFF和AIFC文件

  • 推荐度:★

 

100. sunau

 

  • 类型:Python标准库

  • 描述:Python自带的函数,读写Sun AU文件

  • 推荐度:★

 

101. wave

 

  • 类型:Python标准库

  • 描述:Python自带的函数,读写WAV文件

  • 推荐度:★★

 

102. chunk

 

  • 类型:Python标准库

  • 描述:Python自带的函数,读取EA IFF 85块格式的文件

  • 推荐度:★

 

103. sndhdr

 

  • 类型:Python标准库

  • 描述:Python自带的函数,返回声音文件的类型

  • 推荐度:★

 

104. ossaudiodev

 

  • 类型:Python标准库

  • 描述:该模块支持访问OSS(开放声音系统)音频接口

  • 推荐度:★★★

 

 

09 数据挖掘/机器学习/深度学习

 

数据挖掘、机器学习和深度学习等是Python进行数据建模和挖掘学习的核心模块。

 

 

105. Scikit-Learn

 

  • 类型:第三方库

  • 描述:scikit-learn(也称SKlearn)是一个基于Python的机器学习综合库,内置监督式学习和非监督式学习机器学习方法,包括各类回归、聚类、分类、流式学习、异常检测、神经网络、集成方法等主流算法类别,同时支持预置数据集、数据预处理、模型选择和评估等方法,是一个很是完整、流行的机器学习工具库

  • 推荐度:★★★

 

106. TensorFlow

 

  • 类型:第三方库

  • 描述:TensorFlow 是谷歌的第二代机器学习系统,内建深度学习的扩展支持,任何可以用计算流图形来表达的计算,均可以使用 TensorFlow

  • 推荐度:★★★

 

107. NuPIC

 

  • 类型:第三方库

  • 描述:NuPIC是一个以HTM(分层时间记忆)学习算法为工具的机器智能平台。NuPIC适合于各类各样的问题,尤为适用于检测异常和预测应用

  • 推荐度:★★★

 

108. PyTorch

 

  • 类型:第三方库

  • 描述:PyTorch是FaceBook推出的深度学习框架,它基于Python(而非lua)产生,它提供的动态计算图是显著区别于Tensorflow等其余学习框架的地方。

  • 推荐度:★★

 

109. Orange

 

  • 类型:第三方库

  • 描述:Orange经过图形化操做界面,提供交互式数据分析功能,尤为适用于分类、聚类、回归、特征选择和交叉验证工做

  • 推荐度:★★★

 

110. theano

 

  • 类型:第三方库

  • 描述:Theano是很是成熟的深度学习库。它与Numpy紧密集成,支持GPU计算、单元测试和自我验证

  • 推荐度:★★★

 

111. keras

 

  • 类型:第三方库

  • 描述:Keras是一个用Python编写的高级神经网络API,可以运行在TensorFlow或者Theano之上,它的开发重点是实现快速实验

  • 推荐度:★★

 

112. neurolab

 

  • 类型:第三方库

  • 描述:Neurolab是具备灵活网络配置和Python学习算法的基本神经网络算法库。它包含经过递归神经网络(RNN)实现的不一样变体,该库是同类RNN API中最好的选择之一

  • 推荐度:★★

 

113. PyLearn2

 

  • 类型:第三方库

  • 描述:PyLearn2是基于Theano的深度学习库,它旨在提供极大的灵活性,并使研究人员能够进行自由可控制,参数和属性的灵活、开放配置是亮点

  • 推荐度:★★★

 

114. OverFeat

 

  • 类型:第三方库

  • 描述:OverFeat是一个深度学习库,主要用于图片分类、定位物体检测

  • 推荐度:★★

 

115. Pyevolve

 

  • 类型:第三方库

  • 描述:Pyevolve是一个完整的遗传算法框架,也支持遗传编程

  • 推荐度:★★

 

116. Caffe2

 

  • 类型:第三方库

  • 描述:Cafffe2也是FaceBook推出的深度学习框架,相比于PyTorch 更适合于研究,Caffe2 适合大规模部署,主要用于计算机视觉,它对图像识别的分类具备很好的应用效果

  • 推荐度:★★

 

 

10 数据可视化

 

数据可视化主要用于作数据结果展现、数据模型验证、图形交互和探查等方面。

 

 

117. Matplotlib

 

  • 类型:第三方库

  • 描述:Matplotlib是Python的2D绘图库,它以各类硬拷贝格式和跨平台的交互式环境生成出版质量级别的图形,开发者能够仅须要几行代码,即可以生成多种高质量图形

  • 推荐度:★★★

 

118. pyecharts

 

  • 类型:第三方库

  • 描述:基于百度Echarts的强大的可视化工具库,其提供的图形功能众多,尤为对于复杂关系的展现能力较强

  • 推荐度:★★★

 

119. seaborn

 

  • 类型:第三方库

  • 描述:Seaborn是在Matplotlib的基础上进行了更高级的API封装,它能够做为Matplotlib的补充

  • 推荐度:★★★

 

120. bokeh

 

  • 类型:第三方库

  • 描述:Bokeh是一种交互式可视化库,能够在WEB浏览器中实现美观的视觉效果

  • 推荐度:★★★

 

121. Plotly

 

  • 类型:第三方库

  • 描述:Plotly提供的图形库能够进行在线WEB交互,并提供具备出版品质的图形,支持线图、散点图、区域图、条形图、偏差条、框图、直方图、热图、子图、多轴、极坐标图、气泡图、玫瑰图、热力图、漏斗图等众多图形

  • 推荐度:★★★

 

122. VisPy

 

  • 类型:第三方库

  • 描述:VisPy是用于交互式科学可视化的Python库,旨在实现快速,可扩展和易于使用

  • 推荐度:★★

 

123. PyQtGraph

 

  • 类型:第三方库

  • 描述:PyQtGraph是一个创建在PyQt4 / PySide和numpy之上的纯Python图形和GUI库,主要用于数学/科学/工程应用

  • 推荐度:★★

 

124. ggplot

 

  • 类型:第三方库

  • 描述:ggplot是用Python实现的图形输出库,相似于 R中的图形展现版本

  • 推荐度:★★★

 

 

11 交互学习和集成开发

 

交互学习和集成开发主要用来作Python开发、调试和集成之用,包括Python集成开发环境和IDE。

 

 

125. IPython/ Jupyter

 

  • 类型:第三方库

  • 描述:IPython 是一个基于Python 的交互式shell,比默认的Python shell 好用得多,支持变量自动补全、自动缩进、交互式帮助、魔法命令、系统命令等,内置了许多颇有用的功能和函数。从IPython4.0开始,IPython衍生出了IPython和Jupyter两个分支。在该分支正式出现以前,IPython其实已经拥有了ipython notebook功能,所以,Jupyter更像是一个ipython notebook的升级版。

  • 推荐度:★★★

 

126. Elpy

 

  • 类型:第三方库

  • 描述:Elpy是Emacs用于Python的开发环境,它结合并配置了许多其余软件包,它们都是用Emacs Lisp和Python编写的

  • 推荐度:★★

 

127. PTVS

 

  • 类型:第三方库

  • 描述:Visual Studio 的 Python 工具

  • 推荐度:★★

 

128. PyCharm

 

  • 类型:外部工具

  • 描述:PyCharm带有一整套能够帮助用户在使用Python语言开发时提升其效率的工具,好比调试、语法高亮、项目管理、代码跳转、智能提示、自动完成、单元测试、版本控制并可集成IPython、系统终端命令行等,在PyCharm里几乎就能够实现全部有关Python工做的所有过程

  • 推荐度:★★★

 

129. LiClipse

 

  • 类型:外部工具

  • 描述:LiClipse是基于Eclipse的免费多语言 IDE,经过其中的PyDev可支持 Python开发应用

  • 推荐度:★★

 

130. Spyder

 

  • 类型:外部工具

  • 描述:Spyder是一个开源的Python IDE,由IPython和众多流行的Python库的支持,是一个具有高级编辑、交互式测试、调试以及数字计算环境的交互式开发环境

  • 推荐度:★★

 

 

12 其余Python协同数据工做工具

 

其余Python协同数据工做工具指除了上述主题之外,其余在数据工做中经常使用的工具或库。

 

131. tesseract-ocr

 

  • 类型:外部工具

  • 描述:这是一个Google支持的开源OCR图文识别项目,支持超过200种语言(包括中文),并支持自定义训练字符集,支持跨Windows、Linux、Mac OSX 多平台使用

  • 推荐度:★★★

 

132. RPython

 

  • 类型:第三方库

  • 描述:R集成库

  • 推荐度:★★★

 

133. Rpy2

 

  • 类型:第三方库

  • 描述:Python链接R的库

 

134. matpython

 

  • 类型:第三方库

  • 描述:MATLAB集成库

  • 推荐度:★★★

 

135. Lunatic Python

 

  • 类型:第三方库

  • 描述:Lua集成库

  • 推荐度:★★

 

136. PyCall.jl

 

  • 类型:第三方库

  • 描述:Julia集成库

  • 推荐度:★★

 

137. PySpark

 

  • 类型:第三方库

  • 描述:Spark提供的Python API

  • 推荐度:★★★

 

138. dumbo

 

  • 类型:第三方库

  • 描述:这个模块可让Pythoner轻松的编写和运行 Hadoop 程序,程序版本比较早,能够做为参考

  • 推荐度:★★

 

139. dpark

 

  • 类型:第三方库

  • 描述:Python对Spark的克隆版本,类MapReduce框架

  • 推荐度:★★

 

140. streamparse

 

  • 类型:第三方库

  • 描述:Streamparse容许经过Storm对实时数据流运行Python代码

  • 推荐度:★★★

 


关于做者:宋天龙,大数据技术专家,触脉咨询合伙人兼副总裁,前Webtrekk中国区技术和咨询负责人(Webtrekk,德国的在线数据分析服务提供商)。擅长数据挖掘、建模、分析与运营,精通端到端数据价值场景设计、业务需求转换、数据结构梳理、数据建模与学习以及数据工程交付。

原文地址:https://mp.weixin.qq.com/s?__biz=MjM5ODE1NDYyMA==&mid=2653393556&idx=1&sn=a68f7112d32c79a449730eb9002b00f6&chksm=bd1c2a878a6ba391b7ade98b3c1dbe56fa4e3b5a70af7f53dc146f8f3ec9f20ff03ecea5624c&mpshare=1&scene=1&srcid=#rd

相关文章
相关标签/搜索