Total Pageviews

Thursday 1 June 2017

TimLiu-Python ,Python资源集合

持续更新。。。 python 中文学习大本营 。 Python库学习收集QQ群: 461273222 ,欢迎入群。

目录

========

具体内容 =============================

========

网页框架

Django
Flask
Tornado
其他Web相关
  • Bottle - Bottle是一个快速、简单、轻量的WSGI微型web框架。利用Bottle构建小型站点和API的时间以秒计算。这个框架只有一个py文件,可以把它放进任何目录。
  • Tyrion - 支持多WEB框架Form表单验证组件,其完美的支持Tornado、Django、Flask、Bottle Web框架。
  • Wooey - Wooey 是一个简单的Python脚本的Web UI 界面。它能够提供日常数据分析,文件处理等功能。2015年出现的十大流行Python库
  • Odoo - 前OpenERP,开源的ERP和电子商务系统、CRM,功能强大。官网
  • stethoscope - 一个web应用,它收集一个指定用户的设备的信息,并为它们提供保护其系统的清晰具体的建议。
  • Tryton - Tryton是一个用于构建三层高级通用应用平台的商务框架,PostgreSQL作为数据库引擎,主模块用于以下活动领域:会计、发票开取、销售管理、采购管理、客户分析、库存管理、资源制造计划 (MRP)、项目管理、人力资源管理。
========

用户图形接口相关

  • pyglet - Pyglet是一个纯Python语言编写的跨平台框架,用于开发多媒体和窗口 * pyglet - Pyglet是一个纯Python语言编写的跨平台框架,用于开发多媒体和窗口特效应用。
  • kivy - Kivy 是一个开源工具包能够让使用相同源代码创建的程序能跨平台运行。它主要关注创新型用户界面开发,如:多点触摸应用程序。Kivy 还提供一个多点触摸鼠标模拟器。基于 Cython(C extensions for Python) 构建,当前支持的平台包括:Linux、Windows、Mac OS X和Android。
  • Py2exe - 把Python脚本转换为windows平台上面可以运行的可执行程序(*.exe)的工具,通过修改源码可以支持python3.0的代码。
  • pyinstaller - 把Python脚本转换为能直接运行的可执行文件,支持python2.7、python3.3-3.5,支持Windows (32-bit and 64-bit)、Linux (32-bit and 64-bit)、Mac OS X (32-bit and 64-bit)平台。
  • cx_Freeze - 把Python脚本转换为能直接运行的可执行文件,支持python3.x,特别简单。
  • Tkinter - Tkinter的是Tk的GUI工具包,与Python附带的Python接口。
  • wxPython - wxPython一个开源的Python接口的wxWindows。
  • PyQt - PyQt是一个创建GUI应用程序的工具包。它是Python编程语言和Qt库的成功融合。Qt库是目前最强大的库之一,GPL与商业协议。
  • PySide - 对跨平台的 GUI 工具集 Qt 的包装,捆绑在 Python 当中,LGPL协议。
  • Eric - Eric一个支持python、Ruby的强大IDE,与PyQt配合功能非常强大。
  • PyGTK - 一系列的 Python 对 GTK+ GUI 库的包装。
  • pyFacialRecognition - 用10几行代码自己写个人脸识别程序。
========

网络相关

  • aiohttp - aiohttp是一个为 asyncio 提供了简洁易用的 HTTP 客户端和服务器的库。
  • Requests - Requests是python的一个HTTP客户端库,跟urllib,urllib2类似,官网requests 源码阅读
  • Requests-cache - 缓存外部api请求, 使用教程
  • youtube-dl - 一个可从YouTube等网站下载视频的开源神器,采用Python开发,支持多个OS平台,支持众多视频网站国内优酷、土豆、新浪和搜狐,国外YouTube等赫然在列。
  • ppmessage - 皮皮消息,即插即用,在线客服,移动应用内即时通讯,私有的·微信·,自建的·钉钉·,开源,纯Python实现。
  • uvloop - 一个完整的asyncio事件循环的替代品,它建立在libuv基础之上,由Cython编写而成。性能非常高!
  • httpstat - 这个库能够直接将http请求的各状态在终端进行输出,类似于浏览器的调试模式!
  • ppmessage - 皮皮消息,即插即用,在线客服,移动应用内即时通讯,私有的·微信·,自建的·钉钉·,开源,纯Python实现。
========

数据库相关

  • SQLAlchemy - SQLAlchemy一个知名企业级的持久化模式的,专为高效率和高性能的数据库访问设计的,改编成一个简单的Python域语言的完整套件。它采用了数据映射模式(像Java中的Hibernate)而不是Active Record模式(像Ruby on Rails的ORM)。
  • SQLObject - SQLObject是一个介于SQL数据库和Python之间映射对象的Python ORM, 类似于Ruby on Rails的ActiveRecord模式。
  • Peewee - Peewee是一个小型但是十分强大的库,支持通过ORM的方式访问数据库,原生支持SQLite、MySQL和PostgreSQL等数据库。
  • pony - pony官网 Pony是一个非常酷和新的 Python ORM ,它能够让你使用Python generators来查询一个数据库。这些generators然后会转成高效的SQL。
  • asyncmongo - AsyncMongo是基于Tornado iploop的mongo数据库的异步库。
  • influxdb-python - InfluxDB -python 是一个时间序列数据库,用它来储存不同时间的测量值。通过 RESTFul API,它变得极其易用而且高效,另外,由于其内建了聚类功能,因此对数据的检索和分组也变得十分轻松。
  • elasticsearch-dsl-py - elasticsearch-dsl-py提供基于JSON的完整的Query DSL查询表达式(DSL即领域专用语言)。
  • MongoHub-Mac - MongoHub-Mac:mongo 图形化管理工具。
  • mongotron - mongotron:mongo 图形化管理工具,基于Electron与AngularJS写成。
  • tinydb - 一个小型的文档数据库,它允许你在本地文件中插入JSON数据并查询它。它只有1200多行代码,并且配有简单干净的文档和API。
========

游戏相关

========

开源框架

========

大数据与人工智能相关

  • pandas - 为 Python 编程语言提供高性能,易用数据结构和数据分析工具。在数据改动和数据预处理方面,Python 早已名声显赫,但是在数据分析与建模方面,Python 是个短板。Pands 软件就填补了这个空白,能让你用 Python 方便地进行你所有数据的处理,而不用转而选择更主流的专业语言,例如 R 语言。12 个使效率倍增的 Pandas 技巧
  • pulp - PuLP 是一个用 Python 编写的线性编程模型。它能产生线性文件,能调用高度优化的求解器,GLPK,COIN CLP/CBC,CPLEX,和GUROBI,来求解这些线性问题。
  • Matplotlib - Matplotlib是基于 Python 的 2D(数据)绘图库,它产生(输出)出版级质量的图表,用于各种打印纸质的原件格式和跨平台的交互式环境。matplotlib 既可以用在 python 脚本, python 和 ipython 的 shell 界面 (ala MATLAB® 或 Mathematica®),web 应用服务器,和6类 GUI 工具箱。matplotlib 尝试使容易事情变得更容易,使困难事情变为可能。你只需要少量几行代码,就可以生成图表,直方图,能量光谱(power spectra),柱状图,errorcharts,散点图(scatterplots)等。
  • Scikit-Learn - Scikit-Learn是一个简单有效地数据挖掘和数据分析工具(库)。关于最值得一提的是,它人人可用,重复用于多种语境。它基于 NumPy,SciPy 和 mathplotlib 等构建。
  • Spark -Spark 由一个驱动程序构成,它运行用户的 main 函数并在聚类上执行多个并行操作。Spark 最吸引人的地方在于它提供的弹性分布数据集(RDD),那是一个按照聚类的节点进行分区的元素的集合,它可以在并行计算中使用。RDDs 可以从一个 Hadoop 文件系统中的文件(或者其他的 Hadoop支持的文件系统的文件)来创建,或者是驱动程序中其他的已经存在的标量数据集合,把它进行变换。用户也许想要 Spark 在内存中永久保存 RDD,来通过并行操作有效地对 RDD 进行复用。最终,RDDs 无法从节点中自动复原。Spark 中第二个吸引人的地方在并行操作中变量的共享。
  • SciPy - SciPy是一个开源的Python算法库和数学工具包,SciPy包含的模块有最优化、线性代数、积分、插值、特殊函数、快速傅里叶变换、信号 处理和图像处理、常微分方程求解和其他科学与工程中常用的计算。其功能与软件MATLAB、Scilab和GNU Octave类似。Numpy和Scipy常常结合着使用,Python大多数机器学习库都依赖于这两个模块。
  • NumPy - NumPy几乎是一个无法回避的科学计算工具包,最常用的也许是它的N维数组对象,其他还包括一些成熟的函数库,用于整合C/C++和 Fortran代码的工具包,线性代数、傅里叶变换和随机数生成函数等。NumPy提供了两种基本的对象:ndarray(N-dimensional array object)和 ufunc(universal function object)。ndarray是存储单一数据类型的多维数组,而ufunc则是能够对数组进行处理的函数。
  • ipython - iPython 是一个Python 的交互式Shell,比默认的Python Shell 好用得多,功能也更强大。 她支持语法高亮、自动完成、代码调试、对象自省,支持 Bash Shell命令,内置了许多很有用的功能和函式等,非常容易使用。默认开启了matploblib的绘图交互,用起来很方便。jupyter-notebook - jupyter官网
  • PyML - PyML是一个Python机器学习工具包,为各分类和回归方法提供灵活的架构。它主要提供特征选择、模型选择、组合分类器、分类评估等功能。
  • gensim - gensim是一种NLP(自然语言处理),它提供了一些常用算法,例如 tf-idf、word2vec、doc2vec、LSA 等的快速、可拓展(内存无关)实现,同时还提供了简单易用的接口和完善的文档。
  • Blaze - Blaze 是下一代的 NumPy。用于处理分布式的各种不同数据源的计算。
  • Dask - Dask是一款基于外存的Python 调度工具。它通过将数据集分块处理并根据所拥有的核数分配计算量,这有助于进行大数据并行计算。它主要针对单机的并行计算进程。 异 * GWPY - GWPY一个可以分析引力波数据的Python包。
  • nupic - 使用的机器学习算法叫做脑皮质学习算法。
  • RocAlphaGo - 一个模仿AlphaGo的项目,围棋和深层神经网络树搜索。
  • agagd - 美国围棋选手使用的自动评级系统,不发段位证。
  • mrjob - 用Python来写MapReduce任务时非常有用的库。它允许你实现自己的 Mapper 和 Reducer 。在本地环境运行/测试你的MapReduce任务,然后部署到EMR或者你自己的MapReduce集群。官网
  • natsort - 默认sorted方法已经足够高效,并且能够满足你大多数时候的排序需求。
  • OpenAI universe - 是一个能在世界上所有的游戏、网站和其他应用中,衡量和训练AI通用智能的软件平台。
  • TensorFlow - 是一个开源软件库的AI引擎,用于使用数据流图进行数值计算。TensorFlow还包括TensorBoard,一个数据可视化工具包。
  • aiexperiments-ai-duet - 通过机器学习制作音乐。在许多MIDI例子上训练了一个神经网络,它学习有关音乐概念的知识、构建音符和节拍图谱。你只需弹奏几个音符,然后看看这个神经网如何回应。
  • Securitybot - 一个分布式告警聊天机器人的开源实现,如Ryan Huber的播客中所述。分布式告警改善了你的安全团队的监控效率,可以帮助你更快更有效地捕获安全事件。
  • Tweetfeels - 使用推特的streaming API的实时情感分析。它依赖于VADER情感分析,为用户定义的主题提供情感分数。它通过利用推特的streaming API来监听关于特定主题的实时推特,从而实现此目的。
  • scikit-plot - 一个直观的库,用于添加绘图功能到scikit-learn对象。
  • ChainerRL - ChainerRL是一个建立在Chainer之上的深度强化学习库。
  • mpi4py - Mpi4py是构建在mpi之上的python库,使得python的数据结构可以在进程(或者多个cpu)之间进行传递。
  • pylearn2 - 一个基于Theano的机器学习库,大部分功能是基于Theano顶层实现的。
  • PyMC - PyMC是一个实现贝叶斯统计模型和马尔科夫链蒙塔卡洛采样工具拟合算法的Python库。PyMC的灵活性及可扩展性使得它能够适用于解决各种问题。除了包含核心采样功能,PyMC还包含了统计输出、绘图、拟合优度检验和收敛性诊断等方法。
========

网络爬虫

  • scrapy - 最出名的网络爬虫,一个快速,高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。官方主页,Scrapy 轻松定制网络爬虫 - 教程Scrapy 中文指南
  • BeautifulSoup - Beautifu Soup不完全是一套爬虫工具,需要配合urllib使用,而是一套HTML/XML数据分析,清洗和获取工具。
  • python-goose - Python-Goose用Python重写,依赖了Beautiful Soup。给定一个文章的URL, 获取文章的标题和内容很方便。
  • pyspider - PySpider:一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写,分布式架构,支持多种数据库后端,强大的WebUI支持脚本编辑器,任务监视器,项目管理器以及结果查看器。demo地址,网络爬虫剖析,以Pyspider为例Scrapy 示例 —— Web 爬虫框架
  • PyQuery - 是 Python 仿照 jQuery 的严格实现。语法与 jQuery 几乎完全相同,所以不用再去费心去记一些奇怪的方法了。python爬虫神器PyQuery的使用方法
  • distribute_crawler - 使用scrapy,redis,mongodb,graphite实现的一个分布式网络爬虫。
  • you-get - 能帮你快速爬取你想要的一切,支持64个网站,包括优酷、土豆、爱奇艺、b站、酷狗音乐、虾米。官网
  • meizi_spider - 获取慕课网视频教程,基于Scrapy(0.22)。
  • spider_smooc - 爬取慕课网视频 ,使用BeautifulSoup模块解析html。
  • proxy_pool - 爬虫代理池,爬去取网上免费的代理IP。
========

测试与代码分析审核

  • splinter - Python自动化测试工具Splinter,不仅可以当web自动化测试工具 同时也可以当抓取交互式网站的爬虫程序来用的,不用去分析ajax请求数据了,可以模拟登录,用Python开发自动化测试脚本-splinter
  • swarm - 是一个简单的使用 gevent 开发的支持自定义协议的长连接压测框架。
  • PySonar2 - PySonar2王垠开发的,针对 Python 的代码静态分析工具。
  • Behave - BDD自动化测试框架。
  • Nose - Nose是最流行的针对Python的测试库之一。简单实例
  • locust - 一个开源负载测试工具。使用 Python 代码定义用户行为,也可以仿真百万个用户。
  • ReviewBoard - Review Board:在线代码审核工具,它所提供的应用程序可以支持代码审查流程。
  • Infer - Infer是Facebook最新开源的静态程序分析工具,用于在发布移动应用之前对代码进行分析,找出潜在的问题,包括 Android 、iOS等等。
  • voltron - Python 实现的黑客调试器前端。
  • Pympler - Pympler一个很棒的内存统计调试模块,实时监控Python web 应用的内存使用量,能walk你的进程堆,并报告所有Python分配对象的类型,个数和以bytes单位的大小.使用介绍
  • Brakeman - 一个开源静态分析工具,负责检查Ruby on Rails应用程序的安全漏洞。
  • colorama - 为Python终端输出增加颜色,可以向文本增加颜色或者背景颜色。
  • Blessings - 一个轻量级的文本终端输入颜色改变库。
  • termcolor - 一个python的终端输出文本颜色改变的模块
  • pytest - py.test 是一个轻量级的测试框架,它压根就没写自己的断言系统,但是它对Python自带的断言做了强化处理,如果断言失败,那么框架本身会尽可能多地提供断言失败的原因。
  • unittest - Python自带的单元测试框架,有自己的断言方法self.assertXXX(),而且不推荐使用assert XXX语句。
  • ptest - Karl大神写的一个测试框架。ptest中的断言可读性很好,而且智能提示也很方便你通过IDE轻松完成各种断言语句。
  • assertpy - 异常强大且好评如潮的assert断言包,它支持了几乎能想到的所有测试场景。文档
  • vprof - 一个为不同Python 程序特性提供丰富和交互可视化的包,对程序的运行时和内存使用进行可视化。
  • line_profiler - 用来测量我的脚本里每一行代码运行的有多快和运行频率。
  • memory_profiler - 是监控python进程的神器,它可以分析出每一行代码所增减的内存状况。
  • pyautogui - 实现鼠标键盘自动化。
  • pyheat - pprofile + matplotlib = Python程序的热力图描述!
  • Behold - 一款强大的支持 print-style 的调试工具。
  • cProfile - 一款应用python的性能测量工具。
  • Locust - 一个开源性能测试工具,使用Python代码来定义用户行为,用它可以模拟百万计的并发用户访问你的系统。
  • Pylint - 是一个 Python 代码分析工具,它分析 Python 代码中的错误,查找不符合代码风格标准和有潜在问题的代码,Pylint默认使用的代码风格是PEP 8。入门指南
========

安全与破解相关

  • ibrute - 一个攻击iCloud账户的Python脚本,2014年很多明星的账号就是被这个脚本攻破的,苹果已经修改这个漏洞了。
  • bruteforce_py - 暴力破解脚本,ssh bf, wordpress bf, cpanel bf, mysql bf, etc ... 可以说是暴力破解大全。
  • keychain-bruteforce - 暴力破解MAC OS X 的密码管理。
  • gamblerbfe - 路由器也可以暴力破解了。
  • AndroidPINCrack - android的pin密码破解。
  • rarPasswordCrackere - rar加密文件破解。
  • Python-ZIP-Cracker - zip加密文件破解。
  • enjarify - 可代替dex2jar的dex Android反编译工具。使用教程
  • featherduster - 使用Python编写的自动、模块化的密码分析工具。
  • python-nmap - 是一个用来帮助用户使用 nmap 端口扫描器的 Python 库,可让用户轻松操作 nmap 扫描结果、自动扫描和生成报告。
  • pyinstallerextractor - 使用pyinstxtractor.py 脚本可以用来提取pyinstall打包的exe文件的内容,脚本同时也可以提取出可执行文件中的pyz文件的内容。
  • cuckoosandbox - cuckoo sandbox:是一个自动动态恶意软件分析系统。你可以将任何可疑文件丢给它,Cuckoo会在几秒内为你反馈一个详细结果,概括此类文件在在孤立环境中执行时的活动。
  • BeEF - BeEF是The Browser Exploitation Framework的缩写,它是一个 专注网页浏览器的渗透测试工具。
  • dingtalk_crypto - Python的钉钉加密/解密工具。
  • Keylogger - 键盘敲击记录器。
  • evilpassr - 稍微邪恶的密码强度检查器。
  • errator - 为你的库和终端用户程序创建人类可读的异常叙述。
  • Mercure - 是为那些想要教会他们的合作者关于钓鱼的安全管理者提供的工具。
  • Privy - 是一个小而快的实用程序,用于密码保护,例如数字签名种子,或者Bitcoin钱包。
  • urh - Universal Radio Hacker是一个用于调查未知无线协议的软件。
========

图表及图像相关

  • vincent - Python 构建的专为运用 D3.js 进行可视化的 vega 转换工具。
  • Scikit-image - 一组用于图像处理的算法的集合,使图像处理任务如模糊,增强对比度,缩放只需要一些函数调用就可以完成。
  • PIL - PIL (Python Imaging Library)是 Python 中最常用的图像处理库。
  • Pillow - Pillow:比PIL更容易使用,并通过最小的变化与 PIL 代码兼容。 扩展包括用于与本机 Windows 的映像功能和 Python Tcl/Tk-backed Tkinter GUI 包。
  • prettytable - 让你能够在终端中画出漂亮的ascii表格,它支持多种数据源。
  • pytesseract - 一个很好用图像识别的工具,主要用于识别验证码。
  • fuck12306 - 12306 图片验证码识别测试。
  • GooPyCharts - 一个易于安装与使用的图表库,支持图表类型有限,语法与MATLAB相似,而且可以替代matplotlib。
  • fast-pixel-cnn - 加速PixelCNN++图像生成,快达183倍。
  • ipyvolumel-cnn - Jupyter notebook中基于IPython小部件的使用WebGL的Python 3d绘图。
========

语音相关

  • praatIO - 提供了读写praat格式文件的工具,它是一种跨平台的应用,主要为学术社区提供了可视化,抄录,编辑以及提取语音信息的功能。
  • ProMo - ProMo——Prosody Morph的简称——是一个可以对持续性或高音文件进行复杂处理的库。人们可以扩展不同的单词,比如说改变一个语句的单调。
  • Pysle - 针对Isle字典的一个接口——该字典是包含了英文中重音信息的发音字典。通过使用pysle,人们可以自动地标记出转录演讲中的重音。有一个函数可以使用PraatIO根据重音信息标记出textgrid。
  • PyAcousitics - PraatIO和ProMo都是从pyAcoustics中分离出来的。它虽然有些杂乱,但是包含了许多有用的工具。当你需要从语音数据中提取或者修改信息时你会发现它很有用。
  • pmcli - 用于Google Play音乐流媒体服务的轻量级,可自定义的TUI客户端。
========

运维相关

  • pywebsocketserver - 程序Log实时监控 – python + websocket。
  • pupy - Pupy是一个远程管理工具(Administration Tool),开源并且支持多个平台。Pupy还内置了一个Python解释器,可以从内存中加载Python包,访问远程Python对象。
  • Fabric - Fabric 一个通过SSH进行应用部署以及系统任务管理的命令行工具。
  • Invoke - Invoke让你通过一个Python库便捷地执行系统管理任务。如果你想使用稳定的工具(即使是不再积极开发),可以考虑Invoke的前身——Fabric。
  • DeployDjango - 不到一分钟安全部署Django应用的脚本,操作教程
  • HealthChecks - HealthChecks基于 cron 的监控服务。在 cron 里配置好监控只需要几分钟时间,却能让你晚上睡得更好!2015年出现的十大流行Python库
  • dockerizing-django - 是realpython网站一篇相关教程的代码库,讲的是如何将Django应用Docker化。2015年出现的十大流行Python库
  • 用Python脚本实现对Linux服务器的监控 - 用Python脚本实现对Linux服务器的监控。
  • plumbum控 - plumbum提供了非常易用的语法,可以轻松地以跨平台的方式执行本地或者远程命令,获取输出或者错误代码。还可以组合它们(shell 管道的方式),而且它还提供了创建命令行应用的接口。
  • virtualenv - virtualenv用来建立一个虚拟的python环境,一个专属于项目的python环境。用virtualenv 来保持一个干净的环境非常有用。
  • Gunicorn - Gunicorn 是一个Python WSGI UNIX的HTTP服务器。这是一个pre-fork worker的模型,Gunicorn服务器大致与各种Web框架兼容,只需非常简单的执行,轻量级的资源消耗,以及相当迅速,Nginx+Gunicorn+Django 部署小记
  • mitmproxy - mitmproxy 是用 Python 和 C 开发的一个中间人代理软件(man-in-the-middle proxy),它可以用来拦截、修改、重放和保存 HTTP/HTTPS 请求。
  • Sentry - Sentry 是一个实时的事件日志和聚合平台,基于 Django 构建。Sentry 可以帮助你将 Python 程序的所有 exception 自动记录下来,然后在一个好用的 UI 上呈现和搜索。
  • newrelic - newrelic性能监控的好工具,国内有;云智慧ONE APM
  • ipapy - iOS项目自动打包脚本,并且上传到fir.im,然后发送邮件给测试人员。
  • ZStack - 开源IaaS软件,已经提供了大部分IaaS的基本功能,包括:虚拟机管理,存储卷管理,存储卷快照,各种网络服务(DHCP、DNS、SNAT、EIP、PortForward以及Security Group)。ZStack使用、OpenStack、CloudStack比较
  • Flocker - Flocker可轻松实现Docker容器及其数据的管理。这是一个数据卷管理器和多主机的 Docker 集群管理工具。
  • Fig - Fig 主要用来跟 Docker 一起来构建基于 Docker 的复杂应用,Fig 通过一个配置文件来管理多个Docker容器,非常适合组合使用多个容器进行开发的场景。
  • sh - sh是一个成熟的Python子进程接口,允许像调用函数一样调用任何程序。超级好用。
  • Watchdog - Watchdog是一个跨平台的Python库和shell工具,可以监视文件系统事件。超级好用,容易上手。
  • Structlog - Structlog是一个先进的日志处理器。他可以和任何现存的日志记录工具相集成,并包装了Python标准库。你可以构建定制的记录工具,根据你的需要增加上下文,保证你的日志一致、可读。
  • plan - 一个用Python编写的定时任务管理工具。
  • tox - 一个提供自动化打包,测试和发布的Python软件的工具,可以用于控制台或者基础到你的持续构建平台,也是一个通用的virtualenv管理和测试命令行工具。
  • Murder - Twitter Murder在BitTornado的基础上开发而成,由Python和Ruby两种编程语言混合而成,能够在大规模的服务器集群中快速部署代码更新。
  • git-webhook) - 使用 Python Flask + SQLAchemy + Celery + Redis + React 开发的用于迅速搭建并使用 WebHook 进行自动化部署和运维,支持 Github / GitLab / Gogs / GitOsc。
  • CheungSSH - Linux运维自动化管理服务器软件。
  • pyflame - Uber使用C++实现编写的python高性能分析器,分析Python代码极为有用的工具,并找到有效的代码进行优化。
  • sentry - 是一个实时的事件日志和聚合平台,基于 Django 构建。可以帮助你将 Python 程序的所有 exception 自动记录下来,然后在一个好用的 UI 上呈现和搜索。
  • CheungSSH - Linux运维自动化管理服务器软件。
  • Argparse、Docopt与Click 1 Argparse、Docopt与Click 2 - ArgparseDocoptClick:比较Python命令行解析库
  • Heroku - 一个支持多种编程语言的云平台。支持Ruby、Java、Node.js、Scala、Clojure、Python以及PHP和Perl。基于Ubuntu。提供免费的Django应用程序托管。
  • argparse - 一个用来解析命令行参数的Python库。基于python2.7的stdlib代码。
  • pythonanywhere - 一个免费的python空间,有2级域名,有控制台、web框架支持Django, web2py, Flask和Bottle。
  • monitor - 运维工作中自己开发的监控系统,功能强大灵活,系统安装简单,配置简单,相比zabbix, nagios,cacti,小米监控等都使用相当简单。只需要会写脚本,语言不限就可以实现任意监控需求。
  • saltstack - 一个服务器基础架构集中化管理平台,具备配置管理、远程执行、监控等功能,一般可以理解为简化版的puppet和加强版的func。
  • ansible - 集合了众多运维工具(puppet、cfengine、chef、func、fabric)的优点,实现了批量系统配置、批量程序部署、批量运行命令等功能。官方文档
  • argcomplete - Bash使用tab自动补全。
  • Gooey - 一条命令,将命令行程序变成一个 GUI 程序。
  • subprocess - 用来生成子进程,并可以通过管道连接它们的输入/输出/错误,以及获得它们的返回值。
  • sh - 一个完备的 subprocess 替代库,能调用 subprocess 中的任意外部程序,并将结果返回到 Python 应用。
  • python-prompt-toolkit - 一款功能强大的python shell,交互式解释器ptpython
  • pipenv - 用于简化Python项目中依赖项的管理。 它汇集了Pip,Pipfile和Virtualenv的功能,是一个强大的命令行工具。简易教程
========

树莓派

========

第三方平台

  • wechat-python-sdk - wechat-python-sdk微信公众平台Python开发包 http://wechat-python-sdk.readthedocs.org/ , 非官方微信公众平台 Python 开发包,包括官方接口和非官方接口。
  • wechatpy - wechatpy 是一个微信 (WeChat) 公众平台的第三方 Python SDK, 实现了普通公众平台和企业号公众平台的解析消息、生成回复和主动调用等 API。阅读文档:http://wechatpy.readthedocs.org/zh_CN/latest/
  • wechat-deleted-friends - wechat-deleted-friends查看被删的微信好友。
  • wxBot - wxBot为Python包装的网页微信API。可以很容易地实现微信机器人。参考文章:《挖掘微信Web版通信的全过程》、《微信协议简单调研笔记》。
  • WeixinBot - WeixinBot微信web协议分析和实现微信机器人(微信网页版 wx2.qq.com)。其他版本
  • WeRoBot - WeRoBot是一个面向公众号的微信机器人框架,文档
  • WxRobot - WxRobot:面向个人账户的微信机器人框架,文档
  • Wechat django - Wechat django一个基于django开发的微信公众平台,整体环境搭建在新浪SAE平台上,暂时实现的功能:查询天气情况、翻译。
  • gxgk-wechat-server - gxgk-wechat-server莞香广科微信公众号后端,使用 Python、Flask、Redis、MySQL、Celery ,为在校学生提供一系列信息查询与便民服务。
  • weChat-python-sdk - weChat-python-sdk微信公共平台非官方SDK,主要实现主动的消息推送和获取,该项目已经过期!
  • wechat-admin - 基于Flask和MySQL能够帮助快速迁移微信服务号后台到自家服务器的框架(tag: Python, wechat, weixin, admin, Flask) 。
  • wechat-encrypt-python3 - 微信提供的官方python加解密代码 只能用于python2。这里重写了一个python3版本。
  • Python-SDK - 微信公众号Python-SDK,本SDK支持微信公众号以及企业号的上行消息及OAuth接口。
  • wego - WEGO微信公众号开发框架。
  • itchatmp - 一个开源的微信公众号、企业号接口,使用python调用微信公众号非常简单。基于tornado框架,轻松满足效率需求。支持普通使用、nginx反向代理与wsgi。官方文档
  • itchat - 微信个人号接口、微信机器人及命令行微信,三十行即可自定义个人号机器人。官方文档
========

IDE

  • PyCharm - PyCharm是由JetBrains打造的一款Python IDE,Community社区版本是免费的,Professional版本$199.00/年。
  • Eric - Eric是一个集成了项目管理功能的 Python和Ruby集成开发环境。
  • PyDev - PyDev是Eclipse开发Python的 IDE,支持Python,Jython和IronPython的开发。
  • KomodoEdit - Komodo Edit 是非常干净,专业的 Python IDE。
  • PyScripter - PyScripter是一个开源的Python语言集成开发环境。
  • WingIDE - WingIDE是个相当优秀的 IDE。
  • IEP - IEP 是跨平台的 Python IDE,旨在提供简单高效的 Python 开发环境。包括两个重要的组件:编辑器和 Shell,并且提供插件工具集从各个方面来提高开发人员的效率。
  • Emacs - Linux文本编辑器Emacs是一种强大的文本编辑器,在程序员和其他以技术工作为主的计算机用户中广受欢迎。
  • sublimetext - sublimetext:Sublime Text 是一个轻量、简洁、高效、跨平台的编辑器。
  • Atom - Atom 是 Github 专门为程序员推出的一个跨平台文本编辑器。具有简洁和直观的图形用户界面,并有很多有趣的特点:支持CSS,HTML,JavaScript等网页编程语言。它支持宏,自动完成分屏功能,集成了文件管理器。官网下载,比较不错的插件:爆炸效果 activate-power-mode、程序员鼓励师 atom-miku 。
========

其他库

  • IoTNotes - 开源硬件记录。
  • GitHub上Star最多的100个python repository - GitHub上Star最多的100个python repository。
  • 10个Python 模块 - 你该了解的10个 Python 模块。
  • dask - 【(Python)集成任务调度/阻塞算法的数据并行处理库Dask】支持大数据集的分割多核并行处理,Doc
  • Phonenumbers - Phonenumbers 小巧,实用简便,没有地理代编码,运营商,时区等metadata数据。它能识别多种格式,然后使用不同的格式/样式进行有效匹配。
  • toyplot - Python交互绘图库Toyplot,文档doc
  • pythalesians - Python金融(分析工具)库PyThalesians。
  • 20个机器学习开源项目 - 20 个顶尖的 Python 机器学习开源项目 Scikit-learn、Pylearn2、NuPIC……
  • Seaborn - 用 Seaborn 画出好看的分布图, 使用说明
  • Python_Coding_Rule - 【Python代码指南】,这篇文档改编自Guido最初的《Python风格指南》一文,希望对初学Python的朋友们有所借鉴。
  • GGTinypng - 批量压缩png和jpg图片python脚本,已经支持子文件夹里面的图片,会按原始的相对路径存放到输出文件夹内。
  • sinaweibopy - 新浪微博Python SDK。
  • keras - Keras是一个高度模块化的神经网络库,用Python语言编写,可以基于TensorFlow或Theano框架运行。
  • yapf - yapf是一个Python文件代码格式化工具,但与其他类似工具采取了不同的算法。它脱胎于由 Daniel Jasper 开发的 clang-format。
  • tqdm - tqdm可以在长循环中添加一个进度提示信息,用户只需要封装任意的迭代器 tqdm(iterator),是一个快速、扩展性强的进度条工具库。
  • pyvim - pyvim用Python语言实现的Vim编辑器。
  • snake - Snake用来取代Vim的VimScript进行Vim的插件编程,借由Python的强大,让插件编程如虎添翼。
  • pyxley - 使用Flask和React.js,快速开发数据面板(dashboard。在网页上显示一个数据面板是与人分享数据科学发现的最直观方法。对R语言来说有Shiny来简化数据科学家开发网页的工作,而Pyxley就相当于Python版的Shiny。使用Pyxley不光不用写HTML、CSS,你还可以加入自己的JavaScript来进行定制。
  • Tomorrow - Tomorrow为Python 2.7中的异步代码提供了神奇的装饰器语法实现。
  • ibis - Ibis是Cloudera Labs推出的一个新项目,目前还是预览版。它试图解决的就是数据集规模的问题,但对用户提供的确是单机上Python的体验,而且能够与现有的Python数据生态圈(Pandas、Scikit-learn、Numpy)进行集成。未来它还计划加入与机器学习和高级分析集成的功能。
  • ipython - IPython 是一个在多种编程语言之间进行交互计算的命令行 shell,最开始是用 python 开发的,提供增强的内省,富媒体,扩展的 shell 语法,tab 补全,丰富的历史等功能。
  • bpython - bpython是一个不错的Python解释器的界面,很像现在的IDE(集成开发环境)。
  • Ptpython - Ptpython是一个高级的python 交互式解释器(REPL)。python-prompt-toolkit
  • DreamPie - DreamPie 是一个Python shell,为Python开发者提供自动完成的属性;功能和文档显示;并且将session历史存储为HTML文件。
  • Arrow - Arrow这个库可以更好地处理Python中的日期和时间(data/time)。
  • retrying - Retrying库可以帮你避免重复劳动:它实现了『重试』行为。它提供了一个通用的 decorator,而且还可以设置一系列的属性,如最大重试次数、延时、退避休眠(backoff sleeping)和错误条件(error conditions)等,以此来获得你想要的重试行为。简单轻便。
  • python-phonenumbers - python-phonenumbers从Google 的『libphonenumbers』库移植而来,用来解析、格式化或者验证电话号码,而且需要写的代码非常少。最重要的是,『phonenumbers』可以判断一个电话号码是否是唯一的(遵照 E.164 格式)。它同时支持 Python 2 和 Python 3。
  • monkeylearn-python - monkeylearn-python通过简单易用的 RESTFul API 提供了云端的文本挖掘功能:比如文字中的情感、最重要的关键字,可以对文本进行话题检测,还可以使用自定义的文本分类器进行其他任何处理。
  • Cookiecutter - 一个命令行实用程序,从cookiecutters(项目模板)创建的项目,比如:创建从一个Python包项目模板的Python包项目。
  • Sunburnt - Sunburnt全文搜索服务器Solr的Python接口。
  • Celery - Celery是基于Python开发的分布式任务队列。它支持使用任务队列的方式在分布的机器/进程/线程上执行任务调度。
  • Gevent - Gevent是一个基于greenlet的Python的并发框架,以微线程greenlet为核心,使用了epoll事件监听机制以及诸多其他优化而变得高效。
  • Greenlet - Greenlet是一个python的并行处理的一个库。
  • Eventlet - Eventlet是一个用来处理和网络相关的python库函数,而且可以通过协程来实现并发。
  • Python Async IO Resources - asyncio python的异步iO操作资源, asyncio - asyncio3.4以后作为python标准库来使用了。
  • Twisted - Twisted是一个用python语言写的事件驱动的网络框架,支持很多种协议,也是一个异步机制的框架。
  • Mugen - Mugen 是一个运行在 Python3.4+ 的 HTTP 异步请求库,Mugen的api设计参考了requests。文档
  • eviltransform.python - eviltransform.python解决国内GPS地图坐标偏移问题,它将政府加密过的GCJ-02坐标,转成世界通用的WGS-84坐标。
  • pagure - Pagure是一个用Python编写的新的、功能齐全的、提供 Web 服务的 Git仓库。它类似于Github 和 Gitlab ,同时允许开源贡献者分享彼此的资源,实现代码和内容上的合作。官网
  • pdf2htmlEX - 可以将PDF转换成HTML,可以在HTML文件中精确显示原生文本、生成的文件大小与解压缩后的PDF文件相当、单HTML文件输出。
  • EbookLib - 一个用于处理 EPUB2 / EPUB3 和 Kindle 格式图书的电子书库。
  • Pritunl - 一款免费开源的VPN平台软件,让用户迅速搭建VPN服务;采用OpenVPN 代理方式,提供了API供高级开发者使用,同时还针对不同平台和不同VPS供应商提供了详尽的安装使用说明。
  • OpenCC - 一个开源的中文简繁转换项目,致力于制作高质量的基于统计预料的简繁转换词库。还提供函数库(libopencc)、命令行简繁转换工具、人工校对工具、词典生成程序、在线转换服务及图形用户界面。
  • moviepy - Moviepy是用来做Python视频编辑的模块:剪切,合并,插入标题,视频混合,视频处理,创建效果。可以读写大多数的音视频格式,支持三个主流的操作系统,支持Python2/3。
  • delorean - delorean提供了一个相比于datetime和pytz的更好的抽象,让你处理日期和时间更容易。它有很多有用的处理时区的特性,标准化时区或者从一个时区改变到另外一个时区。官网
  • swig - 是一个非常优秀的开源工具,支持您将 C/C++ 代码与任何主流脚本语言相集成,包括 Ruby、Perl、Tcl 和 Python。swig实现Python和C的互联
  • yagmail - 发送复杂邮件,发送富文本邮件、发送邮件附件以及使用邮件模板。使用教程
  • pypub - 用来快速创建epub文件而不必考虑epub规范的复杂性。
  • lxml - lxml联合了libxml2和libxslt。如果你要处理XML或HTML,lxml是最好的选择。
  • Docopt - 忘了optparse和argparse吧,使用docstring来构建优雅的、高可读性、复杂(如果你有这个需要)的命令行界面。这是2013年诞生的最好的库。
  • PEW - PEW 是一套管理多个虚拟环境的工具,在bash,zsh,fish和powershell上完美运行。
  • social-oauth - 为中国大陆开放了OAuth2认证的网站提供Python接口。
  • snownlp - 是一个python写的类库,可以方便的处理中文文本内容,是受到了TextBlob的启发而写的一个方便处理中文的类库。
  • jieba - “结巴”中文分词,做最好的 Python 中文分词组件。
  • Yaha分词 - "哑哈"中文分词,更快或更准确,由你来定义。通过简单定制,让分词模块更适用于你的需求。
  • vnpya - vn.py - 基于python的开源交易平台开发框架。
  • minicache - 轻量级 Cache 工具。
  • XlsxWriter - 用来构造xlsx文件的模块,可以向excel2007+中写text,numbers,formulas 公式以及hyperlinks超链接。官方教程
  • xlrd - python读Excel的库。官方网站
  • xlwt - python写Excel的库。官方网站
  • Python-docx - 以编程方式创建和操纵 Microsoft Word .docx 文件。
  • timeago - 一个将时间变成 “多久之前” 的库。
  • Blender - 是一款开源的跨平台全能三维动画制作软件,提供从建模、动画、材质、渲染、到音频处理、视频剪辑等一系列动画短片制作解决方案。 (3D打印)
  • Libcloud - 隐藏了不同云提供商应用程序编程接口(API)之间的差异,包括AWS、Apache CloudStack、Rackspace、谷歌云平台、微软Azure、VMware和OpenStack在内的50多个云提供商采用了Libcloud。
  • pyfilesystem2 - 一个为所有文件系统提供的通用 Pythonic 接口。
========

博客与播客及书籍文档

========

好的文章

========

他人总结

  • awesome-python - Awesome可能是GitHub上寻找和整理开源项目最好的方式 。
  • interview_python - 十分全面的Python的面试题。
  • issue-198-top2015 - 蠎周刊2015年度最赞。
  • Awesome Python - 一个收集Python资源的网站,框架、包、软件和其它资源都很棒,自带搜索功能,极为方便.
from  https://github.com/Tim9Liu9/TimLiu-Python

No comments:

Post a Comment