ofpython检索文献scienceweb_十个小众却实用的Python库，用过的都说香！

开源最前线(ID&＃xff1a;OpenSourceTop) 猿妹综合整理综合自&＃xff1a;https://medium.com/analytics-vidhya/python-libraries-for-data-science-other-than-pandas-and-numpy-95da30568fad

今天&＃xff0c;我们将和大家分享一些用于数据科学任务的Python库&＃xff0c;这些库并不常见&＃xff0c;它们不如panda、scikit-learn、matplotlib等知名&＃xff0c;但却十分实用&＃xff0c;下面就一起来看看都有哪些库&＃xff1a;1、Wget数据提取&＃xff0c;尤其是从网络中提取数据&＃xff0c;是数据科学家的重要任务之一。Wget是一个免费的工具&＃xff0c;用于从Web下载非交互式的文件&＃xff0c;它支持HTTP、HTTPS和FTP协议&＃xff0c;以及通过HTTP代理进行检索。由于它是非交互式的&＃xff0c;所以即使用户没有登录&＃xff0c;它也可以在后台工作。因此&＃xff0c;她很适合用于下载一个网站或一个页面的所有图像。(项目地址&＃xff1a;https://pypi.org/project/wget/)安装&＃xff1a;

$ pip install wget示例&＃xff1a;

import wget
url &＃61;  http://www.futurecrew.com/skaven/song_files/mp3/razorback.mp3
filename &＃61; wget.download(url)
100% [................................................] 3841532 / 3841532
filename
razorback.mp32、Pendulum对于那些需要在Python项目中使用日期时间的人来说&＃xff0c;Pendulum就是一项不错的项目选自。它是一个用于简化datetimes操作的Python包。它完全可以替代Python的原生类。(项目地址&＃xff1a;https://github.com/sdispater/pendulum)安装&＃xff1a;

$ pip install pendulum示例&＃xff1a;

import pendulum
dt_toronto &＃61; pendulum.datetime(2012, 1, 1, tz&＃61; America/Toronto )
dt_vancouver &＃61; pendulum.datetime(2012, 1, 1, tz&＃61; America/Vancouver )print(dt_vancouver.diff(dt_toronto).in_hours())33、imbalanced-learn事实上&＃xff0c;当每个类的样本数量几乎相同的情况下&＃xff0c;分类算法的效果是最好的&＃xff0c;但在实际项目中大部分的数据集是不平衡的&＃xff0c;这些数据集对机器学习算法的学习阶段和后续预测都有影响&＃xff0c;imbalanced-learn的创建就是为了解决此类问题&＃xff0c;它与scikit-learn兼容&＃xff0c;是scikit-learn-contrib项目的一部分。下次如果你遇到不平衡的数据集时&＃xff0c;考虑一下它。(项目地址&＃xff1a;https://github.com/scikit-learn-contrib/imbalanced-learn)安装&＃xff1a;

pip install -U imbalanced-learn# or
conda install -c conda-forge imbalanced-learn4、FlashText在NLP任务中清理文本数据通常需要替换句子中的关键字或从句子中提取关键字。这类操作一般使用正则表达式来完成&＃xff0c;但是如果搜索的关键词数量达到数千个&＃xff0c;就会变得很麻烦。Python的FlashText模块是基于FlashText算法&＃xff0c;它为这种情况提供了一个合适的替代方案。FlashText最好的部分是&＃xff0c;不管搜索词的数量是多少&＃xff0c;运行时都是一样的。(项目地址&＃xff1a;https://github.com/vi3k6i5/flashtext)安装&＃xff1a;

$ pip install flashtext示例&＃xff1a;

from flashtext import KeywordProcessor
keyword_processor &＃61; KeywordProcessor()# keyword_processor.add_keyword(, )
keyword_processor.add_keyword( Big Apple ,  New York )
keyword_processor.add_keyword( Bay Area )
keywords_found &＃61; keyword_processor.extract_keywords( I love Big Apple and Bay Area. )
keywords_found
[ New York ,  Bay Area ]关键词替换&＃xff1a;

keyword_processor.add_keyword( New Delhi ,  NCR region )
new_sentence &＃61; keyword_processor.replace_keywords( I love Big Apple and new delhi. )
new_sentence I love New York and NCR region.5、Fuzzywuzzy这个名字听起来确实很奇怪&＃xff0c;但是涉及到字符匹配时&＃xff0c;fuzzywuzzy是一个非常有用的库。可以快速实现诸如字符串匹配度、令牌匹配度等操作。它还可以方便地匹配保存在不同数据库中的记录。(项目地址&＃xff1a;https://github.com/seatgeek/fuzzywuzzy)安装&＃xff1a;

$ pip install fuzzywuzzy示例&＃xff1a;

from fuzzywuzzy import fuzzfrom fuzzywuzzy import process# Simple Ratio
fuzz.ratio("this is a test", "this is a test!")97# Partial Ratio
fuzz.partial_ratio("this is a test", "this is a test!")1006、PyFlux时间序列分析是机器学习领域最常遇到的问题之一。PyFlux是为处理时间序列问题而构建的Python开源库。该库拥有一系列优秀的现代时间序列模型&＃xff0c;包括但不限于ARIMA、GARCH和VAR模型。总之&＃xff0c;PyFlux为时间序列建模提供了一种高效的方法。值得尝试。(项目地址&＃xff1a;https://github.com/RJT1990/pyflux)安装&＃xff1a;

pip install pyflux7、Ipyvolume结果交流是数据科学的一个重要方面&＃xff0c;可视化是一个很大的优势&＃xff0c;IPyvolume是一个Python库&＃xff0c;用于在Jupyter笔记本中可视化三维图形(如三维立体图等)&＃xff0c;遗憾的是目前它还处于测试版本阶段。(项目地址&＃xff1a;https://github.com/maartenbreddels/ipyvolume)安装&＃xff1a;

Using pip
$ pip install ipyvolume
Conda/Anaconda
$ conda install -c conda-forge ipyvolume示例&＃xff1a;8、DashDash是一个用于构建Web应用程序的高效Python框架。它是基于Flask、Plotly.js和React.js创建的&＃xff0c;并结合了现代UI元素(如下拉框、滑块和图形)与用户分析性Python代码绑定在一起&＃xff0c;而不需要再借助Javascript。Dash非常适合构建数据可视化应用。然后可以在Web浏览器中呈现这些应用程序。(项目地址&＃xff1a;https://github.com/plotly/dash)安装&＃xff1a;

pip install dash&＃61;&＃61;0.29.0  # The core dash backend
pip install dash-html-components&＃61;&＃61;0.13.2  # HTML components
pip install dash-core-components&＃61;&＃61;0.36.0  # Supercharged components
pip install dash-table&＃61;&＃61;3.1.3  # Interactive DataTable component (new!)示例&＃xff1a;9、BashplotlibBashplotlib是一个Python包和命令行工具&＃xff0c;用于在终端生成基本的绘图&＃xff0c;使用Python编写的&＃xff0c;当用户无法访问GUI时&＃xff0c;可视化数据就变得很方便。安装&＃xff1a;

pip install bashplotlib示例&＃xff1a;

scatter --file data/texas.txt --pch .

hist --file data/exp.txt10、Coloramacolorama是一个Python专门用来在控制台、命令行输出彩色文字的模块&＃xff0c;可以跨平台使用&＃xff0c;在windows下linux下都工作良好。它使用标准的ANSI转义码来着色和样式终端输出。(项目地址&＃xff1a;https://github.com/tartley/colorama)安装&＃xff1a;

pip install colorama示例&＃xff1a;

import coloramafrom colorama import Fore, Back, Style
colorama.init()# Set the color semi-permanentlyprint(Fore.CYAN)print("The Text will appear in cyan until it is reset")print(Style.RESET_ALL)# Colorize a single line and then resetprint(Fore.RED &＃43;  Colorize a single line in RED  &＃43; Style.RESET_ALL)# Colorize a single word in the outputprint( You can also colorize a single word  &＃43; Back.GREEN &＃43;  words  &＃43; Style.RESET_ALL &＃43;   can be highlighted )# Combine foreground and background colorprint(Fore.BLUE &＃43; Back.WHITE)print( Foreground, background, and styles can be combined )print("&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;&＃61;            ")print(Style.RESET_ALL)print( Reset everything back to normal. )输出如下&＃xff1a;以上就是我推荐的有关于处理数据科学方面任务的Python库&＃xff0c;不知道有没有你喜欢的。

推荐阅读为了追到小姐姐&＃xff0c;我用 Python 制作了一个机器人青出于蓝而胜于蓝&＃xff0c;这是一款脱胎于Jupyter Notebook的新型编程环境【中文教程】简单粗暴入门TensorFlow 2.0 | 北大学霸出品写 Python 到底用什么编辑器好&＃xff1f;鹅厂程序猿吵翻了