- python常用库？
- python如何爬取B站评论信息？
- python如何爬取技术专业术语？
- python如何爬取大众点评评论信息？如何保存到mysql数据库中？
Python有许多常用的库，包括NumPy用于科学计算，Pandas用于数据分析，Matplotlib和Seaborn用于数据可视化，Scikit-learn用于机器学习，TensorFlow和PyTorch用于深度学习，Flask和Django用于Web开发，Requests用于网络请求，BeautifulSoup和Scrapy用于网页爬取，OpenCV用于计算机视觉，NLTK和SpaCy用于自然语言处理，Pygame用于游戏开发，SQLite和MySQLdb用于数据库操作，等等。这些库提供了丰富的功能和工具，使得Python成为一种强大的编程语言。
python如何爬取B站评论信息？
这里简单介绍一下吧，B站的评论信息是动态加载的，存储在一个json文件中，只要抓包分析，提取到这个json文件，就能爬取到我们需要的评论信息，下面我简单介绍一下实现过程，实验环境win10+python3.6+pycharm5.0，主要内容如下：
这里为了更好的说明问题，以抓取B站***s://***.bilibili***/video/***1238716的评论信息为例（其他页面评论信息也行），如下：
1.首先，按F12调出开发者工具，依次点击“网络”->“所有”，刷新页面，如下，所有的抓包信息便会显示出来：
仔细分析，我们就会发现reply这个文件比较大，而且还是json的，很可能就是评论信息，点击进去，果然，就是我们需要爬取的评论信息，如下：
2.接着，针对上面的json文件，我们就可以编写对应的代码来进行解析了，主要用到requests和json这2个包，requests主要用于根据url请求json文件，json主要用于解析json文件，提取出我们需要的信息，主要代码如下：
程序运行截图如下，已经成功爬取到评论信息：
python如何爬取技术专业术语？
要爬取技术专业术语，可以使用Python的网络爬虫库，如BeautifulSoup或Scrapy。
首先，确定要爬取的网站，然后使用Python发送请求获取网页内容。
接下来，使用HTML解析库解析网页内容，并通过查找特定标签或类名来提取所需术语。可以通过循环遍历多个页面，或使用递归方法爬取多层链接。
最后，将提取的术语保存到文件或数据库中，以供后续使用。注意要遵守网站的爬取规则和法律法规，确保合法合规地进行爬取操作。
比如：python实现单词的简单爬取
1.确定URL
爬取目标：金山词霸的四六级词汇
2.找到单词标签位置
我们找到单词所在的标签，确定每个单词所在的标签
3.爬取加处理
接下来的任务就很简单了，直接给出代码
python如何爬取大众点评评论信息？如何保存到mysql数据库中？
这个非常简单，大众点评的数据是静态加载的，直接嵌套在网页源码中，所以直接爬取就行，下面我简单介绍一下实现过程，实验环境win10+python3.6+pycharm5.0，主要内容如下：
1.这里随便打开一个商户的评论页面，***设爬取的信息主要包括用户昵称、商户等级以及评论内容这3个字段（其他字段也可以），如下：
2.接着右键检查元素，就可以看到对应的网页标签信息，包括属性、文本等，里面就有我们需要爬取的内容，如下：
3.然后就是针对上面的网页结构编写对应代码解析网页内容，这里主要用到requests+BeautifulSoup组合，其中requests用于请求页面，BaautifulSoup用于解析页面，提取内容，测试代码如下，非常简单：
点击运行这个程序，效果如下，已经成功爬取到评论内容：
4.最后就是保存数据到mysql数据库中，主要用到pymysql这个模块，用于插入数据到mysql数据库中，安装的话，直接输入命令“pip install pymysql”就行，安装完成后，新建一个dzdp数据表，包含有user，rank，content这3个字段，接着就可以直接编写代码插入数据了，测试代码如下：
