python爬虫配置IP代理池（ProxyPool）
ProxyPool 项目下载：https://github.com/Python3WebSpider/ProxyPool.git
关注我的公众号【小杨的挨踢IT生活】回复**ProxyPool **可以获取下载链接。
1、下载之后打开setti
在子类派生的新方法中如何重用父类的功能方式一：指名道姓调用某一个类下的函数=》不依赖于继承关系
class OldboyPeople:
def __init__(self,name,age,sex):
self.name=name
self.age=
目录一、爬虫是什么二、爬虫的基本流程三、请求与响应四、总结
一、爬虫是什么
1、浏览器获取数据的方式
浏览器提交请求->下载网页代码->解析/渲染成页面
2、爬虫获取数据的方式
模拟浏览器发送请求->下载网页代码->只提取有用的数据->存放于数据库或文件中
最近发现未婚妻一到晚上总是很忙的样子，每晚匆匆忙忙道过晚安就不说话了。
可是，QQ头像却会偶尔亮起来，我非常担心，是不是账号被盗了呢？然后，就想帮未婚妻排查一下，于是就用python写了一个录制脚本，悄悄装在她电脑上~
模块安装
本次咱们需要用到这两个模块
win32
python爬虫爬取国家科技报告服务系统数据，共计30余万条
按学科分类【中图分类】
共计三十余万条科技报告数据
爬取的网址：https://www.nstrs.cn/kjbg/navigation
！！！
如果要完整地跑起来代码，需要先看一下我的这篇博客，完成IP代理池的相关配置：
https
我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K 哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术人员。
案情介绍
江苏省无锡市梁溪区人民法院
前言
开发环境
python 3.8: 解释器
pycharm: 代码编辑器
requests 发送请求
pyecharts 绘制图表
pandas 读取数据
爬虫案例思路流程:
一. 数据来源分析:
确定需求, 采集那个网站上面什么数据
抓包分析, 通过开发者工具进
目录一、介绍二、基于get请求三、基于post请求四、响应Response五、高级用法
一、介绍
#介绍：使用requests可以模拟浏览器的请求，比起之前用到的urllib，requests模块的api更加便捷（本质就是封装了urllib3）
#注意：requests库发送请求将网页内容下载下
2022-09-24
在创建Django项目时，出现了
错误，查了一下，发现要创建一个Django项目，需要先使用命令：
python -m pip install pytz
安装一个“时区模块”。一般错误提示中出现“xxx”模块没有发现，大概率是要进行安装一个模块或者其他。
之后创建
摘要：傅里叶变换主要是将时间域上的信号转变为频率域上的信号，用来进行图像除噪、图像增强等处理。
本文分享自华为云社区《[Python图像处理] 二十二.Python图像傅里叶变换原理及实现》，作者：eastmount。
本文主要讲解图像傅里叶变换的相关内容，在数字图像处理中，有两个经典的变换被广泛
一、VSCode 创建Django 工程
VSCode 官方: https://code.visualstudio.com
1 mysite(项目名)，创建Django 项目，可以和虚拟环境放在同一目录，也可以放在虚拟环境的文件夹里。
django-admin startproject mysit
事情是这样的，罪恶的资本家老板，快下班了给我发一个压缩包，让我把数据发给客户微信，搞完就可以下班了，我心想这么好，一个文件不是让我直接就提前下班吗，万万没想到…
我就知道，万恶的资本家怎么可能放弃剥削我的机会，我打开一看，一个压缩包里面放了几百个表格，一个表格里面N个人，几十万条数据，三个微
2022-09-24
创建了一个Django项目后，进行测试，输入指令：
python manage.py runserver
出现了如下问题：
我还想着，Django模块通过安装“pip install django”导入了好几遍，尝试了几次都是这样。后来发现，是虚拟环境中没有D
Oracle基础知识
以下内容为本人的学习笔记，如需要转载，请声明原文链接 https://www.cnblogs.com/lyh1024/p/16720759.html
oracle工具：
SQL * Plus，是安装Oracle数据库服务器或客户端时自动安装的交互式查询工具。
最近看多线程比较多，对于volatile，syn，CAS，JMM模型(主内存，工作内存)这些概念有些理解。volatile，syn工作机制等。
以及对于多线程中可见性，原子性的理解。
随着对这些基础的掌握和理解，我觉得自己对于多线程方面的能力有一定的提升。
可见性的问题上，volatile是怎么解
java基础 以下内容为本人的学习笔记，如需要转载，请声明原文链接 https://www.cnblogs.com/lyh1024/p/16720908.html
Ø 冒泡排序原理：
比较数组中，两个相邻的元素，如果第一个数比第二个数大，我们就交换他们的位置；
每一次比较，都会产生出一个
多用户即时通讯系统04
4.编码实现03
4.5功能实现-群聊功能实现
4.5.1思路分析
群聊的实现思路和私聊的实现非常类似。
不同的是：私聊时，服务端接收到消息后，只需要找出接收方的socket并发送消息即可
群聊时，服务端在接收到消息后需要遍历集合中所有的线程，找出除了发送方的所有客户端的s
多用户即时通讯系统04
4.编码实现03
4.6功能实现-发送文件功能实现
4.6.1思路分析
客户端（发送者）：
先把文件a.jpg读取到客户端的字节数组
把文件对应的字节数组封装到message对象[包含文件内容，发送者，接收者]
将message对象发送到服务端
服务端：
接收到messag
多用户即时通讯系统04
4.编码实现03
4.7功能实现-服务器推送消息功能实现
4.7.1思路分析
服务器推送新闻，本质其实就是群发消息
在服务器启动一个独立线程，专门负责推送新闻
该线程通过管理线程的集合，把所有的线程的socket拿到，并发送Messgae对象信息
客户端通过接收，自然就拿到
简述
类型：创建型。
目的：杜绝相同对象的反复创建，提升系统性能。
话不多说，直接看实现方案例。
实现案例
饿汉式
项目启动时加载
public class Test {
private static Test ins = new Test();
public static Tes
客服
