Python

date

Jan 27, 2022

slug

python

status

Published

基础教程

包管理

pip更改镜像源

采用清华大学的镜像 https://mirrors.tuna.tsinghua.edu.cn/help/pypi/

临时使用：

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package

配置型：

pip install pip -U

pip config set global.index-url https://pypi.tuna.tsinghua.edu.cn/simple

如果您到 pip 默认源的网络连接较差，临时使用本镜像站来升级 pip：

pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pip -U

因为pip安装的缓存机制想要先把整个文件读取到内存以后才开始安装，因此可能导致内存不足。所以我们在安装时指示不启用缓存即可，可以使用 --no-cache-dir 命令，如下

pip批量安装和导出

安装导出的各种安装包， -r 表示逐行读取安装

pip install -r requirements.txt

查看Python已安装的模块

pip list

打包已安装的依赖包

生成已安装包清单

pip freeze > requirements.txt

如本地保留了之前下载的各依赖包，直接将各whl/tar/zip包保存到某个文件夹下，如./packages 如本地未保留之前下载的各依赖包whl/tar/zip包，则需要用下面的命令从网络下载到./packages

指定参数下载

离线批量安装依赖包

将 packages 文件夹和 requirements.txt拷贝至离线机器上某个目录下，

packages文件夹和 requirements.txt放在同目录下，命令窗口进入D:\，输入以下命令，依赖包即可批量安装完成

离线安装依赖包

参数

三方模块

安装ChromeDriver

下载页面

http://chromedriver.storage.googleapis.com/index.html

版本对照

https://sites.google.com/a/chromium.org/chromedriver/downloads

下载解压。执行命令

linux 使用selenium https://blog.csdn.net/CHEndorid/article/details/114371213

Redis的使用

pip install redis

settings.py

Postgres的使用

pip install psycopg2-binary

Sqlite的使用

压缩文件

写入csv

url 编码

url获取参数

selenium4 使用

懒加载模式，不等待页面加载完毕

等待js渲染完成

https://blog.csdn.net/XianZhe_/article/details/121111810

解析本地html

使用 ffmpeg 下载视频

mac调用Downie下载视频

Aria2下载文件

docker使用selenium

github https://github.com/SeleniumHQ/docker-selenium

python代码