python常见错误
1.PyCharm项目no python interpreter configured
错误:Cannot run program "D:\Python363\python.exe" (in directory "E:\PythonWorkSpace\testInterface"): CreateProcess error=2, 系统找不到指定的文件。
解决方案
Run>>>Edit Configurations
在检查以上信息后,有可能不需要修改任何东西,直接点击Apply >>>Ok ,重新运行就可以正常运行不会有错误提示
2.pycharm修改默认python版本
今天安装Django的时候遇到了python版本冲突,找不到python路径,所以又重新安装了一个python3.6.5
安装完之后,突然发现自己的pycharm是之前Anaconda的3.5版本,那么就需要修改一下python版本了
首先点击左上角的File,再点击Default Settings,点击右侧Project Interpreter框框的下箭头,然后点击Show All
然后点击右侧绿色的 号,就能够添加新的地址,记住勾选就行。
3.Could not find a version that satisfies the requirement requests (from version
s: )
No matching distribution found for requests
可能考虑到是python国内网络的问题,这时我们用国内的镜像源来加速。
pip install requests -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com
4、requests爬虫测试接口返回html并且中文显示乱码
python抓取网页并写到本地文件中,出现乱码问题的关键有两处:
- 抓取网页数据后是否正确解码
- 正确解码后的html字符串写入文件时是否正确编码
要解决这两个问题,首先要知道该网页是如何编码的,先看看下面代码:
import requestshead = { "User-Agent": "Mozilla/5.0 (Windows NT 6.1; WOW64) Firefox/21.0", "Accept": "text/html,application/xhtml xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8", "Accept-Encoding": "gzip, deflate, br", "Accept-Language": "en-US,zh-CN,zh;q=0.9"}url = 'http://2018.ip138.com/ic.asp'resp=requests.get(url, headers=head,timeout=15)print(resp.headers['content-type'])print(resp.encoding)print(resp.apparent_encoding)print(requests.utils.get_encodings_from_content(resp.text))
输出结果:
这里的apparent_encoding是响应消息头里设置的编码格式,最后一个是html源码里设置编码格式,这两个我观察是一样的(不确定有没有不一样的,如果不一样,我觉得网页直接打开可能就是乱码),这里的apparent_encoding就是网页数据的编码格式,我们只要使用apparent_encoding来解码和编码,一般就不会出现乱码了。
使用方法如下:
resp = requests.get(url, headers=head,timeout=15)resp.encoding=resp.apparent_encoding #设置解码方式html_source=resp.text #这里会用设置的解码方式解码print(html_source) #正确解码后直接打印也不会出现乱码resp.close()if html_source:#将html写文件时设置文件编码方式,因为和html里设置的编码格式一样,所以直接打开就不会出现乱码了 with open('test.htm', mode='a ', encoding=resp.apparent_encoding) as file:file.write(html_source)转自:https://blog.csdn.net/qq_33440662/article/details/82787301?ops_request_misc=%7B%22request%5Fid%22%3A%22160400350319725255515369%22%2C%22scm%22%3A%2220140713.130102334..%22%7D&request_id=160400350319725255515369&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~all~baidu_landing_v2~default-2-82787301.pc_first_rank_v2_rank_v28&utm_term=python3 爬网页返回乱码&spm=1018.2118.3001.4449