爬取不同站点页面的编码问题

【爬取不同站点页面的编码问题】

爬取不同站点页面的编码问题

文章插图
爬不同网站的代码问题:爬虫爬多个网站时,每个网站的页面代码都不一样,而解析器一般只支持一个特定的代码 。这时候就要想办法获取原母页面的代码 。主要有几种方式:1 。从meta获取各种实际的meta写作,有些不一定 。