爬虫爬下来都是空格

Question

实习僧网站爬取，浏览器看起来是这样的网页源码是这样的，我查了，这是一种替代字体达到反扒效果的技术，爬下来以后做字体映射就可以了。但我现在爬下来都是空格，没法处理啊。

爬虫代码非常简单

求指教。

Answer 1

换一张方案实施

#!/usr/bin/env python
# -*- coding: utf-8 -*-

import requests

# 程序主入口
if __name__ == "__main__":
    """模仿浏览器，请求web的html信息"""
    url = 'https://www.shixiseng.com/interns/c-110100_st-intern_?k=Python'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.12 Safari/537.36'
    }
    request = requests.get(url, headers=headers)
    html_text = request.text
    print(html_text)

如果你需要分析拿到的html的话引入from bs4 import BeautifulSoup处理。
希望能帮到你……