我们发现，程序并没有爬取到相关数据。基于抓包工具动态进行局部搜索:在当前网页中打开抓包工具，捕获到地址栏url对应的数据包，在该数据包中response选项卡搜索我们想要爬的数据，如果搜索到了就不是动态加载数据，如果没有搜索到，那就是动态加载数据。
打开控制面板 F12， 找到带 items 的连接，然后复制整个 Request Headers 到代码中，采用复制 cookie 的方式登录豆瓣。这篇爬虫到这里就结束了，派森酱在这里祝愿朋友们都能找到自己的良人。
这里说的动态网页，与网页上的各种动画、滚动字幕等视觉上的动态效果没有直接关系，动态网页也可以是纯文字内容的，也可以是包含各种动画的内容，这些只是网页具体内容的表现形式，无论网页是否具有动态效果，只要是采用了动态网站技术生成的网页都可以称为动态网页。
第1章 初识Python ■ Python是一门面向对象的、解释型的编程语言，具有语法简洁、易读、功能强大等特点，对于初学者来说，非常容易上手。而且，使用Python可以完成非常多的需求，比如开发网络爬虫，进行自动化运维、自动化测试、逆向编程、量化分析等。
在Python爬虫开发中，异步和多线程都是常用的技术手段，可以用于提高爬虫的效率和性能。本文将介绍如何将异步和多线程结合起来，开发并发爬虫。异步技术异步技术是指在一个线程中通过异步IO和协程的方式，实现多个IO操作的并发执行，从而提高程序的效率。
爬取豆瓣电影下的评论，好像是编码的问题，报错python 3'UCS-2' codec can't encode characters in position 815-815: Non-BMP character但有时候正常，有时候报错，真是起了怪了。
