讨论一下requests库中session的线程安全问题?[update]

官方文档中找了很久,没有看到kenneth reitz对于session在多线程下是否线程安全的说明。GitHub上有一个类似的讨论

问题

每个线程使用单独的requests.get(url)还是说建立一个全局的session,多个线程同时操作session.get(url)方法。我认为由于session中保存有相关的cookie等信息,每一次session.get(url)请求都会改变session中的cookie等信息,好像不行。

简单一点描述问题就是每个线程是否应该拥有独立的session

补充

aiohttp中有这样一句话:

Don’t create a session per request. Most likely you need a session per application which performs all requests altogether. A session contains a connection pool inside, connection reusage and keep-alives (both are on by default) may speed up total performance.

不过aiohttp是基于协程即运行在单线程中的。

更新

假设有这样一种场景,队列中有多个不同的url,(由于url不同,所以session的线程安全问题可以暂时不考虑),请问多线程共享一个全局的session好么?(类比aiohttp的建议)
即线程池共享一个session还是每个线程单独开一个session好?因为大部分网页并不涉及到登录处理等cookie问题,session的线程安全不必过多的考虑。

阅读 8.4k
2 个回答

https://github.com/kennethrei...

简单看了一眼源码,没看到任何锁之类的东西。操作的过程都挺复杂的,又没锁,在作者没做说明的情况下就先当作不安全的吧。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题