python - 讨论一下requests库中session的线程安全问题?[update]
迷茫
迷茫 2017-04-18 10:17:14
0
2
718

官方文档中找了很久,没有看到kenneth reitz对于session在多线程下是否线程安全的说明。GitHub上有一个类似的讨论。

问题

每个线程使用单独的requests.get(url)还是说建立一个全局的session,多个线程同时操作session.get(url)方法。我认为由于session中保存有相关的cookie等信息,每一次session.get(url)请求都会改变session中的cookie等信息,好像不行。

简单一点描述问题就是每个线程是否应该拥有独立的session

补充

在aiohttp中有这样一句话:

Don’t create a session per request. Most likely you need a session per application which performs all requests altogether. A session contains a connection pool inside, connection reusage and keep-alives (both are on by default) may speed up total performance.

不过aiohttp是基于协程即运行在单线程中的。

更新

假设有这样一种场景,队列中有多个不同的url,(由于url不同,所以session的线程安全问题可以暂时不考虑),请问多线程共享一个全局的session好么?(类比aiohttp的建议)
即线程池共享一个session还是每个线程单独开一个session好?因为大部分网页并不涉及到登录处理等cookie问题,session的线程安全不必过多的考虑。

迷茫
迷茫

业精于勤,荒于嬉;行成于思,毁于随。

membalas semua (2)
大家讲道理

Supported Features

  • Thread-safety ——from the Homepage of the requests

Requests: HTTP for Humans
Sounds like someone should write a tool that makes this really easy :P
Is the Session object from Python's Requests library thread safe?

好像不是thread-safe.

    伊谢尔伦

    https://github.com/kennethrei...

    简单看了一眼源码,没看到任何锁之类的东西。操作的过程都挺复杂的,又没锁,在作者没做说明的情况下就先当作不安全的吧。

      Muat turun terkini
      Lagi>
      kesan web
      Kod sumber laman web
      Bahan laman web
      Templat hujung hadapan
      Tentang kita Penafian Sitemap
      Laman web PHP Cina:Latihan PHP dalam talian kebajikan awam,Bantu pelajar PHP berkembang dengan cepat!