在学习python爬虫,要爬取我们公司所用禅道的特定人员所提bug数。
通过F12开发者工具看到总的有3个有用的网页,两个是get请求,一个是post请求
我将cookie写死在了请求头里去访问,然后我在脚本这边换了人员的参数,返回的结果都是一致的。 如果我在页面重新进行一次访问,则在脚本这边再访问,则会是最新的结果。
好像禅道的搜索条件是跟着session走的,那我是用的cookie,好像是一个意思。但是我对了一下,搜索条件不一样的时候,cookie内容是一样的,除了有时候cookie内的字段顺序会变一下而已。
那我现在遇到这样的情况,是不是需要每次都进行登录,获取到cookie,然后再进行访问,这样如果是爬虫的话,好像每次都要登录是不是太影响访问的时间了。
希望大佬能够帮忙看一下什么原因,感谢哈
通过F12开发者工具看到总的有3个有用的网页,两个是get请求,一个是post请求
我将cookie写死在了请求头里去访问,然后我在脚本这边换了人员的参数,返回的结果都是一致的。 如果我在页面重新进行一次访问,则在脚本这边再访问,则会是最新的结果。
好像禅道的搜索条件是跟着session走的,那我是用的cookie,好像是一个意思。但是我对了一下,搜索条件不一样的时候,cookie内容是一样的,除了有时候cookie内的字段顺序会变一下而已。
那我现在遇到这样的情况,是不是需要每次都进行登录,获取到cookie,然后再进行访问,这样如果是爬虫的话,好像每次都要登录是不是太影响访问的时间了。
希望大佬能够帮忙看一下什么原因,感谢哈