私は単純なログインとログインの後の別のページを持っています。一度私はログインを完了する(私はユーザーセッションを得ることができます)。 あなたが定義します。私は別のページを要求した場合、セッションはサンプル実装どのようにログインセッションが維持されているか
from scrapy.item import Item, Field
from scrapy.http import FormRequest
from scrapy.spider import Spider
from scrapy.utils.response import open_in_browser
class TestSpider(Spider):
name = "test"
allowed_domains = ["example.com"]
start_urls = ["https://example.com/customer/account/login/"]
def parse(self, response):
token = response.xpath(".//input[contains(@name,'token')]/@value").extract()[0]
yield FormRequest.from_response(
response,
formnumber=1,
formxpath=".//*[@id='form-account-login']",
formdata={
'token' : token,
'LoginForm[email]': 'xxxx',
'LoginForm[password]': 'xxxx',
},
clickdata={'id': 'customer-account-login'},
callback=self.parse1,
)
def parse1(self, response):
return scrapy.Request(url="https://example.com/customer/account/list/", callback = self.parse_2, errback=self.error)
def parse1(self,response):
open_in_browser(response)
'COOKIES_DEBUG = True'は問題を見つけるのに役立ちます。 –