بدست آوردن صفحه بعدی در سایت دیجی کالا با اسکرپی

با سلام

دوستان من یه Crawler نوشتم با کتابخونه اسکرپی که میره و صفحات دیجی کالا رو کراول میکنه. مشکلی که دارم اینه که نمیتونم مثلا در دسته بندی دریل (لینک) به صفحه بعدی (۲) برم.

کد قسمتی که برای استخراج صفحه بعدی دسته بندی نوشتم هم بصورت زیره:

page_num += 1
    yield response.follow(next_page, callback=self.parse)

ممنون میشم دوستانی که تجربه/دانششو دارند راهنمایی کنند.

با سپاس فروان از اساتید پاسخگو :heart:

1 Like

مشکل از type متغییرها بود. حل شد.