爬蟲 新浪微博(登陸訪問 cookie訪問)

2021-08-18 10:45:47 字數 478 閱讀 7527

一、思路:

登入 ====>進入指定頁面 ====>獲取cookie ====> 帶cookie訪問相關頁面。

注:貌似微博頁面稍微改了一下:現在通過登入直接進入個人中心的過程中所獲取的cookie不能用於訪問其他頁面,因此,才會在登陸後加一層進入指定頁面用於獲取可用的cookie。

二、**:

1、登入並獲取cookie(url:

2、cookie訪問(demo)

requests方式:

scrapy方式:

Python 新浪微博爬蟲之模擬登陸

目前,親測能用的步驟是 通過預登入,使用get方法,獲得登入所需的servertime,nonce,pubkey,rsakv 使用encode64加密使用者名稱,使用rsa演算法加密密碼 登入。步驟一 response格式為 換行是我自己加上去的 sinassocontroller.prelogin...

微博模擬登陸

因公司需求,需要爬取微博相關大v的賬號以及相關資訊,一開始是直接爬取,發現只可以爬取10條資料 沒有登陸的情況下 所以就涉及到模擬登陸。import requests import json import base64 from lxml import etree from bs4 import b...

新浪微博簡單開發之簡單登陸

特別提醒的是在libs目錄下增加相關的微博專案需要的jar包 讀者若需要可到下一下 如下圖所示 在mainactivity中的 如下 package com.my2luobo import com.my2luobo.utils.constants import com.weibo.sdk.andro...