爬蟲 登入網頁

2022-04-08 17:27:46 字數 951 閱讀 2442

#

!/usr/bin/env python

#-*- coding: utf-8 -*-

#############################################

#file : loginmmvoip.py

#author : lucasysfeng

#revision : 2014-06-13 14:26:11

#description : 登入-->獲取cookie-->訪問任意url

#############################################

import

cookielib

import

urllib2

import

urllib

### loginurl和postvales通過填寫表單頁面原始碼或fiddler等抓包軟體獲得

### loginurl是處理登入請求的頁面(不是填寫表單的頁面),

loginurl = "

"postvalues = {}

### 儲存cookie

### 登入驗證

try:

opener.open(loginurl, urllib.urlencode(postvalues))

except

:

print

"error: open() error"#

登入後可訪問任意url

print opener.open("

").read()

python爬蟲模擬登入網頁 登入wish

wish登入頁面 是js寫的,在上面找登入鏈結很麻煩,直接故意寫錯登入賬號和密碼 獲得登入鏈結 上 import requests url1 url2 header 8或者不指定。data 獲得post請求的session物件 sesssion requests.session sesssion.p...

網頁爬蟲php,php網頁爬蟲

網頁爬蟲 最簡單的使用,屬性都採用預設值 curl curl init output curl exec curl curl close curl echo output 稍微複雜一點的,對頁面進行操作 curl curl init curl setopt curl,curlopt url,可以動態...

網頁爬蟲 靜態網頁《一》

一 通過jsoup請求獲取 網頁審查元素。eg request path document doc jsoup.connect request path get 二 檢視需要扣取資料的標籤,通過日誌輸出 doc的body。eg log.v tag,body doc.body 三 檢視列印的日誌,找到...