Python 弹出登录页面 windows

Question

我想用python访问网页和打印源代码，其中大部分需要先登录。我以前有过类似的问题，我已经用下面的代码解决了，因为它们是网页上的固定字段，我可以找到它们。最近需要访问another page，但是这次有弹窗登录window，无法用同样的方法解决

我试过使用 Selenium 模块，但它需要打开浏览器才能完成，只是想知道是否有与 cookielib 类似的方法用于 python 运行代码在后台没有注意到浏览器已经打开？非常感谢！

import cookielib
import urllib
import urllib2


# Store the cookies and create an opener that will hold them
cj = cookielib.CookieJar()
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cj))

# Add our headers
opener.addheaders = [('User-agent', 'RedditTesting')]

# Install our opener (note that this changes the global opener to the one
# we just made, but you can also just call opener.open() if you want)
urllib2.install_opener(opener)

# The action/ target from the form
authentication_url = 'https://ssl.reddit.com/post/login'

# Input parameters we are going to send
payload = {
  'op': 'login-main',
  'user': '<username>',
  'passwd': '<password>'
  }

# Use urllib to encode the payload
data = urllib.urlencode(payload)

# Build our Request object (supplying 'data' makes it a POST)
req = urllib2.Request(authentication_url, data)

# Make the request and read the response
resp = urllib2.urlopen(req)
contents = resp.read()

Answer 1

您可以将 selenium 与使用 WebKit 的 PhantomJS to have an headless browser. There is also Ghost.py 一起使用来解释 Javascript。这两个项目有助于与 webapps 的 js 内容进行交互。

但我注意到弹出窗口是由于 HTTP 身份验证协议引起的，这里似乎是 https://en.wikipedia.org/wiki/NT_LAN_Manager

所以您可能想看一下这个协议并基于它创建一个请求，而不是尝试将您的登录信息放在弹出窗口中。

Python 弹出登录页面 windows

Python login page with pop up windows

python

selenium

urllib2

cookielib