有些网站指明要求必须用 IE 打开，这样的网站应该怎么爬？ - V2EX

首页注册登录

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 2843 天前的主题，其中的信息可能已经有所发展或是发生改变。

可能是这些网站用了 activeX ，只有 IE 才支持，这样的网站怎么爬？

14 条回复 • 2017-02-09 00:08:36 +08:00

1

plqws

2017-01-25 19:50:04 +08:00

用 webbrowser 组件爬

2

grac

2017-01-25 22:23:21 +08:00 via iPhone

1

伪造 user-agent

3

vibbow

2017-01-26 04:13:41 +08:00 via Android

selenium

4

liuzhiyong

2017-01-26 12:22:36 +08:00

伪造 user-agent ——用 IE 的控件（ webbrowser ）效率应该非常低。

5

suduo1987

2017-01-26 14:34:12 +08:00 via iPhone

抓包解析

6

TaMud

2017-01-26 15:30:03 +08:00

@vibbow selenium 支持 IE???我们乡下人读书少，你不要骗我

7

TaMud

2017-01-26 15:30:30 +08:00

@grac 你确定？？能行？？？你实验过没有？？

8

grac

2017-01-26 15:35:47 +08:00

为啥不行？为啥不是你去实验？@TaMud

9

vibbow

2017-01-26 17:19:36 +08:00 via Android

@TaMud Selenium 支持 IE 的啊。

10

justjavac

2017-01-30 14:32:12 +08:00 via Android

模拟 IE

11

junyi233

2017-01-30 16:17:39 +08:00 via Android

楼上说的很清楚了，伪造 User-agent 。
另外我要吐槽楼主，你不自己去尝试，反而让回答者去试验，楼主你是有多懒？

12

cio

2017-01-30 19:09:27 +08:00

你真懒

13

omg21

OP

2017-02-03 20:43:54 +08:00

@junyi233 话说我哪里有让回答者去试验了。。。

14

elfsong

2017-02-09 00:08:36 +08:00

Selenium + PhantomJs

关于 · 帮助文档 · 博客 · API · FAQ · 实用小工具 · 3346 人在线 最高记录 6679 ·

Select Language

创意工作者们的社区

World is powered by solitude

VERSION: 3.9.8.5 · 22ms · UTC 10:39 · PVG 18:39 · LAX 02:39 · JFK 05:39
Developed with CodeLauncher
♥ Do have faith in what you're doing.