V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  locoz  ›  全部回复第 312 页 / 共 324 页
回复总数  6470
1 ... 308  309  310  311  312  313  314  315  316  317 ... 324  
2018-10-08 12:24:30 +08:00
回复了 wc110302 创建的主题 Python 最近准备爬取的一个网站遇到的瓶颈
试试 APP ?
2018-10-01 02:50:50 +08:00
回复了 darkmatter 创建的主题 生活 还没下班,蛋疼了。。。
我快下班了,还有四十几分钟😳
2018-09-30 18:00:51 +08:00
回复了 puga2006 创建的主题 游戏 突然发现 moonlight 这个玩意,很有意思
@qq316107934 #7 考虑过,就算是内网用 moonlight 也会有卡顿的情况。但是用 steam 的就没问题,无论是公网还是内网都能做到丝滑般顺畅( 100M 上行极客宽带
2018-09-30 17:05:47 +08:00
回复了 puga2006 创建的主题 游戏 突然发现 moonlight 这个玩意,很有意思
感觉用 moonlight 画面很卡。。上行没跑满,CPU 和 GPU 占用率也不高,但就是卡
2018-09-30 16:09:04 +08:00
回复了 Deville 创建的主题 程序员 还有两个小时放假,进来吹逼啊
明天凌晨 2:30 下班
2018-09-30 14:22:12 +08:00
回复了 Deville 创建的主题 JavaScript 这是被注入了个什么。。爬虫么。。?
看起来只是广告
2018-09-29 11:32:00 +08:00
回复了 wateryessence 创建的主题 Python 如何用爬虫爬取猫眼等网站上的电影信息?
看了一下,猫眼的票房是有做字体加密的,如果是第一次写爬虫的话可能有点难度;豆瓣是入门级,无难度随便爬。
“数据爬取功能需满足登录用户在系统中输入一段时间,系统能够将时间段内爬取返还给用户”这个需求的实现可以有两种方式:
1、数据实时性要求较高的
接口得到用户输入的时间段参数后再去爬,爬完格式化好了返回,缺点是速度可能较慢、容易触发反爬。
2、数据实时性要求不那么高的
爬虫和接口分开,爬虫每隔一段时间爬一次数据并存到数据库,接口得到时间段参数之后去查数据库就行了

量少没必要分布式,拿 requests 写都行
2018-09-28 17:20:30 +08:00
回复了 q770787217 创建的主题 JavaScript JS 代码如何合并? 都是跳转代码 功能不同
@lqh9428 #3 hhhhh
2018-09-28 17:00:45 +08:00
回复了 Sunxb 创建的主题 程序员 请教一个 img 标签的引用的图片问题
网站 url 发一下呗
2018-09-28 11:30:21 +08:00
回复了 amon 创建的主题 游戏 周五了来点轻松的,为什么 LOL 玩家如此仇恨王者荣耀玩家
周五又怎么样,明天后天还要上班的
2018-09-28 10:41:01 +08:00
回复了 foxyier 创建的主题 Python 求助一个网站视频加密方式, 已排除是 base64 加密
半天没看这楼就歪成这样了
2018-09-27 20:26:04 +08:00
回复了 foxyier 创建的主题 Python 求助一个网站视频加密方式, 已排除是 base64 加密
借题发挥了一下。。写了个知乎文章 https://zhuanlan.zhihu.com/p/45508079
2018-09-23 14:03:37 +08:00
回复了 ifwangs 创建的主题 问与答 锐捷 web 认证是如何检测代理上网的
以前在学校的时候干过从宿舍楼对面的居民楼飞一条网线到宿舍这种事。。
2018-09-23 11:41:12 +08:00
回复了 walle007 创建的主题 职场话题 吐槽新来的同事
@zr8657 #81 天猫这种要看爬到什么程度。如果只是爬个几十万、拿点商品基础信息的话堆 IP 或者用官方接口都能做;如果爬几千万商品还要拿什么店铺信息、工商信息、营业执照之类的话就比较麻烦了。
2018-09-22 20:01:06 +08:00
回复了 walle007 创建的主题 职场话题 吐槽新来的同事
之前碰到过一个类似的,差不多三年经验爬虫,也是说自己要熟悉,掌握了之后就会很好。
刚入职态度有点问题就不说了,熟悉了两个多星期让他写个入门级的网站的爬虫写了一个星期,还一堆问题,比如:for+range 做翻页逻辑、异步框架内直接用 requests 库发请求、正则解析 json。
然后就劝退了🙄
2018-09-20 11:02:02 +08:00
回复了 bethebetter 创建的主题 Android 小米在系统设置中插入广告了
ADUI 就这样了 还是原生好用
2018-09-16 19:38:05 +08:00
回复了 xoxo419 创建的主题 深圳 周末有没有一起练下车的(用共享汽车)
还是找陪驾吧,没副驾驶刹车的情况下练车害人害己
不用刻意学,虽然用的是不同的语言但是逻辑是一样的,看着看着就懂了,不知道是干什么的函数就查一下
2018-09-13 20:17:35 +08:00
回复了 lyujunwei 创建的主题 Android Android 你们都用什么输入法
Gboard
1 ... 308  309  310  311  312  313  314  315  316  317 ... 324  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   879 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 61ms · UTC 19:56 · PVG 03:56 · LAX 11:56 · JFK 14:56
Developed with CodeLauncher
♥ Do have faith in what you're doing.