V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
dapengzhao
V2EX  ›  问与答

爬取( Python )今日头条数据入库(sqlserver)时数据存在‘?’问题,百度无果,有没有大佬知道?

  •  
  •   dapengzhao · 2018-04-09 20:24:32 +08:00 · 1534 次点击
    这是一个创建于 2420 天前的主题,其中的信息可能已经有所发展或是发生改变。

    该剧被爆出有刘诗诗出演,不过,诗诗确实很适合演这个“侠女”的角色,希望诗诗能演。
    这六部古装 IP 剧即将开拍,唐嫣刘诗诗郑爽热巴,谁将出演?这六部古装 IP 剧即将开拍,唐嫣刘诗诗郑爽热巴,谁将出演?"​​2·《白发皇妃》"

    这里的​&#8203 是检查网页时才有的,爬取的数据源码都没有,用 requests 库爬取的时候打印出数据也没有这些符号数字,但入库以后就会以?的形式显示在库里。

    我怀疑是编码问题,考虑过替换文中?,但不光是这一种情况,所有替换不具备通用性,求助。。

    3 条回复    2018-04-10 09:29:52 +08:00
    dapengzhao
        1
    dapengzhao  
    OP
       2018-04-09 20:26:44 +08:00
    “该剧被爆出有刘诗诗出演,不过,诗诗确实很适合演这个“侠女”的角色,希望诗诗能演。<br><img src="http://p3.pstatp.com/large/pgc-image/15223145376813a05173058" img_width="500" img_height="500" alt="这六部古装 IP 剧即将开拍,唐嫣刘诗诗郑爽热巴,谁将出演?" inline="0"><img src="http://p1.pstatp.com/large/pgc-image/1522314542716650abadf9a" img_width="500" img_height="379" alt="这六部古装 IP 剧即将开拍,唐嫣刘诗诗郑爽热巴,谁将出演?" inline="0">​​"&#8203;&#8203;"2·《白发皇妃》"

    一发布 html 就被解析了,上面是没解析的样子(我去掉了头尾的 p 标签)
    GooMS
        2
    GooMS  
       2018-04-10 00:02:33 +08:00 via Android
    干掉非 ASCII
    http://www.fileformat.info/info/unicode/char/200b/index.htm
    同样的问题谷歌会给你一堆资料
    dapengzhao
        3
    dapengzhao  
    OP
       2018-04-10 09:29:52 +08:00
    @GooMS 以后找歌
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1907 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 00:34 · PVG 08:34 · LAX 16:34 · JFK 19:34
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.