首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python 学习手册
Python Cookbook
Python 基础教程
Python Sites
PyPI - Python Package Index
http://www.simple-is-better.com/
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
V2EX  ›  Python

pycharm 问题

  •  
  •   jmjiafan · 216 天前用 Android 发布 · 1536 次点击
    这是一个创建于 216 天前的主题,其中的信息可能已经有所发展或是发生改变。
    用 pycharm 爬取网页显示不全,用 fiddler 抓包看来是全的,再用 python 自来的 ide 也是全是这是用问题,都是 requests 抓
    11 回复  |  直到 2018-07-17 09:46:57 +08:00
        1
    ranleng   216 天前   ♥ 1
    "也是全是这是用问题"... <-- 真的懂不了
    pycharm 和 爬出来的全不全应该没有关系... 就一个 IDE...
        2
    herozhang   216 天前
    可能网页有一部分是 js 动态加载或者生成的。
    你走浏览器抓,自然浏览器就执行了这些 js。
    而 requests 抓,这部分就没执行,自然就木有了。

    可以了解一下 selenium 这个库
        3
    herozhang   216 天前
    Selenium + PhantomJS
        4
    Leigg   216 天前 via iPhone
    怪 ide,过分了兄 dei
        5
    pabupa   216 天前 via Android
    厉害了~
        6
    jimmy2010   216 天前 via Android
    根据你的描述我得出一个结论,既然都是 requests 出问题,那应该怪 requests,而不是 pycharm
        7
    PureWhite   216 天前
    可能是 python 出的问题,更可能是写 Python 用的 C 出的问题。
        8
    anyele   216 天前 via Android
    厉害了
        9
    jrtzxh020   216 天前
    pycharm 躺着也能中枪..
        10
    lieh222   216 天前
    我猜是宇宙射线干扰了内存,导致丢失了这部分数据
        11
    zhuangzhuang1988   216 天前
    咋能怪 ide 呢, 怪操作系统。
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   3934 人在线   最高记录 4346   ·  
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 17ms · UTC 05:47 · PVG 13:47 · LAX 21:47 · JFK 00:47
    ♥ Do have faith in what you're doing.
    沪ICP备16043287号-1