Python for Web Scraping课程推荐

番茄好吃  •   •  17347 次浏览

新加坡有没有这样的课程啊?

想找个1v1的老师指导一下。

很久不用了全忘了,最近突然有点用,然后下载了anaconda,用spyder捣鼓了半天,然后遇到了各种环境问题,从pip install不成功到geckodriver找不到 :( 脑子都大了

有没有老师推荐的,自荐也行。主要是想找人带我绕过这些坑,最终目的是到指定网站,更改搜索条件,下载生成的文件。

收费私聊。拜谢。

5 条回复
  • west666
    #1

    Python for Web Scraping课程推荐把你要爬取的事情,外包给我做,我做完了,手把手教你。这样你自己没有压力。我目前在运行的程序爬qoo10的数据,大概有超过1亿条;另外一个网站的数据也有差不多几千万条。经验丰富,动作快。联系我微信 GeoffreyTaylor

  • #2

    联系滚雪球@滚雪球

  • 滚雪球
    #3

    不要用windows用ubuntu,全程command line安装,100%不会缺东西或者缺配置。我以前windows里面也配置不好,现在全部ubuntu了。用过ubuntu以后我连macbook都不喜欢用了,somehow感觉ubuntu比mac还快,不懂是不是错觉。

    https://www.digitalocean.com/community/tutorials/how-to-install-anaconda-on-ubuntu-18-04-quickstart

  • 番茄好吃 楼主
    #4

    10行代码就解决了问题 :)感兴趣的同学,以下是绕坑方案
    1. pip install 用不了的,在 IPython console里输入指令
    conda install pip
    2. 网页驱动找不到的,以chrome为例,在 IPython console里输入指令
    webdriver.Chrome()
    然后它会告诉你下载网页,下载解压就可以使用了

    from selenium import webdriver
    from selenium.webdriver.support.select import Select
    chromedriver= "YourFilePathchromedriver.exe"
    browser=webdriver.Chrome(executable_path=chromedriver)
    url="https://YourURL"
    browser.get(url)
    Select_Product=Select(browser.find_element_by_id("ID")) #dropdown list
    Select_Product.select_by_value("Value")
    browser.find_element_by_id("ID").click() #click button

  • 番茄好吃 楼主
    #5

    谢谢虽然不需要用到Ubuntu,但是还是感谢建议:)

狮城帮

狮城帮是关于分享和探索新加坡的地方

马上注册

已注册用户请 登录