Python for Web Scraping课程推荐
番茄好吃 • • 17347 次浏览新加坡有没有这样的课程啊?
想找个1v1的老师指导一下。
很久不用了全忘了,最近突然有点用,然后下载了anaconda,用spyder捣鼓了半天,然后遇到了各种环境问题,从pip install不成功到geckodriver找不到 :( 脑子都大了
有没有老师推荐的,自荐也行。主要是想找人带我绕过这些坑,最终目的是到指定网站,更改搜索条件,下载生成的文件。
收费私聊。拜谢。
-
#1
Python for Web Scraping课程推荐把你要爬取的事情,外包给我做,我做完了,手把手教你。这样你自己没有压力。我目前在运行的程序爬qoo10的数据,大概有超过1亿条;另外一个网站的数据也有差不多几千万条。经验丰富,动作快。联系我微信 GeoffreyTaylor
-
#2
联系滚雪球@滚雪球
-
#3
不要用windows用ubuntu,全程command line安装,100%不会缺东西或者缺配置。我以前windows里面也配置不好,现在全部ubuntu了。用过ubuntu以后我连macbook都不喜欢用了,somehow感觉ubuntu比mac还快,不懂是不是错觉。
https://www.digitalocean.com/community/tutorials/how-to-install-anaconda-on-ubuntu-18-04-quickstart -
番茄好吃 楼主#4
10行代码就解决了问题 :)感兴趣的同学,以下是绕坑方案
1. pip install 用不了的,在 IPython console里输入指令
conda install pip
2. 网页驱动找不到的,以chrome为例,在 IPython console里输入指令
webdriver.Chrome()
然后它会告诉你下载网页,下载解压就可以使用了
from selenium import webdriver
from selenium.webdriver.support.select import Select
chromedriver= "YourFilePathchromedriver.exe"
browser=webdriver.Chrome(executable_path=chromedriver)
url="https://YourURL"
browser.get(url)
Select_Product=Select(browser.find_element_by_id("ID")) #dropdown list
Select_Product.select_by_value("Value")
browser.find_element_by_id("ID").click() #click button -
番茄好吃 楼主#5
谢谢虽然不需要用到Ubuntu,但是还是感谢建议:)