上来问问有用python 写爬虫软件的吗?
askask123 • • 41268 次浏览新加坡政府的很多采购合同都是在Gebiz网站(gebiz.gov.sg)上发布,数据很详实,包括投标招标数据,中标公司,中标价格等,都公开在Gebiz上。唯一的问题是有效期只有6个月,过后就删除相关数据了。
目前公司打算慢慢收集相关历史数据,作为今后投标工作的参考。
大概知道Python可以写程序,从网站上下载收集数据。想问一下有哪位大神可以做这种工作?大概需要多少钱?
欢迎私信沟通。
谢谢。
-
#1
github.con好多源代码
-
#2
具体啥需求具体啥需求 有budget吗
-
#3
爬虫 Gebiz你好,我是NTU CS毕业,可以帮忙写爬虫。
不知道你们的budge是多少。我预期是 S$1000,详细的可以微信聊,谢谢 -
askask123 楼主#4
具体要求
-
askask123 楼主#5
具体需求
基本需求是按照下图的指示能够把相关数据收集并存储下来。
公司只是希望在投标工作中,能够参考以前的类似工作的最终中标价格,在新的投标中能够更加准确的确定自己的标价。
我们希望的最低要求是:我们自己在windows环境下,安装好Python, 你只需要写一些代码,由我们自己运行代码,将网站上的数据爬下来。然后我们自己收集整理分析数据。
高一点的要求: 能够设计一个简单的界面,可以让不懂设计语言,只会普通电脑操作的人能够很快学会,利用软件下载数据。
其实还可以这样: 因为Gebiz是保留半年的数据,你也可以每隔半年,自己爬虫,下载数据,然后打包数据卖给我们。这样做的话,对你来讲,每半年都有点小小的收入。对我们来说,也减少了自己的劳动量,而且不用怕买了程序,过半年,如果网站改版,又要重新花钱找人编程。
大家有兴趣可以站短。
谢谢。

-
#6
这功能听起来很简单啊,你们公司没有会写程序的?感觉CS的人一下午就弄出来了。
-
askask123 楼主#7
就是没有人会写呀。我们是做建筑方面的,承包工程。
-
#8
给你个连接 自己 下载https://data.gov.sg/dataset?q=GeBIZ
-
#9
非CS的感觉得这个不难呢竞价800 哈哈哈
-
askask123 楼主#10
谢谢,很有用处谢谢,很有用处。 已经下载了。
还希望能有个软件可以按自己需求下载更多详细信息。 -
#11
你装的一个迅雷,然后把地址贴进去然后用windows自带的任务器,每几个月跑一次即可
-
#12
-
#13
你装的一个迅.雷,然后把地址贴进去然后用windows自带的任务器,每几个月跑一次即可
-
#14
目测沿途提取 "supplier_name" 和 "awarded_amt" 即可
-
#15
我可以做python爬虫业余做了好几个这样的项目,轻车熟路,收费看复杂程度,具体可联系David, 97202282.