上来问问有用python 写爬虫软件的吗?

askask123  •   •  41268 次浏览

新加坡政府的很多采购合同都是在Gebiz网站(gebiz.gov.sg)上发布,数据很详实,包括投标招标数据,中标公司,中标价格等,都公开在Gebiz上。唯一的问题是有效期只有6个月,过后就删除相关数据了。
目前公司打算慢慢收集相关历史数据,作为今后投标工作的参考。
大概知道Python可以写程序,从网站上下载收集数据。想问一下有哪位大神可以做这种工作?大概需要多少钱?

欢迎私信沟通。

谢谢。

15 条回复
  • sonatam
    #1

    github.con好多源代码

  • hudasm
    #2

    具体啥需求具体啥需求 有budget吗

  • github
    #3

    爬虫 Gebiz你好,我是NTU CS毕业,可以帮忙写爬虫。
    不知道你们的budge是多少。我预期是 S$1000,详细的可以微信聊,谢谢

  • askask123 楼主
    #4

    具体要求

     

     

     

     

  • askask123 楼主
    #5

    具体需求

    基本需求是按照下图的指示能够把相关数据收集并存储下来。

     

    公司只是希望在投标工作中,能够参考以前的类似工作的最终中标价格,在新的投标中能够更加准确的确定自己的标价。

     

    我们希望的最低要求是:我们自己在windows环境下,安装好Python, 你只需要写一些代码,由我们自己运行代码,将网站上的数据爬下来。然后我们自己收集整理分析数据。

     

    高一点的要求: 能够设计一个简单的界面,可以让不懂设计语言,只会普通电脑操作的人能够很快学会,利用软件下载数据。


    其实还可以这样: 因为Gebiz是保留半年的数据,你也可以每隔半年,自己爬虫,下载数据,然后打包数据卖给我们。这样做的话,对你来讲,每半年都有点小小的收入。对我们来说,也减少了自己的劳动量,而且不用怕买了程序,过半年,如果网站改版,又要重新花钱找人编程。


    大家有兴趣可以站短。


    谢谢。 

     

     

     

     

     

     

  • 买买提
    #6

    这功能听起来很简单啊,你们公司没有会写程序的?感觉CS的人一下午就弄出来了。

  • askask123 楼主
    #7

    就是没有人会写呀。我们是做建筑方面的,承包工程。

  • maxwang71
    #8

    给你个连接 自己 下载https://data.gov.sg/dataset?q=GeBIZ

  • 霏霏
    #9

    非CS的感觉得这个不难呢竞价800 哈哈哈

  • askask123 楼主
    #10

    谢谢,很有用处谢谢,很有用处。 已经下载了。

    还希望能有个软件可以按自己需求下载更多详细信息。

  • sonatam
    #11

    你装的一个迅雷,然后把地址贴进去然后用windows自带的任务器,每几个月跑一次即可

  • #12

  • sonatam
    #13

    你装的一个迅.雷,然后把地址贴进去然后用windows自带的任务器,每几个月跑一次即可

  • #14

    目测沿途提取 "supplier_name" 和 "awarded_amt" 即可

  • ah_kuan
    #15

    我可以做python爬虫业余做了好几个这样的项目,轻车熟路,收费看复杂程度,具体可联系David, 97202282.

狮城帮

狮城帮是关于分享和探索新加坡的地方

马上注册

已注册用户请 登录