因为CEA的网站实在是太难搜索了，我的这个网站filter和sorting都很好用，只需要输几个字母就能搜出来了，CEA的网站不输全名就搜不出来。数据较多，打开网页请耐心，并且请使用Google Chrome。
https://cshn.github.io/agent-data
需要我做一个按照HDB成交量的中介动态排名吗？
43 条回复
-
#1
根据热点楼可能你需要做个大众点评网，来给中介、ID等打分，你还可以考虑引入竞价排名，如果想赚钱的话
-
#2
沙发 楼主是不嫌事儿大星人
-
#3
楼主这个真不错，比CEA 的方便顺便自查了一下我家那位，很准的。
-
#4
lz你好有商业头脑xmlzj
-
#5
楼主厉害哪来的那么自由支配时间呀？熬夜
-
#6
楼主我大写的服感觉这对data analysis还有编程的爱好已经不是兴趣 而是深入骨髓了
-
#7
同问：晚上不用睡觉咩？！
-
滚雪球 楼主#8
睡了啊就娃晚上学习的时候自己也假装在工作啊，可以给娃做好榜样，这样娃就不会来找我了
-
#9
大神好厉害业务范围广
-
滚雪球 楼主#10
事实上入睡的更快不过确实想做的太多时间太少，所以现在只能减少打球的时间了
-
#11
有保险相关的排名就好了每个月几十个索赔都不知道怎么宣传自己。。
-
#12
厉害了码农改变世界
-
滚雪球 楼主#13
哪里有数据吗？xmlzj
-
滚雪球 楼主#14
哪里有private的数据吗？有private的话就真的厉害了
-
#15
公司好像没有给金管局递这方面的数据以后要是能公布出来就好了。
-
#16
进来膜拜楼主厉害就是厉害，高手就是高手
-
#17
数据怎么load进去的，还是连接其它网站?原始数据是 excel, CSV?
-
#18
我猜是爬的请lz指正，谢谢
-
#19
其实更关心楼盘交易分区火热程度，和销售数量占当地区域所有可售房屋的比例还是膜拜一下
是不是上次做出hdb 12月还是几年的transaction 的那位兄弟？(同时的HDB只能查三个月的，后来才改的） -
#20
时间排序不好用，是按照字母而不是时间顺序。。。
-
滚雪球 楼主#21
是的要一点一点做
-
滚雪球 楼主#22
那个有类似的网站了吧现在就集中做有CEA number的数据，大家有任何有办法查到CEA number相关的网站都可以丢进来，只要不用登录就能查数据的数据我都可以join进来
-
#23
都是来自于data.gov.sgAPI里直接给了json response，只需要用angularjs，reactjs展示就行了，
当然还有各种filter，search
反正楼主是个爱折腾的人 -
#24
大牛太厉害了你可以开课教教我们怎么拿数据做database吗？这个对financial analysis太有用了
-
滚雪球 楼主#25
正确我的源代码开放的，欢迎去看，顺便给个star，其实我还想晚一点把这个数据load进去mongoDB，然后我自己再从mongoDB里面读出来。因为他的API提供不了我想要的统计数据，如果所有统计都写在angular里面太奇怪了，理论上倒是也可以把逻辑都写在UI code里面。
data.gov本来就是为了给developer折腾的吧，你不折腾就是看不起政府的智慧国计划 -
滚雪球 楼主#26
可以啊我再发布个页面解释一下每一步怎么做吧
-
#27
蹲一个感觉现在好多工作都需要data analysis，多门技术多条路
-
#28
哇，免费分享啊太感谢啦！
-
#29
condo的，来一份。哈哈
-
#30
Mongodb 的备份和一些utility比较容易，想之间的其实商业软件比如Oracle, ms SQL的参数很多的，成百上千。 mongodb 的document data type 比较flexible, 号称是为了大数据扩展方便。 你没搭replication 那步吧？自己玩玩。想知道你的程序设计的 pipeline, 整个workflow自动了吗 ? 没准多加几个人你能开公司了。哈哈
-
#31
马一下，膜拜技术牛人
-
滚雪球 楼主#32
爬数据不是自动的，要自己在合适时间运行程序不过只要数据爬进去mongoDB网页就会自动显示，修复mongoDB里面的数据需要自己写javascript。顺便强调一下，中介那个网站暂时没有用mongoDB，现在只是拿了data gov的数据。不用自己维护原始数据感觉太好了，但是价值就少了很多，最值钱的其实还是数据。
虽然mongoDB不需要有schema我还是强迫自己follow一定的schema，我还是习惯把它当成oracle来用，只不过会重复存很多数据这样就不用自己join不同的collection了。 -
#33
坐等好厉害
膜拜 -
#34
我也这样做过把政府网站API提供的数据存进mongoDB再分析，这样不用每次都访问API了，用户看到的数据是从mongoDB来的。
-
滚雪球 楼主#35
我觉得访问API不是问题但是它的API给的选择太少了，我放进MongoDB以后还会自己写个服务器端的程序提供各种各样我要的API，比如
/top10agent
/top10agentbyarea/:area
/topagentforseller
/topagentforbuyer
... -
#36
最佩服的就是楼主这样的能说又能做的。。。。。。
-
#37
公司总有问题是内网可以抓吗？
-
#38
恩恩谢谢指点。赞。
-
滚雪球 楼主#39
【房】特意赶制了一个新加坡的中介组屋交易搜索网站方便大家开撕
因为CEA的网站实在是太难搜索了，我的这个网站filter和sorting都很好用，只需要输几个字母就能搜出来了，CEA的网站不输全名就搜不出来。数据较多，打开网页请耐心，并且请使用Google Chrome。
https://cshn.github.io/agent-data
需要我做一个按照HDB成交量的中介动态排名吗？
该帖荣获当日十大第2，奖励楼主18分以及27狮城帮币，时间：2019-07-19 22:00:01。 -
#40
楼主太棒了手动赞一个。
-
滚雪球 楼主#41
补图我觉得UI越来越可以接受了，我本来是服务器端的程序员，现在似乎完全变成typescript了，太强大太灵活了（不过也不能说我就喜欢），不过从改程序到出点产品太快了。两个command立刻就发布了，而且调试也快
-
滚雪球 楼主#42
这个就是刚才等娃下课的时候改的就挤时间做就好，总有时间的。如果你在各种补习班看到一个在站着写程序的家长那就是我了。
-
#43
膜拜大神才意识到需要关注P1报名的情况，最喜欢数据统计的简洁页面了，谢谢