新足迹

标题: 敬请期待: 澳洲房产投资API杂志数据分析软件 [打印本页]

作者: maplefire    时间: 2013-7-19 23:09
标题: 敬请期待: 澳洲房产投资API杂志数据分析软件
本帖最后由 maplefire 于 2016-3-24 22:58 编辑

下载链接:Google Drive
24/3/2016
我把API数据模块单独拿出来, 这个数据以后会持续更新, 现在更新到了2016年4月刊( 也就是2015年12月的数据)
等过几天软件比较成熟了, 就放到google drive上去。

9/10
刚发现onthehouse已经不能下载suburb sales pdf文件了, 所以这个软件的数据更新也就告一段落了。

之后我会不定期更新API的数据。不再发布更新公告。

谢谢支持!

2/10
小改进: API数据可以选择不同月份的数据,现在已经有了3个月的数据, 2015年5月, 6月和7月的( 对应的是到11月API期刊的数据)

3/9
更新到1.6.1。
- 更改sales面板的日期, suburb的统计数据会重新刷新 ( 销售数量, 中间价和平均价)
- 更新API数据库到2015年6月(10月期刊), 增加average dates on market数据。
这两天把更新的程序和数据发上去。


13/8/2015
福利来啦~!
今日收集了Australian Property Investor (API) 2015年9月份期刊的全澳洲databank数据(到2015年5月份有效)。 并且增加了API模块。
每个区的数据有:
- 过去12个月地产销售数量
- 近3个月增幅
- 12个月增幅
- 3年增幅
- 5年增幅
- 10年增幅
- 房租中间价
- 平均收益率
大家可以更好的比较各个区的数据啦。
有空的话我每个月API数据都可以更新一次, 但是应该至少3个月更新一次。

还是一样下载ptGui_1.6.0_full.7z 打包运行ptGui.exe, 或者直接下载ptGui_1.6.0.jar, 数据是data_v1.6_20150814.7z。 解压缩到任意目录即可。
之前的1.5.x也可以使用最新的数据,只是API数据无法显示而已。


23/7/2015
NSW数据更新到了2015年7月份。

正在整理australian property investor杂志的数据, 到2015年2月份。 等过一阵子不是很忙的时候更新进来

27/3/2015
- 把button变成了icon button, 节省空间
- 改变了一下界面显示
- 增加了suburb和sales搜索历史,再次输入文本的时候,显示之前搜索列表,便于再次输入同样文本.


10/3/2015
今天偶尔发现数据有问题, 检查之后是后台处理程序的bug, 导致部分拍卖结果会重复录入.
现在把NSW, QLD和VIC的数据修正了. 更新到最新的拍卖结果. 7/3/2015
请重新下载ptGui_1.5.4_full.7z.

19/2/2015
为了方便同学使用, 现在ptGui_1.5.4_full.7z 包括了执行文件和数据, 只需要下载这个就行了。

软件小幅更新到1.5.4.
修正有时无法显示Comparison pane的数据
增加显示日期范围和涨跌幅度, 在统计和比较pane中

数据更新: NSW和QLD更新到2015年2月
增加了QLD的人口普查数据, 在QLD目录, CENSUS_2011.txt.



2/12/2014
墨尔本3000-3207数据上传了。。。

OnTheHouse上维州数据有几个问题:
- 没有具体日期, 只有MM/YYYY
我只能用每个月一号代替

- 很多没有具体的房间, 浴室和车库数。
我采用了默认值: UNIT是2, HOUSE是3. 和实际情况有出入。

anyway, 采取有多少算多少的态度, 我把墨尔本区号3000-3207的数据处理了, 这两天上传吧
希望给墨尔本的同学一点参考。。。

11/11/2014光棍节
NSW数据更新啦
data_nsw_csv_20141111.7z

现在Onthehouse网站设置了可疑操作监控, 不能像之前大批量下载数据了...以后要办法绕过这个限制才行...


4/9/2014
数据更新到了8月份
我特意做了可以执行的版本, 方便同学们使用
ptGui_1.5.3distributions.7z
这个解压缩到一个文件夹就行了。


14/7/2014
数据更新到20140706

26/5/2014
版本升级到1.5.3
修正了java8下面统计面板显示的兼容性问题

数据还是到2014年5月份。

开始设计Android版本,但是仅仅是开始。。。


3/3/2014
NSW数据更新到了3/3/2014,格式稍有变化( 增加了saleId) 所以之前的ptGui无法读取了。请用最新的ptGui.jar来运行。

接下来我的计划是
- 增加NOTE功能,可以添加备注。比如说租金情况,在市场多少天,学区,人口,等等。
- 增加tag功能 (optional)

同时开始开发android版本( 网友Charlie开始做了) :)
数据就是sqlite3格式,在google drive里就有。
data_nsw_sqlite.20140301.7z


23/1/2014
NSW数据更新到了21/01/2014
实测在Linux下也可以正常使用。但是按钮字体有点大。有空了更新一下。。。

13/11/2013
软件更新到1.5.1
加入house.ksou.com到sales tab的webview了。
可以切换选择google map 或者是ksou的历史数据,只对具体地址有效。
感谢owleo的提议~
onthehouse的数据也更新到昨天(各个区有1-2个月的延迟), 拍卖数据更新到上周六。09/11/2013

7/11/2013 
增加更多学校和人口普查信息的分析。。。
jar已经更新

1/11/2013
version 1.5.0
增加了2011年澳洲人口普查数据。主要包括每个区的:
中值家庭收入,年龄,地区大小,总人口,总家庭数,etc
籍贯分布
家庭收入分布


2/10/2013
我把投资房收益计算器整合到这个软件里了.版本到1.4.0
参考
http://www.oursteps.com.au/bbs/f ... read&tid=753121
代码是一样的...


19/9/2013
学校面板:
增加了过滤条件: 公立/ 私立, 小学/ 高中, 增加了导出功能。
jar文件已经更新。

17/9/2013
感谢hongmian 网友的建议,我把NSW 学校的数据也集成到这个软件里来了,数据来自:
http://www.schools.nsw.edu.au/schoolfind/locator/
和SMH 2010年naplan成绩NSW列表
谁有SMH 2012的数据? 我没找到pdf文件。。。

图示如下:
[attach]891709[/attach]

请到google drive下载最新1.3.0版本,数据data_NSW_20130917.7z
Enjoy!
有什么意见和建议欢迎提出!

简单解释:

移动平均线:
每20个销售价格取平均价格 画出来的线.可以把太高的价格和太低的价格因素去除.看到更详细的价格波动.

线性回归:
是利用数理统计中的回归分析,来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法之一。
线性回归线是当前价格随着时间的变化趋势线, 通俗讲就是好多数据在一条线附近上下活动。价格的波动就是一种线性回归。



6/9/2013
NSW数据更新到2013年9月
软件更新到1.2.1
- 增加一个过滤项: 只显示同地址的销售数据,
可以比较几年以内如果房子再次出售的话,价格变化...

31/7/2013
添加了昆士兰州的数据
邮编范围:
4000–4207;4300–4305;4500–4519;4208–4287;4550–4575

还是在google drive链接里下载
data_QLD.zip就是
data_NSW.zip也更新了一些。


前情简介:
http://www.oursteps.com.au/bbs/f ... read&tid=702668

分析,比较悉尼地区历史房价软件

- suburb房屋销售的历史记录, 右键可以打开google map
- 统计功能
- suburb 比较

数据来自于onthehouse和domain的拍卖数据。
悉尼地区我只处理了邮编2000-2234的区。

所有分析基于归一化价格: house以3房为准, unit以2房为准,每个区的归一化比例按照这个区的统计数据来进行。

自从悉尼地区历史房价分析软件1.0
发布以来,工作,生活一直也比较忙。
感谢LP的支持。。。  今天终于把计划中的1.2版本实现了

个人觉得比1.0版本更加完善,功能也多了不少,错误也修正了许多。。。总之,如果你用过1.0版本觉得还可以的话,
1.2版本更值得拥有!

新增功能:
- 显示各个区的销售数量,中值价格和平均价格
- 增加导出到csv file功能
- 增加了一元线性回归趋势线
- 过滤功能
- 数据更新

注意:1.2版本和1.0版本的数据格式不兼容。

我做了一个demo的视频,放到了youtube上:
http://www.youtube.com/watch?v=gkQRAItZwN8&feature=youtu.be

运行环境和安装同1.0
-----------------------------------------------------
需要你的机子上有java 运行环境 7u6以上版本
如果没有安装java,在这里安装了之后
http://www.oracle.com/technetwor ... nloads-1880261.html
再回过来看这个帖子。

-----------------------------------------------------
1. Download and install JRE 7u6+ version.
2. Unzip data to any folder
3. Double click ptGui.jar
4. Load the data folder.
Enjoy!

截图:
有同学说没有办法双击运行jar文件,一般来说这是java没有安装好。
看下图如果你能够在命令行运行
java -version
成功的话,应该双击就行,否则的话在命令行运行:
java -jar ptGui_v1.2.jar
[attach]856729[/attach]
软件截图
[attach]849578[/attach][attach]849576[/attach][attach]849575[/attach][attach]849574[/attach][attach]849573[/attach]

作者: flyspirit    时间: 2013-7-19 23:24
要花不少精力吧。
作者: terrysu    时间: 2013-7-20 08:19
很有意思的软件,多了解市场的人还是很有帮助的。谢谢lz
作者: Chining    时间: 2013-7-20 08:33
是c#.net写的吗?
太牛了。lz这种高级码工肯定工资很高
作者: microwen    时间: 2013-7-20 09:12

作者: coolioo    时间: 2013-7-21 00:00
这年头还写desktop程序呀
作者: tvc889    时间: 2013-7-21 00:27
谢谢楼主。能说说最新数据从哪里来的吗?
作者: 包子    时间: 2013-7-21 17:29
为什么我双击ptGui1.2是几个文件夹 啊?
com, dialog, META-INF, ptModel, ui, util。就找不到一个exe可以将它打开的
楼主指教一下吧!!
作者: Chining    时间: 2013-7-21 18:55
coolioo 发表于 2013-7-21 00:00
这年头还写desktop程序呀

web application岂不是有广告之嫌?
作者: Chining    时间: 2013-7-21 18:57
才发现,lz那么用心的东西才没几个view,
还不如写个标题 悉尼房价跌了 正文写个 吗? 会更吸引人。
作者: goldonebowl    时间: 2013-7-21 19:16
  无敌了
作者: fuduo    时间: 2013-7-21 19:18
必須頂
作者: maplefire    时间: 2013-7-21 19:26
tvc889 发表于 2013-7-21 00:27
谢谢楼主。能说说最新数据从哪里来的吗?

onthehouse.com.au
domain.com.au
作者: maplefire    时间: 2013-7-21 19:28
包子 发表于 2013-7-21 17:29
为什么我双击ptGui1.2是几个文件夹 啊?
com, dialog, META-INF, ptModel, ui, util。就找不到一个exe可以 ...

先安装JAVA 运行环境 看看readme.txt
作者: maplefire    时间: 2013-7-21 19:30
Chining 发表于 2013-7-21 18:57
才发现,lz那么用心的东西才没几个view,
还不如写个标题 悉尼房价跌了 正文写个 吗? 会更吸引人。 ...

有需求的人自然会关心
写这个小程序是我练手用的
:)
作者: banzhiyan    时间: 2013-7-21 19:32
支持lz
作者: maplefire    时间: 2013-7-21 19:32
Chining 发表于 2013-7-20 08:33
是c#.net写的吗?
太牛了。lz这种高级码工肯定工资很高

唉 这位同学  是java写的 好不好

作者: linger    时间: 2013-7-21 20:47
这个一定要顶!
作者: kone    时间: 2013-7-21 20:56
好帖!
作者: Chining    时间: 2013-7-21 21:00
maplefire 发表于 2013-7-21 19:32
唉 这位同学  是java写的 好不好

哦,看着像visual studio做出来的软件
作者: snowolivia    时间: 2013-7-21 21:00
太有才了
作者: m2thez    时间: 2013-7-21 21:06
厉害了。
作者: weixiao1008    时间: 2013-7-21 22:30

作者: maplefire    时间: 2013-7-21 22:43
本帖最后由 maplefire 于 2013-7-21 22:44 编辑
Chining 发表于 2013-7-21 21:00
哦,看着像visual studio做出来的软件


Development env:
back end : C++ / boost 1.54(VS2012)
front end: javaFX 2.2 / java 7U25(IntelliJ IDEA 12)

作者: seabookf_91    时间: 2013-7-22 01:21
本帖最后由 seabookf_91 于 2013-7-22 01:24 编辑

牛人  这个软件 不容易写的
没想到 java fx 可以写成这样
1) 那些图表 啥的 都是 用 java fx 搞出来的?
2) 数据是如何截取的 我看有很多csv

再度说明 写c++的 才是真正牛人 呵呵
作者: linger    时间: 2013-7-22 16:44
这个版本好用很多哦!
作者: lubber    时间: 2013-7-22 16:48
提示: 作者被禁止或删除 内容自动屏蔽
作者: purehare    时间: 2013-7-22 21:33

作者: dwzy    时间: 2013-7-22 21:42
LZ太有才了!
感谢楼主造福大家,打算买房的同学这下方便啦
作者: 西红四    时间: 2013-7-23 00:07
弱弱的问下,足迹上怎么收藏帖子
作者: ezzy    时间: 2013-7-23 00:48

作者: ezzy    时间: 2013-7-23 00:49
ezzy 发表于 2013-7-23 00:48


作者: maplefire    时间: 2013-7-23 08:51
seabookf_91 发表于 2013-7-22 01:21
牛人  这个软件 不容易写的
没想到 java fx 可以写成这样
1) 那些图表 啥的 都是 用 java fx 搞出来的?

JAVA FX 做前端事半功倍啊。。。看着界面很花哨,但是真正需要coding的不多。

界面设计: JavaFX scene builder,所见即所得,所有的table, chart, web view都是现成的,填数据就行。比C++容易太多了。。。



作者: maplefire    时间: 2013-7-23 09:02
seabookf_91 发表于 2013-7-22 01:21
牛人  这个软件 不容易写的
没想到 java fx 可以写成这样
1) 那些图表 啥的 都是 用 java fx 搞出来的?

后台处理在最最之前的帖子 里有说明,
http://www.oursteps.com.au/bbs/f ... p;extra=&page=3

下载onthehouse.com.au pdf -> txt -> csv
下载domain auction pdf -> txt -> 归总 -> csv -> 合并到onthehouse csv.


作者: cllinzhen    时间: 2013-7-23 10:08
bump! LZ WEI WU~~~
作者: lee9011    时间: 2013-7-23 13:02
Mark, 光脚没法加分,楼主好厉害,服务也很周到,想得很细致,连些应用这个软件的小问题都想到了,贴心。没伴的话求交往,
作者: frankmanzhu    时间: 2013-7-23 14:02
有帮助
作者: mrface    时间: 2013-7-23 16:56
楼主有打算扩充城市么
作者: seabookf_91    时间: 2013-7-23 20:57
maplefire 发表于 2013-7-23 09:02
后台处理在最最之前的帖子 里有说明,
http://www.oursteps.com.au/bbs/forum.php?mod=viewthread&tid=67 ...

pdf -> txt -> csv 都是手动的?

这个要花点功夫啊
作者: seabookf_91    时间: 2013-7-23 20:58
maplefire 发表于 2013-7-23 09:02
后台处理在最最之前的帖子 里有说明,
http://www.oursteps.com.au/bbs/forum.php?mod=viewthread&tid=67 ...

后台的那个帖子 权限不够 没法看

javafx 貌似 不错 有空看看 我还在写swing 太老土了
作者: maplefire    时间: 2013-7-23 21:24
本帖最后由 maplefire 于 2013-7-24 08:20 编辑
seabookf_91 发表于 2013-7-23 20:57
pdf -> txt -> csv 都是手动的?

这个要花点功夫啊


什么叫手动的?
后台是命令行程序,批处理就行了,
除了下载onthehouse的pdf文件是半自动的,其余的都可以自动运行。

onthehouse 处理500多个pdf -> txt -> csv : 30seconds
domain pdf->... -> csv : < 25seconds
作者: seabookf_91    时间: 2013-7-24 00:44
maplefire 发表于 2013-7-23 21:24
什么叫手动的?
后台是命令行程序,批处理就行了,
除了下载onthehouse的pdf文件是半自动的,其余的都可 ...

哦 那不错啊
作者: mmqq123    时间: 2013-7-25 09:31
niu   niu niu
作者: tracy@syd    时间: 2013-7-25 23:01
IT同学们快把此贴歪成技术讨论帖了

使用中的同学们讨论预测一下,哪些surburb暂时还没疯长,可能会成为下一轮热点。最近sydney房价实在涨的太惊心动魄了
作者: maplefire    时间: 2013-7-26 09:15
tracy 先来个使用心得好了。。。
作者: maplefire    时间: 2013-7-26 09:18
mrface 发表于 2013-7-23 16:56
楼主有打算扩充城市么

墨尔本和阿德onthehouse数据不全,没有办法。
佩斯和布里斯班倒是可以。。。但是没觉得有需求?
:si1
作者: xialiaoliao    时间: 2013-7-30 22:23
本帖最后由 xialiaoliao 于 2013-7-30 22:29 编辑

给LZ诚恳的建议, 别介意啊。
不是每个人都是IT出身的,说明书要像鬼佬那样写的越简单易懂越好, 最好一步一步的不要跳步。
到目前为止的评价是不好用, 装了Java, 下了data, 但是好像还是打不开软件。
双击ptGui_v 1.2.jar显示的是这样的。求助。

[attach]856672[/attach]


作者: maplefire    时间: 2013-7-30 23:19
xialiaoliao 发表于 2013-7-30 22:23
给LZ诚恳的建议, 别介意啊。
不是每个人都是IT出身的,说明书要像鬼佬那样写的越简单易懂越好, 最好一步 ...

这个问题我没有遇到过。。。
你打开命令行 cmd.exe
运行
java -version
看有没有显示
我的机子显示:
>java -version
java version "1.7.0_25"
Java(TM) SE Runtime Environment (build 1.7.0_25-b17)
Java HotSpot(TM) 64-Bit Server VM (build 23.25-b01, mixed mode)


如果没有的话,说明你java没有安装好。
如果有的话
命令行转到你的ptGui.jar目录下
运行
java -jar ptGui.jar

包装成exe文件不是不可以,但是要100多M,其实就是把java运行环境打包在一起了。不如你自己安装。


还有问题的话,可以私信给我。



作者: maplefire    时间: 2013-7-30 23:26
[attach]856727[/attach]
截图就是这样的
作者: maplefire    时间: 2013-7-31 21:45
添加了QLD的数据
邮编范围
4000–4207;4300–4305;4500–4519
4208–4287;4550–4575

作者: stunner    时间: 2013-7-31 21:48
mark!
作者: iceman    时间: 2013-8-10 00:42
数据做成json的格式,用js的一些框架比如highchart之类的做成网页版本的不更简单更好吗?
作者: maplefire    时间: 2013-8-27 11:02
iceman 发表于 2013-8-10 00:42
数据做成json的格式,用js的一些框架比如highchart之类的做成网页版本的不更简单更好吗? ...

谢谢建议哈。。。我主要是做C++的,这个是我第一个java程序,属于新手上路。。。
你说的我都没接触过。... (monkey08)

如果有人有兴趣的话,我可以把代码共享,做个网页版的。。。
其实数据有了,怎么做前端。。。都行。。。

作者: maplefire    时间: 2013-9-6 23:05
6/9/2013
NSW数据更新到2013年9月
软件更新到1.2.1
- 增加一个过滤项: 只显示同地址的销售数据,
可以比较几年以内如果房子再次出售的话,价格变化...
作者: duoduo725    时间: 2013-9-7 23:16

作者: 挑灯亮剑    时间: 2013-9-7 23:20
膜拜楼主。
作者: 挑灯亮剑    时间: 2013-9-7 23:22
怎么下载不了。浏览器一直在loading
作者: zdream_10    时间: 2013-9-7 23:40
楼主太厉害了 支持一个
作者: hongmian    时间: 2013-9-7 23:41
要是能把学校排名整合进去就好了
作者: maplefire    时间: 2013-9-7 23:59
hongmian 发表于 2013-9-7 23:41
要是能把学校排名整合进去就好了

这个其实是个好建议。。。我想想能不能实现。谢谢哈:si79
作者: maplefire    时间: 2013-9-8 00:00
挑灯亮剑 发表于 2013-9-7 23:22
怎么下载不了。浏览器一直在loading

这。。。我刚试了一下,可以下载。你要不再试试?
作者: maplefire    时间: 2013-9-8 00:02
iceman 发表于 2013-8-10 00:42
数据做成json的格式,用js的一些框架比如highchart之类的做成网页版本的不更简单更好吗? ...

其实后台数据已经做成了sqlite数据库格式了,只是前台读取有点问题。。。正在改进中。
作者: hongmian    时间: 2013-9-8 00:15
maplefire 发表于 2013-9-7 23:59
这个其实是个好建议。。。我想想能不能实现。谢谢哈

这个有一定的工作量,因为好多学校的catchement就是画了简单的图。不知道哪里有现成的数据。
作者: maplefire    时间: 2013-9-8 08:31
hongmian 发表于 2013-9-8 00:15
这个有一定的工作量,因为好多学校的catchement就是画了简单的图。不知道哪里有现成的数据。 ...

只匹配名字就行了....catchment就算了...呵呵
作者: hongmian    时间: 2013-9-8 13:32
有个地方不是太明白:在Moving Average Price里面图线还是上上下下错落有致,但切换到Linear Regression Trend就变成一条向上倾斜的直线了
作者: maplefire    时间: 2013-9-8 17:41
hongmian 发表于 2013-9-8 13:32
有个地方不是太明白:在Moving Average Price里面图线还是上上下下错落有致,但切换到Linear Regression Tr ...

简单解释:

移动平均线:
每20个销售价格取平均价格 画出来的线.可以把太高的价格和太低的价格因素去除.看到更详细的价格波动.

线性回归:
是利用数理统计中的回归分析,来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法之一。
线性回归线是当前价格随着时间的变化趋势线, 通俗讲就是好多数据在一条线附近上下活动。价格的波动就是一种线性回归。


作者: 挑灯亮剑    时间: 2013-9-8 20:55
maplefire 发表于 2013-9-8 00:00
这。。。我刚试了一下,可以下载。你要不再试试?

可以下载了。谢谢。
作者: maplefire    时间: 2013-9-17 21:45
17/9/2013
感谢hongmian 网友的建议,我把NSW 学校的数据也集成到这个软件里来了,数据来自:
http://www.schools.nsw.edu.au/schoolfind/locator/
和SMH 2010年naplan成绩NSW列表

选择suburbs,会把这些区的学校(小学和高中) 列出来,包括 2010年NSW州排名和ICSEA排名.
选择一个学校,下面会显示详细资料. 有些学校没有资料,就没有办法了.

作者: maplefire    时间: 2013-9-17 21:51
另外说明: 1.3.0版本重新改写了.有些界面和1.2.1版本不同.
作者: johnwang2013    时间: 2013-9-18 09:53
本帖最后由 johnwang2013 于 2013-9-18 09:56 编辑

mark
作者: maplefire    时间: 2013-9-19 12:13
19/9/2013
学校面板:
增加了过滤条件: 公立/ 私立, 小学/ 高中, 增加了导出功能。
jar文件已经更新。
作者: 小半个月亮    时间: 2013-9-19 12:26
人才啊
作者: 游得好小鱼    时间: 2013-9-19 16:04
好东西要顶
作者: ql_cat    时间: 2013-9-19 16:29
hope for the version of Melbourne
作者: maplefire    时间: 2013-9-28 20:06
ql_cat 发表于 2013-9-19 16:29
hope for the version of Melbourne

onthehouse的墨尔本数据不给力呀
作者: QDSYDNEY    时间: 2013-9-29 00:59
good
作者: maplefire    时间: 2013-9-30 16:09

30/9
增加一个小功能:
选取表格内容 CTRL+C可以拷贝到剪贴板了。

作者: whitecats    时间: 2013-9-30 16:23
大爱
作者: 老姜不辣    时间: 2013-9-30 16:25
牛人
作者: maplefire    时间: 2013-10-2 21:42
我把投资房收益计算器整合到这个软件里了.版本到1.4.0
参考
http://www.oursteps.com.au/bbs/f ... read&tid=753121

从google drive下载最新版本就行了.
作者: coocle    时间: 2013-10-5 08:29
Mac下运行不了,提示说更新Java Runtime。
作者: zuozuo    时间: 2013-10-15 13:11
mark
作者: bowensyd    时间: 2013-10-19 10:04
这个是用统计学原理,开发语言是java。思路和股票分析软件类似,炒股的人每人都有一个股票分析软件,但是赚到钱的很少很少!
作者: maplefire    时间: 2013-11-1 11:33
1/11/2013
版本1.5.0
增加2011年澳洲人口普查数据。
作者: jayhor    时间: 2013-11-1 11:52
真是强帖
作者: bluepeach    时间: 2013-11-1 12:40
感谢楼主的劳动。软件本身不说,搜集这些数据就要花很多时间吧。

几个关于数据的问题:
1。所有数据搜集都是你手工在做吗?手工转换格式,分区?
2。人口普查和学校的数据你放在哪里了?内嵌在程序里面?为什么不用类似房价的方式开放?

我来换个思路谈这个软件,大家共同探讨:
如果你更强化一些软件功能,把数据搜集工作交给使用者,是不是会更有效率?
作者: 北木山人    时间: 2013-11-1 12:53
是不是必须是PC机才行?苹果可以兼容吗?
作者: owleo    时间: 2013-11-1 13:01
不错,已经下了, mac上用也毫无问题,数据是采自onthehouse吗,现在还有个网的数据http://house.ksou.cn/ 貌似比onthehouse还全, 楼主可以考虑把两个数据都采集
作者: owleo    时间: 2013-11-1 13:04
北木山人 发表于 2013-11-1 13:53
是不是必须是PC机才行?苹果可以兼容吗?

mac无问题,去oracle去download一个java http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html 就可以了,
作者: maplefire    时间: 2013-11-1 13:21
bluepeach 发表于 2013-11-1 12:40
感谢楼主的劳动。软件本身不说,搜集这些数据就要花很多时间吧。

几个关于数据的问题:

谢谢关注~
这个程序是hobby来的, 用来练手,如果能给大家些帮助,我也很开心。

关于收集和分析数据,后台是C++ 命令行程序,便于批处理。

生成的结果文件是:

NSW_NAPLAN_2010.txt : 学校信息
NSW_CENSUS_2011.txt :人口普查信息

这两个是meta数据,估计不会做大的更新

其他的<suburb>_NSW_<postcode>_<type>.csv文件就是各个区的房子销售数据了。
格式也很简单:
第一行是统计数据:
totalsales,medianPrice,averagePrice,
接下来是销售数据 (按照时间排序)
Date,Address,Bedroom,Bathroom,Carspace,Price,LandSize,Type

每周自动下载domain的auction数据合并到现有数据中。
每个月下载一次onthehouse的数据。这些只要运行几条命令就行了。

这些数据在ptGui.jar里分析并显示,比原始数据提供更多的分析功能。

作者: maplefire    时间: 2013-11-1 13:23
owleo 发表于 2013-11-1 13:01
不错,已经下了, mac上用也毫无问题,数据是采自onthehouse吗,现在还有个网的数据http://house.ksou.cn/  ...

glad to know MAC is good to use~

house.ksou.cn没有提供suburb数据下载。。。
onthehouse提供pdf文件格式下载,所以容易收集和分析。。。

作者: owleo    时间: 2013-11-1 13:43
maplefire 发表于 2013-11-1 14:23
glad to know MAC is good to use~

house.ksou.cn没有提供suburb数据下载。。。

哦,或者可以考虑把链接拖入,house.ksou.cn里的其他数据例如图片,房型,比onthehouse貌似比较全面,有的数据onthehouse没有,但是有的数据on有但是ksou没。

作者: 北木山人    时间: 2013-11-1 14:28
owleo 发表于 2013-11-1 14:04
mac无问题,去oracle去download一个java http://www.oracle.com/technetwork/java/javase/downloads/jdk7 ...

装好能用了,谢谢。
作者: frankmanzhu    时间: 2013-11-1 14:39
开源嘛?
作者: bluepeach    时间: 2013-11-1 14:51
maplefire 发表于 2013-11-1 14:21
谢谢关注~
这个程序是hobby来的, 用来练手,如果能给大家些帮助,我也很开心。

听起来不错,这些数据下载下来就是现在的格式吗?学校,人口信息还好。
房价信息下载下来一定要做分区再合并的吧,这个是用c++搞的吗?似乎有点儿麻烦啊。

为啥不用个简单的内嵌数据库,这样就不用前台后台都要分别去访问多个csv数据源啦,而且要分别做统计了。这个工作似乎是重复的。
作者: maplefire    时间: 2013-11-1 20:20
本帖最后由 maplefire 于 2013-11-1 20:23 编辑
bluepeach 发表于 2013-11-1 14:51
听起来不错,这些数据下载下来就是现在的格式吗?学校,人口信息还好。
房价信息下载下来一定要做分区再 ...


当然不是...

onthehouse是pdf文件 -> text -> csv
domain拍卖结果也是pdf文件 -> text -> csv
人口普查数据是xls文件 -> CSV
学校信息是HTML文件 -> text

卖房记录有一个归并的问题,所以有些麻烦.其他的就是数据整理和分析了.

现在数据已经做成了sqlite3格式,打算用来后期开发android的程序, android已经内置了对sqlite3的支持.

但是我的java水平和时间有限...java PC端对sqlite3的支持感觉不是太好用, 所以功能先做出来,慢慢再改进数据库版本
我的roadmap里有... :)
/
~





作者: maplefire    时间: 2013-11-1 20:37
frankmanzhu 发表于 2013-11-1 14:39
开源嘛?

开源有用吗?

作者: jiangmin    时间: 2013-11-1 21:35
强帖留名
作者: pampers0707    时间: 2013-11-2 08:29

作者: yxfc2003    时间: 2013-11-2 10:35
这软件要火!




欢迎光临 新足迹 (https://www.oursteps.com.au/bbs/) Powered by Discuz! X3.4