Skip to content

ronnywang/realprice

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

75 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

crawler.php 爬資料的程式 需要安裝 pecl-http, php5-readline 以及需要有 jp2a (把 captcha 圖片轉成 ascii ,這樣只要專心在 console 上輸入認證碼就好)

parser.php parse 資料的程式,將 raw 資料夾內所有 HTML 轉換成 json

json2csv.php 把 parser.php 產生的 json 檔,分成四個 CSV 檔(case,建物,土地,車位)

raw/ 放從實價登錄網頁抓到原始資料,包含 HTML 和 javascript

九月資料也已爬完,不過因為程式改很大,github 這邊之後再更新 這邊先補上我部落格網址: 2012年9月實價登錄已經爬完了 等後續程式碼整理好以及資料再更完備再傳上來

完整 json 檔案:

  • 2012/11/12 處理完成,一共 17,826 筆,到 2012/8 資料,格式修正過
  • 2012/11/12 版本,一共 17.826 筆,到 2012/8 資料 (共四個分頁)
  • 舊檔案請見 DataChange.md

注意事項:

  • 資料內的交易總價和交易單價是直接從實價登錄網站上抓下來的,其中 交易單價 = (交易總價 / 建物面積) ,但是 交易總價 = (建物總價 + 車位總價) , 因此交易單價的數字會受到有無車位影響而基準不同,若要做資料分析的人要考慮這個因素,交易單價可能僅供參考
  • 我抓出來的資料歡迎任何人隨意使用,無論是個人研究或商業使用都沒關係,如果願意的話加個連結說一下資料在這邊抓的到就行了,讓更多人知道哪邊有原始資料可以拿。

json 格式:

  • Array(CaseObject ... )
  • CaseObject:
Field Type Description
caseNo string Case 的 ID
caseSeq integer Case 的序號(應該是賣了第幾次?)
address string Case 的地址
pos array 座標位置(lng, lat)
fields FieldObject Case 的詳細資訊
details array(LandObject|ParkObject|HouseObject ...) Case 附屬的建物、停車或是土地
* FieldObject
Field Type Description
交易標的 string '房地(土地+建物)+車位', '房地(土地+建物)', '土地', '建物'
交易年月 object(year: integer, month: integer)
交易總價 integer 單位元(PS: 這個價錢會包含停車位價錢)
交易單價 約 integer 單位(元/坪)(PS: 這個數字僅供參考,因為他會等於 (車位總價+建物總價) / (建物移轉總面積) ,會受到車位總價影響
建物移轉總面積 float 單位坪
土地移轉總面積 float 單位坪
交易筆棟數 null or object(建物: integer, 車位: integer, 土地: integer) 後面的 integer 會等於 details 資運的各項目數量
土地區段位置 string 土地位置
建物區段門牌 string
建物型態 string '辦公商業大樓', '住宅大樓(11層含以上有電梯)', '華廈(10層含以下有電梯)', '公寓(5樓含以下無電梯)', '其他', '套房(1房(1廳)1衛)', '店面(店舖)', '透天厝', '廠辦', '倉庫', '工廠', '農舍'
建物現況格局 null or object(房: integer, 廳: integer, 衛: integer, 隔間: string(有, 無))
車位總價 null or integer null 表示實價登錄網站未提供此資訊
有無管理組織 string 有, 無
* HouseObject
Field Type Description
type=house string 此為建物資訊
建物區段位置 string
建物移轉面積 float 單位坪
主要用途 string 住商用 住宅 住家用 住工用 停車空間 共有部份 共有部分 共用部份 共用部分 商業用 國民住宅 工商用 工業用 見使用執照 見其他登記事項 見其它登記事項 辦公室 農舍
主要建材 string 加強磚造 土造 木造 混凝土造 磚造 見使用執照 見其他登記事項 見其它登記事項 鋼筋混凝土加強磚造 鋼筋混凝土構造 鋼筋混凝土造 鋼造 鋼骨混凝土造 鋼骨鋼筋混凝土造 鐵造 預力混凝土造
完成年月 object(year: integer, month: integer)
總樓層數 string
* LandObject
Field Type Description
type=land string 此為土地資訊
土地區段位置 string
土地移轉面積 float 單位坪
使用分區或編定 string 都市:住 都市:其他 都市:商 都市:工 都市:農 非都市: 非都市:一般農業區 非都市:國家公園區 非都市: 山坡地保育區 非都市:工業區 非都市:森林區 非都市:河川區 非都市:特定專用區 非都市:特定農業區 非都市 :鄉村區 非都市:風景區
* ParkObject
Field Type Description
type=park string 此為停車資訊
序號 string
車位類別 string 一樓平面 其他 升降平面 升降機械 坡道平面 坡道機械 塔式車位
車位價格 string
車位面積 float

About

實價登錄原始資料備份下載 open data

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages