Skip to content

LeeDDHH/qiitaDaily

Repository files navigation

qiitaDaily

ローカルにqiita記事をカテゴライズして保存

使い方

事前に指定しておくこと

⚠️使用する前にCommon.phpqiitaDaily.shにて以下の値を設定してください。

Common.php

  • ARTICLE_DIR: 投稿の保存先 ex)../../Documents/archive/qiita/
  • TEMP_DIR: tempファイルの保存先 ex)../../Documents/archive/qiita/temp/
  • USERAGENT: userAgent ex)User-Agent: Bot/1.0 (◯◯Bot; rev.20181108; ◯◯@gmail.com)
  • ACCESSTOKEN: qiitaの開発者用アクセストークン
  • TEMPLATE: qiitaの記事から本文を表示させるためのテンプレート
  • CSSFILE:  書式を整えるためのCSS

qiitaDaily.sh

  • download: Common.phpで指定した「ダウンロードした投稿のパラメーターを保存するファイル」までのパス ex)../../Documents/archive/qiita/download.txt

実行例

sh qiitaDaily.sh

補足

qiitaDaily.shに指定されたsleepの値は少なくとも1以上にしておいてください。

181227

必要最低限の情報をまとめるためにテンプレートとCSSを追加しました。

  • 追加: template.html, style-8140ff048d203c2f3495c80fc4aea450.min.css
  • 変更: Common.php, getArticle.php, takeArticle.php

About

qiita記事のクローリング&スクレイピング

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published