SweetPotato::Plagger このページをアンテナに追加 RSSフィード

2006-12-03

[][] upgrader for EFT Game-Style & Girls-Style 22:38  upgrader for EFT Game-Style & Girls-Style - SweetPotato::Plagger を含むブックマーク はてなブックマーク -  upgrader for EFT Game-Style & Girls-Style - SweetPotato::Plagger  upgrader for EFT Game-Style & Girls-Style - SweetPotato::Plagger のブックマークコメント

Game-StyleおよびGirls-Styleの記事の全文を取得する。

assets/plugin/Filter-EntryFullText/gamestyle.yaml

# author: SweetPotato
handle: http://www\.(?:game|girls)-style\.jp/(?:\w+/\d{6}/\d{2}/\w+|nijiiro/4koma/\d+)\.php
extract: (<TD WIDTH=540 VALIGN=TOP ALIGN=CENTER>.*?)<HR>\r?\n<DIV CLASS=MS>
extract_capture: body

虹色エアラインのためにextractがやや強引になっている。

config.gamestyle.yaml

plugins:
  - module: Subscription::Config
    config:
      feed:
        - url: http://www.game-style.jp/index2.php
          meta:
            follow_link: /\w+/\d{6}/\d{2}/\w+\.php
        - url: http://www.game-style.jp/gyutto/
          meta:
            follow_link: /gyutto/\d{6}/\d{2}/\w+\.php
        - url: http://www.game-style.jp/nijiiro/
          meta:
            follow_link: /nijiiro/4koma/\d+\.php
        - url: http://www.girls-style.jp/index2.php
          meta:
            follow_link: /\w+/\d{6}/\d{2}/\w+\.php
  - module: CustomFeed::Simple
  - module: Filter::EntryFullText
  - module: Filter::ResolveRelativeLink

[] コットンソフトの四暗刻画像を欠かさず保存したい 03:27  コットンソフトの四暗刻画像を欠かさず保存したい - SweetPotato::Plagger を含むブックマーク はてなブックマーク -  コットンソフトの四暗刻画像を欠かさず保存したい - SweetPotato::Plagger  コットンソフトの四暗刻画像を欠かさず保存したい - SweetPotato::Plagger のブックマークコメント

config.sianke.yaml

plugins:
  - module: CustomFeed::Debug
    config:
      entry:
        - link: http://cotton-soft.com/4koma.html
  - module: Filter::EntryFullText
    config:
      store_html_on_failure: 1
  - module: Filter::FindEnclosures
  - module: Filter::FetchEnclosure
    config:
      dir: /path/to/dir

EFTは単純にHTMLを取得するのが目的なだけのでassetsは不要。あとはこれを定期実行するだけ。

てか四暗刻に限らず,イラスト収集にこの方法は使えるんだよなあ。便利。サーバへの負荷のかけ過ぎには注意しないといけないけど。

トラックバック - http://plagger.g.hatena.ne.jp/SweetPotato/20061203