2014-11-13

http://anond.hatelabo.jp/20141026015847

続き

xvideo_helper というgemをみつけたので、xvideoのスクレイピングは簡単に出来た。

ただ、一覧から取得しているのでdescriptionが途中で切れているものは、ページにアクセスしてnokogiriでパースしてtitleを取るようにした。

あと、microsoft_translator を使って翻訳かけたり、言語判定を入れてみたりした。

ベタッと一枚のファイルで書いてたものmoduleかしたりもして、ようやく形になって一段落

あとは、AWS cloudsearchで検索機能をつけたいな。

http://sp.eropop.net/

記事への反応 -
  • rssフィードをパースしてスマホ用のhtmlに展開してs3にpushするスクリプトを書いて heroku にあげて heroic scheduler でdailyで動かすものをつくってみた スクレイピングをするところまでやりた...

    • 続き xvideo_helper というgemをみつけたので、xvideoのスクレイピングは簡単に出来た。 ただ、一覧から取得しているのでdescriptionが途中で切れているものは、ページにアクセスしてnokogiriでパ...

    • DMMのAPIを利用するものもつくってみた http://kansai.eropop.net

記事への反応(ブックマークコメント)

ログイン ユーザー登録
ようこそ ゲスト さん