「クローラ」を含む日記 RSS

はてなキーワード: クローラとは

2019-11-13

anond:20191113174557

トラバ増田の言が正しいなら、画像クローラの誤認識でBAN食らって私的記録や下手したらビジネス基盤まで破壊される(なお抗議は無視される模様)とか恐ろしすぎる。

なんでもかんでも同じアカウントに紐付けすぎ。そうなってるのはGoogle一方的な都合なのに。

2019-10-01

個人アプリ開発時の『ドメイン取得』ってどうすればいいんだろう

個人開発記事とか見てると大体お名前.comとかでてくるけど、

ドメインって安くても維持費が1つにつき年間数百円から数千円発生するんだよね

サーバだったら最悪VPS借りて相乗りさせれば何個サービス開発しても1台分以上は料金かからなかったりするけど

人生かけてるサービスだったり一発起業目指して開発したサービスだったらともかく、

開発したサービスが当たるか当たらないかなんて予測は無理なわけで、

ドメインを取得してしまうと1年経つごとにドメイン維持費を払うか維持費をケチって潰すかの選択を迫られることになる

ユーザー投稿型のサービス廃墟化してるなら潰す選択肢はありかもしれないけど、

クローラデータ収集する感じのサービスDBがなくても稼働するようなサービスだとマネタイズできてなくても小さな需要はあるかもしれなくてドメインのために潰すのもアレだし、

基本やっぱサブドメイン運用でいいんかなぁ プライマリドメインgoogle.comみたいにブランドみたいな位置づけで

みんなどういうルールドメイン取得してんだろ

2019-05-05

Eggplant Gaming(エッグプラントゲーミング) が大好きなアカウント一覧

2019/05/05 12:51 、全てのページに <meta name="Hatena::Bookmark" content="nocomment" /> タグが追加された模様。

古いページも、クローラ巡回後にコメントページが非表示になる事が推測される。

ので、非表示になる前に、ブックマークの大半がこのサイトユーザ一覧はこちら。

b:id:Ventax000

b:id:OmonoJunpei

b:id:Tewpa

b:id:Vitokawa

b:id:Namaha

b:id:NamahageVege

今の同サイトの最新記事「「スマブラ」にGoogle Chromeの「あの恐竜」が参戦したらどうなるのか?何故か海外掲示板議論が白熱す」も、上記6ユーザの中最後の一人を抜いた5ユーザブクマしてる

2018-12-01

anond:20181201195506

はてなー老人会を含むインターネット老人会の面々はwgetとかcurlとかで組んだ秘伝のタレ化したWebクローラスクリプトを持っているから実際は面倒じゃ無いんだよ

anond:20181201191008

いや、はてなーならRSS/Atomフェードリーダなんて常識だし、Googleアラートもあるし、Webクローラだって運用してるの珍しくないだろ

自動巡回で取り出したテキスト情報grepして絞り込み、欲しい情報フィルタリング、そして通知なんて今の時代GUIでできるわ

2018-09-14

雑魚コーディングスキルで楽に飯が食える職場を探しています

電卓数字計算してエクセルに打ち込んでる職場に一人だけマクロを導入して余った時間エロ動画を見られるような職場理想です。

それなりのものを作るとき工数10倍くらいで出して余った時間エロ動画を眺めていたいです。

もっというと効率的エロ動画収集用のクローラ時間を割きたいし、余った時間エロサイトが作れるような職場がいいです。

休日勉強しろとか、納期前で徹夜とか、そういうハードなところは嫌です。

プライベートエロ動画の整理があるので。

紳士データ10TB超えると見たり使ったりすることよりも、ディレクトリ分けや不要データの削除、バックアップ環境の整備が大変なんです。

いい職場を探しています。どうぞよろしゅう。

2018-07-11

anond:20180711165459

ワンチャンどころかピコチャンくらいやぞ…>スクレイピングツール

PHPおじさんが敢えて語るべきことでもないが、スクレイピングだったりクローラだったりなんてゲーム開発者flappy birdクローン作るのと同じくらいの手慰みワークだからな…

2018-06-28

anond:20180628194115

お前はJavaPHPクローラ作る作業に戻るんだ

nodeは諦めろ

非同期処理を扱うには知能が足りてないからな

2018-05-24

anond:20180524114055

横だが落ち着け

追記

言語を書き足して更新までしてるのにまだ読み取れないか

プログラミング言語などに頼らないとクローラも書けないのか」とは書いてないだろ?

anond:20180524113140

コードを書かなきゃプログラマとしてお仕事出来ないってのは二流未満。

ましてやPHPが無いとクローラも作れない等論外。

もっと手を抜け。

2018-05-08

anond:20180508164921

そりゃ機能的には同じだが、node.jsで作ったクローラPHPで作ったクローラじゃ

ソースの刺々しさが違うよ。なんだかんだでnode.jsの方が処理はスッキリ書けるが、

からといってソース無駄な部分(カッコとか演算子とか)はnode.jsの方が圧倒的に多いよ。中カッコも多いからトゲトゲしてる。

anond:20180508164729

でもお前が作ってるのってクローラとかじゃん

そりゃ何で作ったって同じだよ

selenium遅すぎ

せっかくBOT作ろうとしたのにドキュメントの読み取りやら操作やらに時間かかり過ぎで全く実用的ではない。

少なからシングルクローラを動かそうとしてもクソ雑魚ナメクジスローロリス)程度のスピードしかクローリング出来ないからいつまで経ってもクローリング完了しない。

こんなんならまだHTML解析して作るクローラの方がマシやぞ。

2018-05-02

数日前に作成したfacebook api使って作った機能が、

昨日のセキュリティバージョンアップ会見での

仕様変更で使えなくなったあーあーあー!_(:3」z)_

てかSNS自分顔写真載っけて場所晒し名前晒し

年齢晒してんのに、それをクローラ収集されて使われたか

個人情報流出って何だよ!馬鹿かよ!

2018-03-05

anond:20180304225938

みんなはてぶとか増田オススメとか自作のリコメンドクローラ自動ブクマしてるのにコメントつけてるだけだぞ

手動でつけてる暇人なんかおらんやろ

2017-10-27

祝・ブログ登録1日経過!

Googleクローラが来てくれました!

アクセス数は300%の増加になりました! つまり4!


大昔はてなダイアリーがあったころはダイアリートップに「新着更新一覧」があって、ボットでもタイトル誤読勘違いでもなんでも一応の水増しアクセスがあったもんだけど

クローラーとかそういうの排除してだいたい人力のアクセスだけきちんとカウントするようになってると現実の風がなかなかに冷たいな

……いや、いまのとこ特段有用コンテンツもないんで、逆にこんなんでたくさん来てもらってもんああああああってなるんだけども

どこだかのブログサービスの「画像でもなんでもアカウント名のコンテンツへのアクセスがあったらとにかく1と数えるカウンター」あたりは嘘だらけだけど優しいのかもしれん

アーカイブ ヘルプ
ログイン ユーザー登録
ようこそ ゲスト さん