  |
俺が書いたことがあるのは以下 NLP系のタスク。情報検索、推薦システム、文書分類等。 社内のセールス系連中の仕事の自動化 Webシステムのバックエンド (php, python, java, perl)
NLP系ってどういうこと？ フレームワークは？ データパイプラインは？ どういうプロセッシングなの？
ルー大柴か？ まず情報検索は転置インデックス、LTR、近似最近傍法などの社内ライブラリを書いてる。 推薦システムはCTR最適化のためにクリックデータから訓練データを作成して、特徴...
NLPで近似最近傍法というのは例えば何のグループを出してるの？近似最近傍法自体は単にMLだけどなぜそれがNLPなの？
亀レスだが、こいつもANNをknnと勘違いしてるな
こいつもっていうか同一人物だからな
ああ＾～生き返るわぁ＾～♨
いやだからライブラリとパイプラインは？レポはどこに？ビルドはどうしてるの？
ライブラリなんて使ってないよ。フルスクラッチ。
言語は？
主にpython。バックエンドはphp、java、perlも使われているけど、マイクロサービスで切り分けてる。
あのな、GPUのコードフルスクラッチで書くのはPythonとかJavaでは無理なのよ
なにいってんだこいつ GPUなんて使ってないぞ
え？トレーニングどうしてるの？
CPUで足りる 問題のドメイン的にはCPUで十分
パイプラインはどうしてるの？フルスクラッチ？
例えばLTRを実行するにはランダムフォレストのようなアルゴリズムを使えると良いのだけど、ランダムフォレストはC++でスクラッチで書いてて、そのラッパーをpythonで書いてる。
あのな？パイプラインというのはデータを取ってくる部分のことでそれはフルスクラッチではやらないしデータベースの知識が必要なわけよ ランダムフォレストとか出てこないの
お前の中ではそうなんだろう 俺は事実を述べているだけだ
俺の中というかMLやってる全員がパイプラインといったらデータとってくる部分だと認識してるしランダムフォレストなんか関係ないよ 言わなかったけどNLPとNNにxgboostあたりのフォレス...
パイプラインと言ったらデータ収集から訓練までの一通りのことを言うよ で、じゃあデータはどうしているのかというと、クロールしてる あるコンテンツの検索エンジンを作っているの...
Webシステムのバックエンドもとっ散らかってるけどどういうフレームワーク？Rest? RPC?どのようなAPIでどんなアーキテクチャなの？
あまりエンジニアの仕事としてセールス連中の仕事の自動化とかしないと思うけどまあ俺も駆け出しの頃少しはやったことあるけど どのようなテクノロジーを使ってどのような自動化を...
例えばセールスの連中が「こういうアイテムを広告出稿したい」と言うわけだが、「こういう」の部分のプロトタイプを作って試行錯誤してGOサインが出た段階で自動化される
5
