2024-04-01

記事への反応 -
  • 俺が書いたことがあるのは以下 NLP系のタスク。情報検索、推薦システム、文書分類等。 社内のセールス系連中の仕事の自動化 Webシステムのバックエンド (php, python, java, perl)

    • NLP系ってどういうこと? フレームワークは? データパイプラインは? どういうプロセッシングなの?

      • ルー大柴か? まず情報検索は転置インデックス、LTR、近似最近傍法などの社内ライブラリを書いてる。 推薦システムはCTR最適化のためにクリックデータから訓練データを作成して、特徴...

        • いやだからライブラリとパイプラインは?レポはどこに?ビルドはどうしてるの?

          • ライブラリなんて使ってないよ。フルスクラッチ。

            • パイプラインはどうしてるの?フルスクラッチ?

              • 例えばLTRを実行するにはランダムフォレストのようなアルゴリズムを使えると良いのだけど、ランダムフォレストはC++でスクラッチで書いてて、そのラッパーをpythonで書いてる。

                • あのな?パイプラインというのはデータを取ってくる部分のことでそれはフルスクラッチではやらないしデータベースの知識が必要なわけよ ランダムフォレストとか出てこないの

                  • お前の中ではそうなんだろう 俺は事実を述べているだけだ

                    • 俺の中というかMLやってる全員がパイプラインといったらデータとってくる部分だと認識してるしランダムフォレストなんか関係ないよ 言わなかったけどNLPとNNにxgboostあたりのフォレス...

                      • パイプラインと言ったらデータ収集から訓練までの一通りのことを言うよ で、じゃあデータはどうしているのかというと、クロールしてる あるコンテンツの検索エンジンを作っているの...

                        • 訓練はパイプラインと言わないしそもそもランダムフォレストがとか全く頓珍漢なこと言ってるんだから話にならないよ 君はやったことなくて知ってる言葉並べてるだけ

            • 言語は?

              • 主にpython。バックエンドはphp、java、perlも使われているけど、マイクロサービスで切り分けてる。

        • NLPで近似最近傍法というのは例えば何のグループを出してるの?近似最近傍法自体は単にMLだけどなぜそれがNLPなの?

    • Webシステムのバックエンドもとっ散らかってるけどどういうフレームワーク?Rest? RPC?どのようなAPIでどんなアーキテクチャなの?

    • あまりエンジニアの仕事としてセールス連中の仕事の自動化とかしないと思うけどまあ俺も駆け出しの頃少しはやったことあるけど どのようなテクノロジーを使ってどのような自動化を...

      • 例えばセールスの連中が「こういうアイテムを広告出稿したい」と言うわけだが、「こういう」の部分のプロトタイプを作って試行錯誤してGOサインが出た段階で自動化される

記事への反応(ブックマークコメント)

ログイン ユーザー登録
ようこそ ゲスト さん