はてなキーワード: AMDとは
未だに「謎の半導体メーカー」程度の認識の方になぜNVIDIAが時価総額世界4位なのかをあれこれ説明する必要があるので短めにメモ。半導体業界のすみっこの人間なので機械学習まわりの説明は適当です
・~1993年 AI冬の時代。エージェントシステムがさほど成果を挙げられなかったり。まだ半導体やメモリの性能は現代とくらべてはるかに劣り、現代のような大規模データを用いた統計的処理など考えられなかった。2006年のディープラーニングの発明まで実質的な停滞は続く。
・1995年 NVIDIAが最初のグラフィックアクセラレータ製品NV1を発売。
・1999年 NVIDIAがGeForce 256発売。GPUという名が初めて使われる。以降、NVIDIAはGPU業界1位の座を守り続ける。
・2006年 GPGPU向け開発基盤CUDAを発表。以降、その並列計算に特化した性能を大規模コンピューティングに活用しようという動きが続く。
・2006年 ディープラーニングの発明。のちのビッグデータブームに乗り、これまでよりはるかに高性能なAIを模索する動きが始まる(第3次AIブームのおこり)
・2006年 CPU業界2位のAMDがGPU業界2位のATIを買収、チップセットにGPUを統合することで事実上自社製品をNVIDIAと切り離す戦略に出る。CPU業界1位のインテルも、同じく自社CPUに自社製GPUを統合する動きを強める。NVIDIAはこれまでの主力だったGPUチップセット製品の販売を終了し、データセンター向けGPGPUのTeslaシリーズ、ゲーム用外付けGPUのGeForceシリーズ、ARM系CPUと自社GPUを統合したTegraシリーズの3製品に整理する。このうちTeslaシリーズが性能向上やマイクロアーキテクチャ変更を経て現代のAIサーバ製品に直接つながる。GeForceシリーズはゲーマー向け需要や暗号通貨マイニング向け需要も取り込み成長。Tegraシリーズは後継品がNintendoSwitchに採用される。
・2012年 ディープラーニングが画像認識コンテストで圧倒的な成績を収め、実質的な第3次AIブームが始まる。
・2017年 Transformerモデル発表。これまでのNN・DLと異なり並列化で性能を上げるのが容易=デカい計算機を使えばAIの性能が上がる時代に突入。
・2018年 IBMがNVIDIAと開発した「Summit」がスパコン世界ランキング1位の座を5年ぶりに中国から奪還。全計算のうち96%がGPUによって処理され、HPC(ハイパフォーマンスコンピューティング)におけるGPUの地位は決定的になる。NVIDIAの開発したCPU-GPU間の高速リンク「NVLink」が大規模に活用される。「Summit」は2020年に「富岳」にトップを奪われるまで1位を維持。
・2018~2021年 BERTやXLNet、GPT2など大規模言語モデルの幕開け。まだ研究者が使うレベル。
・2019年 NVIDIA CEOジェスン・ファン(革ジャンおぢ)が「ムーアの法則は終わった」と見解を表明。半導体のシングルスレッド性能の向上は限界に達し、チップレットを始めとした並列化・集積化アーキテクチャ勝負の時代に入る。
・2022年 NVIDIAがH100発表。Transformerモデルの学習・推論機能を大幅に強化したサーバ向けGPUで、もはや単体でもスパコンと呼べる性能を発揮する。H100はコアチップGH100をTSMC N4プロセスで製造、SK Hynix製HBMとともにTSMC CoWoSパッケージング技術で集積したパッケージ。※N4プロセスは最新のiPhone向けSoCで採用されたN3プロセスの1つ前の世代だが、サーバ/デスクトップ製品向けプロセスとモバイル製品向けプロセスはクロックや電流量が異なり、HPC向けはN4が最新と言ってよい。
・2022年 画像生成AIブーム。DALL-E2、Midjourney、Stable Diffusionなどが相次いで発表。
・2022年 ChatGPT発表。アクティブユーザ1億人達成に2カ月は史上最速。
・2023年 ChatGPT有料版公開。Microsoft Copilot、Google Bard(Gemini)など商用化への動きが相次ぐ。各企業がNVIDIA H100の大量調達に動く。
・2024年 NVIDIAが時価総額世界4位に到達。半導体メーカー売上ランキング世界1位達成(予定)。
こうして見るとNVIDIAにとっての転換点は「ディープラーニングの発明」「GPGPU向けプログラミング環境CUDAの発表」「チップセットの販売からコンピューティングユニットの販売に転換」という3つが同時に起こった2006年であると言えそう。以降、NVIDIAはゲーマー向け製品やモバイル向け製品を販売する裏で、CUDAによってGPGPUの独占を続け、仮装通貨マイニングやスパコンでの活躍と言ったホップステップを経て今回の大きな飛躍を成し遂げた、と綺麗にまとめられるだろう。
数年前は、TSP(Tensor Streaming Processor)と呼んでいたが、LPU(language processing unit)と名前を変えた?
数年前のチップをそのまま使い続けているか分からないが、同じならアーキテクチャは4年前のユーチューブを見るか、アスキーあたりの記事にある。
https://youtu.be/UNG70W8mKbA?si=9VFeopAiPAdn08i_
要は、コインパイラで変換が必要。なので提供されているLLMモデルが限られている。
PCIeボードが400万くらいらしいが、SRAMの容量が小さすぎて1ボードでは動かない。
DRAMのレイテンシがSRAMではないので早いのだ、という意見も見られてたが、
1チップのSRAM容量が小さすぎるので、チップチップ間、ボードボード間の通信レイテンシは必ずあるはず。
(数ヶ月前から性能上がっているのは、このあたりのチューニングのはず)
DRAMのレイテンシというが、これも今どきはレイテンシ気にしないように隠蔽するはず。
チームが小さすぎてハード作れなかった可能性もあるが・・・。DMACでチューニングしているか?
ボードにでかいDRAMが載せられるのであれば、そちらの方がボードボード間の通信時間より減るのでは?
GF使ったのは、おそらくAMD設計者が居たからでは。デザインルールどこ破れば性能でるかある程度わかってたとか。1GHzくらいなのは知見なしでやってるとそれくらいで上限くるのはそうだと思う。
チップの世代を更新するかはわからないが、兎にも角にも電力下げて、チップ大量に載せて、チップチップ間の通信時間を下げられるか。
surfaceはデザインはいいけど買ってはいけない。海外じゃ訴訟起こされたくらいだしデザイン尖り過ぎててすぐ壊れて良い印象ない
そもそもAMDのCPU使ってるくせに過去にはカーネル周りのトラブル起こしたり仮想周りでーみたいなこともあったりデザイン以外良い印象ない
iPadがおすすめだけど、脳死で使えるように規制が多いので、嫌ならAndroidタブレット使えばいいんじゃないかな
タブレットじゃなくて~なら、ワイはレッツノート信者なのでタブレットモードになるレッツノート推したい
https://panasonic.jp/cns/pc/products/qr4c/
レッツノートがクソみてーに高いのは日本の工場で作ってる(日本の雇用を守ってる)&丈夫(ADHDのワイくんが落としまくっても壊れない)だから
まじサステナブル
iPad Pro はめっちゃ高額化する予定みたいだから、今後は、iPad Air のデカいのとレッツのタブレットモードになるやつ買う予定
「サンタクロースなんて居ないんでしょ」
息子とこんなやり取りが10月頃にあった。
「クリスマスプレゼントはCPUが欲しい」
そう言われたのが今年の夏。
12/24の聖夜。子供が寝静まった後に、サンタさんがやってきてパソコンのCPUを交換してくれる。
我が家のサンタさんは他のPCパーツとの相性やバランス、価格やら消費電力を勉強した結果、クリスマスプレゼントはAMD RYZEN5 5600Gにすることにした。
そして、サンタさんは突破しなければならない以下3つの課題に直面することになった。
②CPUグリスの塗布
①ぶっつけ本番は怖いので、これだけは予め行うことにした。
F2キーを押しながらパソコンを起動するとマザーボードのBIOSという設定を弄る画面になる。
マザーボードのメーカーサイトからUSBに落としたデータを使って、BIOS画面上でアップデートしなければならない。
「マザボのBIOS更新しないとサンタさんがCPUくれないって」
少し苦しい理由だが、何とか言い包めて息子と一緒にBIOS更新を完了させた。
②やったことが無いので、自分のMacBook Proを分解して練習してみた。
構造は違うけど、CPUグリスについて少しでも経験を積んでおきたかった。
ついでに埃取りもやって、放熱の仕組みを知ることが出来た。
③後は当日の夜にサンタさんが頑張るだけ……だったが、息子が冒頭の内容を尋ねてきたのである。
いくらなんでも小学3年生。9歳の壁という現実を理解し始めるお年頃になると、流石にサンタクロースがCPUの交換なんてする訳が無いと気づくのは当たり前だ。
なので、遂にネタばらしをすることにした。
日々のストレスやCPU交換へのプレッシャーでイライラしてたってのもある。
「いいか?大人は嘘つきなんだよ。お前がいつか親になったとして、自分の子供にサンタなんて居ないって最初から言うのか?」
息子は「言わない」と言ってくれたので安心した。
仕事から帰宅してプレッシャーの中で食う寿司とケーキは美味くなかった。
疲れてそのままコタツ寝しまって23時、息子とCPU交換作業を開始する。
ちなみに翌日は7時出社なので6時起きだ。
息子は12/24生まれなので、クリスマスプレゼントとは別にパソコン工房から買ってきた3800円のPCケースもあった。
CPU交換の上にPCの再構築。僕は自分の首を絞める愚かな人間だ。
だが、先に結果を述べると、これは直ぐに頓挫した。
実は息子のPCはマザーボードも電源ユニットも小型で、PCケースに合わないことが判明。
ようやくCPUを取り外して、ピンを折らない様に慎重に入れ替え終えたのが深夜1時過ぎ。
その時に初めて知ったのが、CPU付属のリテールクーラーには最初からCPUグリスが付いているということ。
グリスアップぐらいはやらせてやろうと思っていたのに、結局、息子に任せれる様な作業は一つも見つからなかった。
ここで、妻が煩いので息子退場。残す組み立て作業はサンタさんの仕事になる。
途中、電源ユニットの接続箇所が分からなくなってしまって、ネットで不親切なマニュアルを何度も確認した。
深夜2時過ぎ、ようやく全てのケーブルを繋げ終わって起動確認。無事成功。
残りのネジ止めを残して意識を失う。
目覚めたのが朝6時前。
やっつけ仕事で残りのネジを締め、急いでシャワーを浴びて出社。
本当は動作確認として、しばらく起動したままで様子を見たかったのだけど、そんな暇が無かった。
もしも配線間違いとかで火事になってたらどうしよう……
僕は不安を抱えたまま働いた。
何となく、靴屋の主人が眠ってしまっている間に妖精さんが作業してくれるってグリム童話が頭に浮かんだ。
息子に、「サンタさんがPCを組み立ててくれたんだよ」と言ってみたら、「パパがやったんでしょ」と返される。
もうサンタクロースなんてどうでも良いや、と思った。
負けてるから終わってるんじゃなくて、勝負してるから終わってるんだよ
意味わかる?
冷蔵庫やテレビごときに(洗濯機とかいわゆる家電といわれるジャンルも含めて)で勝負しているから終わってるんだという事がわかってない
なぜか冷蔵庫で中国に勝て!洗濯機で中国に勝て!テレビで中国に勝て!みたいな思想をもってるんだよね
負けてるから終わってるんじゃなくて、勝負してるから終わってるんだよ
日本はGAFAMと戦うべきだったし生み出すべきだった
AdobeやAutodeskやoracleやSalesforceやnvidiaやAMDやqualcomやbroadcomと戦うべきだったし生み出すべきだった
なのに日本はコモディティー化する家電()なんかを日本の力の源泉だとかいって
日本のエリートをモノづくりに従事させ、無駄に突撃させて価値が上がらず無駄死にさせてたわけ
(まぁそれに疑問を持たない日本のエリートってまじ無能だなって思うけど)
ゼロ年代のネットでは、テレビなどが不振だったソニーを馬鹿にすると言ったらこれだった
モノづくりこそ日本の自慢であり、保険や銀行なんかやってるソニーはオワコンの象徴だった
でも結局そんなソニーがほかの家電メーカーにくらべて一番マシなんだよなw
映画とかゲームとか音楽とかのIPビジネスと保険や銀行なんかも手掛けて
モノづくりに執着しない体制を作ったソニーが結局一番マシだった
https://enterprise.watch.impress.co.jp/docs/news/168397.html
↓
2021年 日立金属を売却 トルコの家電メーカーアルチェリクと共同会社設立して家電海外部門を移管
↓
https://jp.reuters.com/article/hitachi-outlook-idJPKBN2UB2OO
驚くのははてブなんだよね
IT職が多そうなはてブがモノづくりに固執していることが不思議でたまらない
トランプ大統領がそうだけどホテル業のトランプはなぜか自動車産業にこだわってるよね
モノづくりがおっさん世代の良き時代の象徴であり思い出になってるというか
工場で男たちが汗水たらしてモノ作りする光景になんかマチズモめいた魅力があるのかもしれん
モノづくりこそ誇れる産業なんだと
ITにしてもやたらでかいスーパーコンピュータはニュースになるし話題になるけど
それで何が行われてるかは話題にならない
日本より先に地下鉄が通り、イタリア人が出稼ぎに行っていたほどのアルゼンチンだが
そんなアルゼンチンは運よく第一次世界大戦に巻き込まれなかったので
戦争で疲弊するヨーロッパ向けの農牧産品の輸出がとくによかったという
戦後、戦争を経験した国は工業が国力につながると嫌というほどわからせられたため、工業化にまい進したが
アルゼンチンは農牧産品こそ力の源泉だとして工業化を進めなかったため、世界の潮流から外れていくことになる
おいらのポンコツとうとうイカれちまった((c)RCサクセション)
一度電源モジュールのスイッチおOFFにしてONにしたら、もうマザボのLEDも光らなくなった。
電源モジュールのどこかを短絡させれば、単独で動作確認が出来るらしいが
ちょっと道具が無いと無理だなこれ。
電源モジュールが壊れてないかどうかは、明日近くの修理専門ショップで診てもらおう。
6年ほど使い倒したわけだし、電源かマザボかは分からんが、まあ寿命だとしても驚かない。
買い出しは土曜日。。。あ、三連休やん。せっかくだし新しいの組もうか?
グラボは最近RTX3060に替えたばかりなんで据え置きとして。
今までずっと、こだわりがあるわけでもないのに何故かAMDのCPUばかりで組んでたが、初のIntel行くか!?
夢がひろがりんぐ。
ワイが理解出来ないのはApple信者では無いエンジニアなのにドヤ顔でMac使ってるヤツと
カーネルエンジニアやデストリでもWindows使ってるのにドヤ顔でデスクトップLinux使ってるヤツ
デスクトップ環境周りのコミッターとか自作OSやドライバ作ってるとかなら納得だけど
どーせ単なるユーザー利用でしょ?
https://anond.hatelabo.jp/20220910173047#
https://b.hatena.ne.jp/entry/s/anond.hatelabo.jp/20220910173047
アンサー幾つか
あとこれ↓
○組織名は差し控えますが大学のお話です