はてなキーワード: GPUとは
[NVIDIA、1パッケージに2ダイの新型GPU「Blackwell」。AI性能は学習4倍、推論30倍に - PC Watch](https://pc.watch.impress.co.jp/docs/news/1577301.html)
発表されたBlackwell(製品名はNVIDIA B200 Tensor Core GPU)は巨大なダイ2つが1パッケージに封入されており、2つのダイは10TB/sのNV-HBIで接続され、1つのGPUとして動作する。
(中略)
2基のB200と1基のNVIDIA Arm CPU(Grace)を1モジュールにした「GB200」も用意。GB200とH100と比較すると、AI学習時の性能が4倍、推論時の性能は30倍になっており、電力効率は25倍も改善するとNVIDIAは説明している。
B200と同時に、2023年のCOMPUTEX 23で発表したGrace Hopperこと「NVIDIA GH200 Superchip」(以下GH200)の後継となる、Grace Blackwellこと「NVIDIA GB200 Superchip」(以下GB200)を発表している。GH200では、Arm CPUのGrace(Neoverse V2 CPU)が1つ、Hopper(H100)が1つを1モジュールとして提供していたが、GB200ではGraceが1つ、Blackwell(B200)が2つを1モジュールとして提供しており、CPUが1つなのは変わらないが、GPUが2つになっている点が大きな強化点となる。だが、NVIDIAによればそうした強化で、GB200の性能はH100と比較してAI学習時には4倍、AI推論時には30倍、電力効率の観点では25倍になっているという。
パソコンオタクを自称してた頃は、自作でフルタワーデスクトップ組んで、
FreeBSDとWindowsのデュアルブートにして、OSもガチガチにカスタマイズしてたんだけど、
再セットアップの度に環境を構築し直すのが段々とめんどくさくなったし、
Linux系のOSに精通したってサーバーでも触らない限りは実用性はない。
今は自作よりもBTOショップの方が安いし、相性問題のリスクなくメモリとGPUを詰め込めるので楽。
設定をクラウドで保存してくれるアプリも増えたから、設定のバックアップも必要ないことが多く、
ドライバもローカルで保存しておけば、とりあえず使える環境にするには十分。
配置場所に自由が効くアプリなら外付けSSDに逃すことで再インストールも不要。
BTOショップで買ったWindowsオンリーのマシンをカスタマイズなしでゴリゴリ使って、
調子が悪くなってきたら、OSをクリーンインストールしてデフォルト設定で使うのが結局一番楽。
過程を楽しまず、手軽に結果だけを得ようとする姿勢はもはやオタクとも言えず、
私は少しだけパソコンに詳しいだけのおじさんになってしまった。
余計な金がかからず、情報を積極的に収集する必要もなく気楽だが、人生としての面白みはないような気がする。
30代男性です。
うああああああ、SNSでマウント取りまくって自慢しまくりてええええええええええええぐがあああああああああああああ
もちろん資産、億超えるのを目指してはいたけれども。本当に超えるとはなぁ。
私はビットコインを続けるよー😆
上下激しいしから価格帯がいつまでも持たないことは痛いほど痛感してるでな。
40歳までに資産1億円作るって目標で生きてたんだけど、本当に実現出来てしまった。
これが富裕層の見る景色か。正直3000万超えたあたりからあんまり変わらんな。
人間関係のしがらみとかメンタル考えて仕事もやめられなかったしな。そうFIRE出来なかったんだ。
俺は仕事を辞めるとメンタルが崩壊する。仕事を通じてしか人間関係がないせいで、仕事をやめられないんだ。会社に掛け合って仕事のインセンティブ下げたりとかパート契約に直そうかしら?
というのもなんかもったいないよな。せっかく正社員としての恩恵受けてるしな。まぁ仕事はやめられないよな。
さて、1億超えたら今の5万円ワンルームから引っ越して10万円ワンルームでゆったり暮らそうと思ってたんだけどな。どうしようか。
この家、数ヶ月前に引っ越したばかりなんやが、あんまり頻繁に引っ越ししたらメンタルおかしくなりそうでやだな。
金がいくらあっても、不安や恐怖はついて回るよな。特にメンタルなんて脳の炎症の問題だし、薬物投与でもしないと助からんだろう。
そしてこのパラノイアじみた強迫観念こそが、1億円突破の執念をドライブしてただろうし、世の中何が何につながるのかよくわからんですね。
とにかく今日は、一つの達成感に浸って、バンホーテン(業務用400g)ココアをゆったり飲むか。
LLM用の数百万円するGPUくらいしか欲しいのないな。ドラム式洗濯機は部屋が狭すぎて電気屋さんが無理って言ってたから1.6万の中古縦型洗濯機をメルカリで買ったでな。
とにかく、なんか祝うか。でも今日は昼飯に唐揚げ弁当食べたせいでもうお腹いっぱいなんだよな。
こんな喜ばしい出来事があるってわかってたら、お昼ガッツリ食って血糖値スパイクで気絶昼寝してなかったのに。
というか昼寝して起きたら1億突破してたでな。
なんか歳を重ねて思うことは、人生真剣に生きるだけ損な気がする。でも真剣に全財産ビットコにぶち込むという狂気をしたのは過去の俺自身だったな。
人生を舐めてかかってるからこそやったのでは?みたいな気もしている。
なんというか、よくわからんですね。
実際の富裕層:🐔🍱🤪☕
3000万超えたあたりから見える景色がってことだけども要は俺はミニマルな生活をしてて生活費が相当圧縮されてるでな。
みんな大好きトリニティスタディによれば、資産4%取り崩しなら長期で持つわけで、つまり3000万もあれば月に10万ずつ取り崩すことが可能だでな。
月10万あれば俺は生きてゆける。ということだ。
とはちょっと前まで思ってたけど、今円安やろ。月10まんはさすがの俺でも難しいよな。まぁ実際資産1億超えてるし、俺の手取りよりもこの1億が生み出す資産の方が高いでな。
r>gですわ。
1億ためておいてなんだけどこんな資本主義がいつまでも続くとは思えんでな。
なんにせよ!うらやましいだろーーーーうぇええええええええええい🤟😎🎉
オンラインマルチプレイが無料
APEX LEGENDSやFORTNITEなどの無料ゲームはオンラインマルチプレイも追加料金なしでで遊ぶことができます。
つまり、「APEXだけしか遊ばない!」という人はXboxの筐体を購入をすれば後は無料で遊び放題です。
プレイステーションやニンテンドースイッチなどはオンラインマルチプレイを楽しむために月額料金を支払う必要があるため、完全に無料で遊べるのは非常に嬉しい仕様ですね。
性能はPS5より高い
単純にカタログスペックを比較するとXbox SeriesXはCPU性能、GPU性能ともにPS5よりも高いです。
ただしその差は僅かで両者とも拮抗しているため、体感できるほどの差は無いかもしれません。
あくまで演算処理系のスペックで比較した場合はXboxの方が上です。
SeriesXとSのラインナップがある
PS5は最上位機種のみのラインナップなのに対し、Xboxは廉価版のSeries Sのラインナップがあります。
予算に限りがある場合や4Kモニターが無い、あるいは4Kモニターの購入予定が無い方にとってはより安いSeries Sを購入するという選択肢もあります。
なお、PS5もPS4のようにPRO版が発売される可能性もあるため、その場合は現行機が廉価版になると思います。
魅力的なサブスクリプション
プレイステーションのサブスクは最新のゲームは毎月2タイトルしか遊べないのに対し、Xboxのサブスクは最新のゲームも遊び放題です。
プレステのように魅力的な独自タイトルは少ないものの、GTA5やシティーズスカイライン、日本のゲームではペルソナ3・4・5のリメイク版まで遊べてしまいます。
なるほどー。
今までだと命令やデータはキャッシュに乗るのが前提だったが、AIだと、AIモデルがGB単位なのでキャッシュにそもそも乗らない。
いかにキャッシュヒットさせるか、DRAMとのレイテンシを隠蔽するかだったが、キャッシュに乗らないので、メモリ帯域勝負になる。
GPUが汎用性があるので使われているが、ゲームだとテクスチャをVRAMに乗せておいて、演算した結果はモニター側へ出力すればよく、
なんだかんだ帯域は足りていたが、AIだとチップチップ間の帯域が足りない。
ニューラルネットワークの接続自体をFPGA的に切り替えるのも手だと思うがモデルが大きすぎる。
23時になってもまったく、明かりが消えない
学閥の特徴
anond.hatelabo.jp/20160611224524
anond.hatelabo.jp/20201205002502
六歳だとそれが少し増え、
七歳もかなりいるが、
そしてその労働日は
しばしば自らその活動に活発に参加した。
bit.ly/3kpoLD4
児童労働の深刻さを認知した英国政府は、新たな法律を制定した。
3.12歳以下の児童は、炭鉱、造船所、製錬所に送ってはならない。
tinyurl.com/jidou-roudou
牛馬にも劣る。
しかし社交季節にはしばしば
bit.ly/3c7VDC5
●●●の娘「入社してしばらくは暇でした」
役員の人数最多は東●
tinyurl.com/shusse
tinyurl.com/rokuon-shiteita
tinyurl.com/mukenjigoku
コ●ラ● 9:5 あなた方はどこであれ、多神教徒を見つけ次第●しなさい
コ●ラ● 47:4 あなた方が不信心な人とまみえるときは、かれらの首を●ちなさい。
https://twitter.com/egodissolution1/status/1414814142255439875
tinyurl.com/tabunkakyousei
庁舎を後にしたのは午前2時半
bit.ly/3L8WNZK
「運が悪いと、朝5時や朝6時。場合によっては朝7時」
bit.ly/3M1abAf
答弁レク「朝4時からも」
tinyurl.com/gozen-yoji
bit.ly/3iDx9A8
常勤医で8.2%
bit.ly/3M1lxE9
月の休みが
3回以下の医師が
32.9%
bit.ly/3PefM88
100連勤・
「シンプルな」AIは、銀行のマネージャーの融資決定を95%以上の精度で予測
www.unite.ai/simple-ai-can-anticipate-bank-managers-loan-decisions-to-over-95-accuracy/
71%のケースにおいて即決で融資を実行
bit.ly/3NbOQUK
だいたい平均で
夜中3時ぐらいまで仕事するじゃないですか
bit.ly/39aQDuv
多分200連勤ぐらいしたりとか
50人いて一人ぐらいしか5年後には残ってない
bit.ly/3wf8rg9
bit.ly/3FyoaLq
銀行員 同期100人いた場合50才で銀行本体残るのは1人の例も
bit.ly/3yt3Eu0
出向
年収は半減
bit.ly/3whuTVY
bit.ly/3vHDsc6
bit.ly/3LYrEt0
bit.ly/3M1sSUd
ゴ●ル●マ●だけでなく他の投資銀行も同じ
bit.ly/37y18aV
9割の取引が、コンピューターによる高速では無い物を含めた自動取引
bit.ly/3N9jKNL
s.nikkei.com/3M5nFLf
amzn.to/3Pbfvmz
6年目以降は入ってこない?
bit.ly/3krr3SN
他にもスーツ、お節、家電、食料、ケータイ、弁当等、ありとあらゆるものを年中購入させられます
多分歯切れの悪い反応をすると思います
bit.ly/3v3WZ7D
本社勤務の時には、
bit.ly/3S30Fis
朝8時には会社にいる?
忙しいと22時まで残業?
bit.ly/3nwjrS6
「少しでもミスをしたら“東大出の自分は優秀だと思っているのか?現場ではそんなの何の役にも立たないぞ”と
bit.ly/3spWKCc
bit.ly/3wbfA0I
朝3時まで狭いプロジェクトルームで作業して、次の日は6時から7時の間に出勤が当たり前
当時同期で入社した200人近い中途の仲間は誰もこの会社に残っていません
bit.ly/3wa5tLb
bit.ly/3yA1mcy
良くて3時か4時くらい、下手すると6時くらいに終わる
夜中1時、2時まで、朝はなぜか7時集合
同期は全員辞めてると思う
bit.ly/3l05Z86
ttps://bit.ly/3wHGJHp
三●物●が新社長を発表!私大出身者の社長”ゼロ”の壁は壊せたか?
ttps://bit.ly/3i2gSFU
ttps://bit.ly/2U7ojOR
帝大65円 早慶55円
ttps://bit.ly/2ryVtbO
7人分のハンコ
bit.ly/2Gbk4wd
自分で大きな決定できるようになるまで、
うまくいっても制度的に
tinyurl.com/nijyuunen
商社の何が辛いって、
仕事量が多いとか、
飲み会が多いとかではなく、
基本決定権が無い点
商流的に真ん中にいるので
無論、若手に社内の決裁権はない
bit.ly/3bXmzkn
長いけど読んでくれ
あなたに降りかかってくる
誰でもできるような仕事を大量に任される
tinyurl.com/shitoite
与えられた仕事を
bit.ly/2uwinCk
ttps://bit.ly/3ap8GtC
tinyurl.com/section-chief
社内政治というのは政治で守られている人は「政治はない」と言い、政治で不利益をこうむった人は「政治がある」と言うので前者の人の言うことだけを聞いて判断できない
bit.ly/2ruvbHw
bit.ly/38lPel6
推薦・内部組のほうが一般入試組より成績がよくなるからくりは 一般入試組の上澄みは仮面浪人して別の大学行くからと聞いてなるほどと思った
tinyurl.com/kamenronin
tinyurl.com/ryuunen
早稲田大学広報課「入試形態別で入学者のGPAを調査すると、本学の学部全体で最も成績が良い層はAO型入試・指定校推薦入試で入学した学生である」
何らかの選択過程を通過した人・物・事のみを基準として判断を行い、その結果には該当しない人・物・事が見えなくなることである。
「無事に生還した戦闘機」という時点で、既にバイアスがかかっている――従って「無事に帰ることができなかった戦闘機」という、見えないサンプルも考慮する必要がある
tinyurl.com/seikanshita-sentouki
爆撃機の装甲を厚くすべきなのは「対空砲火を受けた場所」と「受けていない場所」のどちらか?
なぜ、200万人ものサンプルを集めたダイジェスト社が予想を外し、たった3000人のサンプルでギャラップ社は的中できたのでしょうか?
学力が低いのに「早稲田」に入学できてしまう学生も…大学受験を“不公平なシステム”にしてしまった「指定校推薦枠」の功罪
bunshun.jp/articles/-/69450
「早稲田政経は、短期間に簡単にAO合格可能なことを正直に暴露した勇気ある著者」
【偏差値40の三流短大卒フリーター、25歳で早大に入学する!】
ttps://www.amazon.co.jp/dp/483871730X
受験情報会社「慶大法学部は90年代に指定校推薦・AO入試の枠を広げた。一般入試枠が狭まったため合格ラインが上がり、偏差値も上昇したのです」
tinyurl.com/suisennado
日米の組織には大きな差がなかったのですが、ものすごく大きな差が出たのは
「信賞必罰」
ttps://bit.ly/2wyebne
tinyurl.com/zuiikoyou
不適切な人事は組織の敗北につながる■勝てない提督や卑怯な司令官をすぐさま更迭した米軍
ttps://bit.ly/39EBL2Y
組織には、
全体最適よりも、
部分最適・内集団最適・派閥最適・学閥最適を優先する乱源が存在する!
信賞必罰!
乱源には、不寛容であらねばならない!
ttps://bit.ly/1WOeC4B
「もし社会が無制限に寛容であるならば、その社会は最終的には不寛容な人々によって寛容性が奪われるか、寛容性は破壊される」
「寛容な社会を維持するためには、寛容な社会は不寛容に不寛容であらねばならない」
tinyurl.com/paradoxoftolerance
ttps://bit.ly/2CPjeTD
内集団ひいき
bit.ly/2wSF71B
自分も相手も互いに同じグループに属していることが周知されているときには、内集団ひいき的な行動が観察されますが、
自分は相手が同じグループであることを知っていても、相手が自分のことを同じグループの一員かどうかわからない状態では、内集団ひいきは観察されなくなります。
つまり、自分と同じグループの人に対してひいきするのは、見返りが期待できると思うからであって、同胞に心から同情するせいではないということです。
cleartetsugaku.ame-zaiku.com/shakai/saishousyuudanjikken.html
未だに「謎の半導体メーカー」程度の認識の方になぜNVIDIAが時価総額世界4位なのかをあれこれ説明する必要があるので短めにメモ。半導体業界のすみっこの人間なので機械学習まわりの説明は適当です
・~1993年 AI冬の時代。エージェントシステムがさほど成果を挙げられなかったり。まだ半導体やメモリの性能は現代とくらべてはるかに劣り、現代のような大規模データを用いた統計的処理など考えられなかった。2006年のディープラーニングの発明まで実質的な停滞は続く。
・1995年 NVIDIAが最初のグラフィックアクセラレータ製品NV1を発売。
・1999年 NVIDIAがGeForce 256発売。GPUという名が初めて使われる。以降、NVIDIAはGPU業界1位の座を守り続ける。
・2006年 GPGPU向け開発基盤CUDAを発表。以降、その並列計算に特化した性能を大規模コンピューティングに活用しようという動きが続く。
・2006年 ディープラーニングの発明。のちのビッグデータブームに乗り、これまでよりはるかに高性能なAIを模索する動きが始まる(第3次AIブームのおこり)
・2006年 CPU業界2位のAMDがGPU業界2位のATIを買収、チップセットにGPUを統合することで事実上自社製品をNVIDIAと切り離す戦略に出る。CPU業界1位のインテルも、同じく自社CPUに自社製GPUを統合する動きを強める。NVIDIAはこれまでの主力だったGPUチップセット製品の販売を終了し、データセンター向けGPGPUのTeslaシリーズ、ゲーム用外付けGPUのGeForceシリーズ、ARM系CPUと自社GPUを統合したTegraシリーズの3製品に整理する。このうちTeslaシリーズが性能向上やマイクロアーキテクチャ変更を経て現代のAIサーバ製品に直接つながる。GeForceシリーズはゲーマー向け需要や暗号通貨マイニング向け需要も取り込み成長。Tegraシリーズは後継品がNintendoSwitchに採用される。
・2012年 ディープラーニングが画像認識コンテストで圧倒的な成績を収め、実質的な第3次AIブームが始まる。
・2017年 Transformerモデル発表。これまでのNN・DLと異なり並列化で性能を上げるのが容易=デカい計算機を使えばAIの性能が上がる時代に突入。
・2018年 IBMがNVIDIAと開発した「Summit」がスパコン世界ランキング1位の座を5年ぶりに中国から奪還。全計算のうち96%がGPUによって処理され、HPC(ハイパフォーマンスコンピューティング)におけるGPUの地位は決定的になる。NVIDIAの開発したCPU-GPU間の高速リンク「NVLink」が大規模に活用される。「Summit」は2020年に「富岳」にトップを奪われるまで1位を維持。
・2018~2021年 BERTやXLNet、GPT2など大規模言語モデルの幕開け。まだ研究者が使うレベル。
・2019年 NVIDIA CEOジェスン・ファン(革ジャンおぢ)が「ムーアの法則は終わった」と見解を表明。半導体のシングルスレッド性能の向上は限界に達し、チップレットを始めとした並列化・集積化アーキテクチャ勝負の時代に入る。
・2022年 NVIDIAがH100発表。Transformerモデルの学習・推論機能を大幅に強化したサーバ向けGPUで、もはや単体でもスパコンと呼べる性能を発揮する。H100はコアチップGH100をTSMC N4プロセスで製造、SK Hynix製HBMとともにTSMC CoWoSパッケージング技術で集積したパッケージ。※N4プロセスは最新のiPhone向けSoCで採用されたN3プロセスの1つ前の世代だが、サーバ/デスクトップ製品向けプロセスとモバイル製品向けプロセスはクロックや電流量が異なり、HPC向けはN4が最新と言ってよい。
・2022年 画像生成AIブーム。DALL-E2、Midjourney、Stable Diffusionなどが相次いで発表。
・2022年 ChatGPT発表。アクティブユーザ1億人達成に2カ月は史上最速。
・2023年 ChatGPT有料版公開。Microsoft Copilot、Google Bard(Gemini)など商用化への動きが相次ぐ。各企業がNVIDIA H100の大量調達に動く。
・2024年 NVIDIAが時価総額世界4位に到達。半導体メーカー売上ランキング世界1位達成(予定)。
こうして見るとNVIDIAにとっての転換点は「ディープラーニングの発明」「GPGPU向けプログラミング環境CUDAの発表」「チップセットの販売からコンピューティングユニットの販売に転換」という3つが同時に起こった2006年であると言えそう。以降、NVIDIAはゲーマー向け製品やモバイル向け製品を販売する裏で、CUDAによってGPGPUの独占を続け、仮装通貨マイニングやスパコンでの活躍と言ったホップステップを経て今回の大きな飛躍を成し遂げた、と綺麗にまとめられるだろう。