transformers/main/ja/_app/immutable/nodes/111.1dcb4730.js

import{s as Fe,n as ze,o as De}from"../chunks/scheduler.9bc65507.js";import{S as Oe,i as qe,g as p,s,r as U,A as Ke,h as M,f as l,c as i,j as ge,u as w,x as a,k as Ye,y as tl,a as n,v as C,d as y,t as m,w as T}from"../chunks/index.707bf1b6.js";import{C as Ct}from"../chunks/CodeBlock.54a9f38d.js";import{H as yt,E as el}from"../chunks/EditOnGithub.922df6ba.js";function ll(Ue){let J,mt,Ut,Tt,f,Jt,o,we='モデルのトレーニングおよび推論に使用するハードウェアは、パフォーマンスに大きな影響を与えることがあります。GPUについて詳しく知りたい場合は、Tim Dettmerの優れた<a href="https://timdettmers.com/2020/09/07/which-gpu-for-deep-learning/" rel="nofollow">ブログ記事</a>をチェックしてみてください。',ft,d,Ce="GPUセットアップの実用的なアドバイスをいくつか見てみましょう。",ot,r,dt,u,ye="より大きなモデルをトレーニングする場合、基本的には以下の3つのオプションがあります：",rt,I,me='<li>より大きなGPU</li> <li>より多くのGPU</li> <li>より多くのCPUおよびNVMe（<a href="main_classes/deepspeed#nvme-support">DeepSpeed-Infinity</a>によるオフロード）</li>',ut,j,Te="まず、単一のGPUを使用する場合から始めましょう。",It,c,jt,b,Je="高価なハイエンドGPUを購入した場合、正しい電力供給と十分な冷却を提供することが重要です。",ct,x,fe="<strong>電力</strong>：",bt,v,oe="一部の高級コンシューマGPUカードには、2つまたは3つのPCI-E 8ピン電源ソケットがあります。カードにあるソケットの数だけ、独立した12V PCI-E 8ピンケーブルが接続されていることを確認してください。同じケーブルの一端にある2つの分岐（またはピッグテールケーブルとしても知られています）を使用しないでください。つまり、GPUに2つのソケットがある場合、PSUからカードに向けて2つのPCI-E 8ピンケーブルを使用し、1つのケーブルの端に2つのPCI-E 8ピンコネクタがあるものは使用しないでください！そうしないと、カードからのパフォーマンスを十分に引き出すことができません。",xt,h,de="各PCI-E 8ピン電源ケーブルは、PSU側の12Vレールに接続する必要があり、最大で150Wの電力を供給できます。",vt,P,re="一部のカードはPCI-E 12ピンコネクタを使用することがあり、これらは最大で500-600Wの電力を供給できます。",ht,B,ue="低価格帯のカードは6ピンコネクタを使用することがあり、最大で75Wの電力を供給します。",Pt,_,Ie="さらに、カードが必要とする安定した電圧を提供する高品質な電源ユニット（PSU）を使用する必要があります。",Bt,N,je="もちろん、PSUにはカードを駆動するために十分な未使用の電力が必要です。",_t,k,ce="<strong>冷却</strong>：",Nt,G,be="GPUが過熱すると、スロットリングが開始され、フルパフォーマンスを提供しなくなり、過熱しすぎるとシャットダウンすることさえあります。",kt,V,xe="GPUが重要な負荷の下でどのような温度を目指すべきかを正確に示すことは難しいですが、おそらく+80℃未満であれば良いでしょうが、それより低い方が良いです - おそらく70-75℃が優れた範囲でしょう。スロットリングの開始温度はおそらく84-90℃のあたりからでしょう。スロットリングによるパフォーマンスの低下以外にも、長時間にわたる非常に高い温度はGPUの寿命を短縮する可能性があります。",Gt,$,ve="次に、複数のGPUを持つ際に最も重要な側面の一つである接続について詳しく見てみましょう。",Vt,A,$t,E,he="複数のGPUを使用する場合、カードの相互接続方法はトータルのトレーニング時間に大きな影響を与える可能性があります。GPUが同じ物理ノードにある場合、次のように実行できます：",At,Z,Et,S,Pe="もちろん、GPUがどのように相互接続されているかについて説明します。デュアルGPUを搭載し、NVLinkで接続されているマシンでは、おそらく以下のような情報が表示されるでしょう：",Zt,L,St,X,Be="別のNVLinkなしのマシンでは、以下のような状況が発生するかもしれません：",Lt,R,Xt,H,_e="こちらが伝説です：",Rt,W,Ht,Q,Ne="最初のレポートである <code>NV2</code> では、GPUは2つのNVLinkで接続されており、2番目のレポートである <code>PHB</code> では、典型的な消費者向けのPCIe+Bridgeセットアップが行われています。",Wt,g,ke="あなたのセットアップでどの種類の接続性があるかを確認してください。これらの接続方法のいくつかはカード間の通信を速くすることができます（例：NVLink）、他のものは遅くすることができます（例：PHB）。",Qt,Y,Ge="使用されるスケーラビリティソリューションの種類に応じて、接続速度は大きな影響を与えることも、小さな影響を与えることもあります。GPUがあまり頻繁に同期する必要がない場合、DDPのように、遅い接続の影響はそれほど重要ではありません。しかし、GPUが頻繁にメッセージを送信する必要がある場合、ZeRO-DPのように、高速の接続がより高速なトレーニングを実現するために非常に重要になります。",gt,F,Yt,z,Ve='<a href="https://en.wikipedia.org/wiki/NVLink" rel="nofollow">NVLink</a> は、Nvidiaによって開発された有線のシリアルマルチレーンの近距離通信リンクです。',Ft,D,$e='各新世代では、より高速な帯域幅が提供されます。たとえば、<a href="https://www.nvidia.com/content/dam/en-zz/Solutions/geforce/ampere/pdf/NVIDIA-ampere-GA102-GPU-Architecture-Whitepaper-V1.pdf" rel="nofollow">Nvidia Ampere GA102 GPU Architecture</a> からの引用です。',zt,O,Ae=`<p>Third-Generation NVLink®
GA102 GPUs utilize NVIDIA’s third-generation NVLink interface, which includes four x4 links,
with each link providing 14.0625 GB/sec bandwidth in each direction between two GPUs. Four
links provide 56.25 GB/sec bandwidth in each direction, and 112.5 GB/sec total bandwidth
between two GPUs. Two RTX 3090 GPUs can be connected together for SLI using NVLink.
(Note that 3-Way and 4-Way SLI configurations are not supported.)</p>`,Dt,q,Ee="したがって、<code>nvidia-smi topo -m</code> の出力の <code>NVX</code> レポートで取得する <code>X</code> が高いほど良いです。世代はあなたのGPUアーキテクチャに依存します。",Ot,K,Ze="小さなサンプルのwikitextを使用したgpt2言語モデルのトレーニングの実行を比較しましょう。",qt,tt,Se="結果は次のとおりです：",Kt,et,Le="（ここに結果を挿入）",te,lt,Xe="上記のテキストの日本語訳を提供しました。Markdownコードとしてフォーマットしました。どんな他の質問があれば、お気軽にお知らせください！",ee,nt,Re='<thead><tr><th>NVlink</th> <th align="right">Time</th></tr></thead> <tbody><tr><td>Y</td> <td align="right">101s</td></tr> <tr><td>N</td> <td align="right">131s</td></tr></tbody>',le,st,He="NVLinkを使用すると、トレーニングが約23％速く完了することがわかります。2番目のベンチマークでは、<code>NCCL_P2P_DISABLE=1</code>を使用して、GPUがNVLinkを使用しないように指示しています。",ne,it,We="以下は、完全なベンチマークコードと出力です：",se,pt,ie,Mt,Qe=`Hardware: 2x TITAN RTX 24GB each + NVlink with 2 NVLinks (<code>NV2</code> in <code>nvidia-smi topo -m</code>)
Software: <code>pytorch-1.8-to-be</code> + <code>cuda-11.0</code> / <code>transformers==4.3.0.dev0</code>`,pe,at,Me,wt,ae;return f=new yt({props:{title:"Custom hardware for training",local:"custom-hardware-for-training",headingTag:"h1"}}),r=new yt({props:{title:"GPU",local:"gpu",headingTag:"h2"}}),c=new yt({props:{title:"Power and Cooling",local:"power-and-cooling",headingTag:"h3"}}),A=new yt({props:{title:"Multi-GPU Connectivity",local:"multi-gpu-connectivity",headingTag:"h3"}}),Z=new Ct({props:{code:"bnZpZGlhLXNtaSUyMHRvcG8lMjAtbQ==",highlighted:"nvidia-smi topo -m",wrap:!1}}),L=new Ct({props:{code:"JTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwR1BVMCUyMCUyMCUyMCUyMEdQVTElMjAlMjAlMjAlMjBDUFUlMjBBZmZpbml0eSUyMCUyMCUyMCUyME5VTUElMjBBZmZpbml0eSUwQUdQVTAlMjAlMjAlMjAlMjAlMjBYJTIwJTIwJTIwJTIwJTIwJTIwTlYyJTIwJTIwJTIwJTIwJTIwMC0yMyUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyME4lMkZBJTBBR1BVMSUyMCUyMCUyMCUyME5WMiUyMCUyMCUyMCUyMCUyMCUyMFglMjAlMjAlMjAlMjAlMjAlMjAwLTIzJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwTiUyRkE=",highlighted:`        <span class="hljs-attribute">GPU0</span>    GPU1    CPU Affinity    NUMA Affinity
<span class="hljs-attribute">GPU0</span>     X      NV2     <span class="hljs-number">0</span>-<span class="hljs-number">23</span>            N/A
<span class="hljs-attribute">GPU1</span>    NV2      X      <span class="hljs-number">0</span>-<span class="hljs-number">23</span>            N/A`,wrap:!1}}),R=new Ct({props:{code:"JTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwR1BVMCUyMCUyMCUyMCUyMEdQVTElMjAlMjAlMjAlMjBDUFUlMjBBZmZpbml0eSUyMCUyMCUyMCUyME5VTUElMjBBZmZpbml0eSUwQUdQVTAlMjAlMjAlMjAlMjAlMjBYJTIwJTIwJTIwJTIwJTIwJTIwUEhCJTIwJTIwJTIwJTIwJTIwMC0xMSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyME4lMkZBJTBBR1BVMSUyMCUyMCUyMCUyMFBIQiUyMCUyMCUyMCUyMCUyMCUyMFglMjAlMjAlMjAlMjAlMjAlMjAwLTExJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwTiUyRkE=",highlighted:`        <span class="hljs-attribute">GPU0</span>    GPU1    CPU Affinity    NUMA Affinity
<span class="hljs-attribute">GPU0</span>     X      PHB     <span class="hljs-number">0</span>-<span class="hljs-number">11</span>            N/A
<span class="hljs-attribute">GPU1</span>    PHB      X      <span class="hljs-number">0</span>-<span class="hljs-number">11</span>            N/A`,wrap:!1}}),W=new Ct({props:{code:"JTIwJTIwWCUyMCUyMCUyMCUyMCUzRCUyMFNlbGYlMEElMjAlMjBTWVMlMjAlMjAlM0QlMjBDb25uZWN0aW9uJTIwdHJhdmVyc2luZyUyMFBDSWUlMjBhcyUyMHdlbGwlMjBhcyUyMHRoZSUyMFNNUCUyMGludGVyY29ubmVjdCUyMGJldHdlZW4lMjBOVU1BJTIwbm9kZXMlMjAoZS5nLiUyQyUyMFFQSSUyRlVQSSklMEElMjAlMjBOT0RFJTIwJTNEJTIwQ29ubmVjdGlvbiUyMHRyYXZlcnNpbmclMjBQQ0llJTIwYXMlMjB3ZWxsJTIwYXMlMjB0aGUlMjBpbnRlcmNvbm5lY3QlMjBiZXR3ZWVuJTIwUENJZSUyMEhvc3QlMjBCcmlkZ2VzJTIwd2l0aGluJTIwYSUyME5VTUElMjBub2RlJTBBJTIwJTIwUEhCJTIwJTIwJTNEJTIwQ29ubmVjdGlvbiUyMHRyYXZlcnNpbmclMjBQQ0llJTIwYXMlMjB3ZWxsJTIwYXMlMjBhJTIwUENJZSUyMEhvc3QlMjBCcmlkZ2UlMjAodHlwaWNhbGx5JTIwdGhlJTIwQ1BVKSUwQSUyMCUyMFBYQiUyMCUyMCUzRCUyMENvbm5lY3Rpb24lMjB0cmF2ZXJzaW5nJTIwbXVsdGlwbGUlMjBQQ0llJTIwYnJpZGdlcyUyMCh3aXRob3V0JTIwdHJhdmVyc2luZyUyMHRoZSUyMFBDSWUlMjBIb3N0JTIwQnJpZGdlKSUwQSUyMCUyMFBJWCUyMCUyMCUzRCUyMENvbm5lY3Rpb24lMjB0cmF2ZXJzaW5nJTIwYXQlMjBtb3N0JTIwYSUyMHNpbmdsZSUyMFBDSWUlMjBicmlkZ2UlMEElMjAlMjBOViUyMyUyMCUyMCUzRCUyMENvbm5lY3Rpb24lMjB0cmF2ZXJzaW5nJTIwYSUyMGJvbmRlZCUyMHNldCUyMG9mJTIwJTIzJTIwTlZMaW5rcw==",highlighted:`  X    = Self
  SYS  = Connection traversing PCIe <span class="hljs-keyword">as</span> well <span class="hljs-keyword">as</span> <span class="hljs-keyword">the</span> SMP interconnect between NUMA nodes (e.g., QPI/UPI)
  NODE = Connection traversing PCIe <span class="hljs-keyword">as</span> well <span class="hljs-keyword">as</span> <span class="hljs-keyword">the</span> interconnect between PCIe Host Bridges <span class="hljs-keyword">within</span> <span class="hljs-keyword">a</span> NUMA node
  PHB  = Connection traversing PCIe <span class="hljs-keyword">as</span> well <span class="hljs-keyword">as</span> <span class="hljs-keyword">a</span> PCIe Host Bridge (typically <span class="hljs-keyword">the</span> CPU)
  PXB  = Connection traversing multiple PCIe bridges (<span class="hljs-keyword">without</span> traversing <span class="hljs-keyword">the</span> PCIe Host Bridge)
  PIX  = Connection traversing <span class="hljs-keyword">at</span> most <span class="hljs-keyword">a</span> single PCIe bridge
  NV<span class="hljs-comment">#  = Connection traversing a bonded set of # NVLinks</span>`,wrap:!1}}),F=new yt({props:{title:"NVlink",local:"nvlink",headingTag:"h4"}}),pt=new Ct({props:{code:"JTIzJTIwRERQJTIwdyUyRiUyME5WTGluayUwQSUwQXJtJTIwLXIlMjAlMkZ0bXAlMkZ0ZXN0LWNsbSUzQiUyMENVREFfVklTSUJMRV9ERVZJQ0VTJTNEMCUyQzElMjB0b3JjaHJ1biUyMCU1QyUwQS0tbnByb2NfcGVyX25vZGUlMjAyJTIwZXhhbXBsZXMlMkZweXRvcmNoJTJGbGFuZ3VhZ2UtbW9kZWxpbmclMkZydW5fY2xtLnB5JTIwLS1tb2RlbF9uYW1lX29yX3BhdGglMjBvcGVuYWktY29tbXVuaXR5JTJGZ3B0MiUyMCU1QyUwQS0tZGF0YXNldF9uYW1lJTIwd2lraXRleHQlMjAtLWRhdGFzZXRfY29uZmlnX25hbWUlMjB3aWtpdGV4dC0yLXJhdy12MSUyMC0tZG9fdHJhaW4lMjAlNUMlMEEtLW91dHB1dF9kaXIlMjAlMkZ0bXAlMkZ0ZXN0LWNsbSUyMC0tcGVyX2RldmljZV90cmFpbl9iYXRjaF9zaXplJTIwNCUyMC0tbWF4X3N0ZXBzJTIwMjAwJTBBJTBBJTdCJ3RyYWluX3J1bnRpbWUnJTNBJTIwMTAxLjkwMDMlMkMlMjAndHJhaW5fc2FtcGxlc19wZXJfc2Vjb25kJyUzQSUyMDEuOTYzJTJDJTIwJ2Vwb2NoJyUzQSUyMDAuNjklN0QlMEElMEElMjMlMjBERFAlMjB3JTJGbyUyME5WTGluayUwQSUwQXJtJTIwLXIlMjAlMkZ0bXAlMkZ0ZXN0LWNsbSUzQiUyMENVREFfVklTSUJMRV9ERVZJQ0VTJTNEMCUyQzElMjBOQ0NMX1AyUF9ESVNBQkxFJTNEMSUyMHRvcmNocnVuJTIwJTVDJTBBLS1ucHJvY19wZXJfbm9kZSUyMDIlMjBleGFtcGxlcyUyRnB5dG9yY2glMkZsYW5ndWFnZS1tb2RlbGluZyUyRnJ1bl9jbG0ucHklMjAtLW1vZGVsX25hbWVfb3JfcGF0aCUyMG9wZW5haS1jb21tdW5pdHklMkZncHQyJTIwJTVDJTBBLS1kYXRhc2V0X25hbWUlMjB3aWtpdGV4dCUyMC0tZGF0YXNldF9jb25maWdfbmFtZSUyMHdpa2l0ZXh0LTItcmF3LXYxJTIwLS1kb190cmFpbiUwQS0tb3V0cHV0X2RpciUyMCUyRnRtcCUyRnRlc3QtY2xtJTIwLS1wZXJfZGV2aWNlX3RyYWluX2JhdGNoX3NpemUlMjA0JTIwLS1tYXhfc3RlcHMlMjAyMDAlMEElMEElN0IndHJhaW5fcnVudGltZSclM0ElMjAxMzEuNDM2NyUyQyUyMCd0cmFpbl9zYW1wbGVzX3Blcl9zZWNvbmQnJTNBJTIwMS41MjIlMkMlMjAnZXBvY2gnJTNBJTIwMC42OSU3RA==",highlighted:`<span class="hljs-comment"># DDP w/ NVLink</span>

<span class="hljs-built_in">rm</span> -r /tmp/test-clm; CUDA_VISIBLE_DEVICES=0,1 torchrun \\
--nproc_per_node 2 examples/pytorch/language-modeling/run_clm.py --model_name_or_path openai-community/gpt2 \\
--dataset_name wikitext --dataset_config_name wikitext-2-raw-v1 --do_train \\
--output_dir /tmp/test-clm --per_device_train_batch_size 4 --max_steps 200

{<span class="hljs-string">&#x27;train_runtime&#x27;</span>: 101.9003, <span class="hljs-string">&#x27;train_samples_per_second&#x27;</span>: 1.963, <span class="hljs-string">&#x27;epoch&#x27;</span>: 0.69}

<span class="hljs-comment"># DDP w/o NVLink</span>

<span class="hljs-built_in">rm</span> -r /tmp/test-clm; CUDA_VISIBLE_DEVICES=0,1 NCCL_P2P_DISABLE=1 torchrun \\
--nproc_per_node 2 examples/pytorch/language-modeling/run_clm.py --model_name_or_path openai-community/gpt2 \\
--dataset_name wikitext --dataset_config_name wikitext-2-raw-v1 --do_train
--output_dir /tmp/test-clm --per_device_train_batch_size 4 --max_steps 200

{<span class="hljs-string">&#x27;train_runtime&#x27;</span>: 131.4367, <span class="hljs-string">&#x27;train_samples_per_second&#x27;</span>: 1.522, <span class="hljs-string">&#x27;epoch&#x27;</span>: 0.69}`,wrap:!1}}),at=new el({props:{source:"https://github.com/huggingface/transformers/blob/main/docs/source/ja/perf_hardware.md"}}),{c(){J=p("meta"),mt=s(),Ut=p("p"),Tt=s(),U(f.$$.fragment),Jt=s(),o=p("p"),o.innerHTML=we,ft=s(),d=p("p"),d.textContent=Ce,ot=s(),U(r.$$.fragment),dt=s(),u=p("p"),u.textContent=ye,rt=s(),I=p("ul"),I.innerHTML=me,ut=s(),j=p("p"),j.textContent=Te,It=s(),U(c.$$.fragment),jt=s(),b=p("p"),b.textContent=Je,ct=s(),x=p("p"),x.innerHTML=fe,bt=s(),v=p("p"),v.textContent=oe,xt=s(),h=p("p"),h.textContent=de,vt=s(),P=p("p"),P.textContent=re,ht=s(),B=p("p"),B.textContent=ue,Pt=s(),_=p("p"),_.textContent=Ie,Bt=s(),N=p("p"),N.textContent=je,_t=s(),k=p("p"),k.innerHTML=ce,Nt=s(),G=p("p"),G.textContent=be,kt=s(),V=p("p"),V.textContent=xe,Gt=s(),$=p("p"),$.textContent=ve,Vt=s(),U(A.$$.fragment),$t=s(),E=p("p"),E.textContent=he,At=s(),U(Z.$$.fragment),Et=s(),S=p("p"),S.textContent=Pe,Zt=s(),U(L.$$.fragment),St=s(),X=p("p"),X.textContent=Be,Lt=s(),U(R.$$.fragment),Xt=s(),H=p("p"),H.textContent=_e,Rt=s(),U(W.$$.fragment),Ht=s(),Q=p("p"),Q.innerHTML=Ne,Wt=s(),g=p("p"),g.textContent=ke,Qt=s(),Y=p("p"),Y.textContent=Ge,gt=s(),U(F.$$.fragment),Yt=s(),z=p("p"),z.innerHTML=Ve,Ft=s(),D=p("p"),D.innerHTML=$e,zt=s(),O=p("blockquote"),O.innerHTML=Ae,Dt=s(),q=p("p"),q.innerHTML=Ee,Ot=s(),K=p("p"),K.textContent=Ze,qt=s(),tt=p("p"),tt.textContent=Se,Kt=s(),et=p("p"),et.textContent=Le,te=s(),lt=p("p"),lt.textContent=Xe,ee=s(),nt=p("table"),nt.innerHTML=Re,le=s(),st=p("p"),st.innerHTML=He,ne=s(),it=p("p"),it.textContent=We,se=s(),U(pt.$$.fragment),ie=s(),Mt=p("p"),Mt.innerHTML=Qe,pe=s(),U(at.$$.fragment),Me=s(),wt=p("p"),this.h()},l(t){const e=Ke("svelte-u9bgzb",document.head);J=M(e,"META",{name:!0,content:!0}),e.forEach(l),mt=i(t),Ut=M(t,"P",{}),ge(Ut).forEach(l),Tt=i(t),w(f.$$.fragment,t),Jt=i(t),o=M(t,"P",{"data-svelte-h":!0}),a(o)!=="svelte-4rp2i7"&&(o.innerHTML=we),ft=i(t),d=M(t,"P",{"data-svelte-h":!0}),a(d)!=="svelte-1rf6q21"&&(d.textContent=Ce),ot=i(t),w(r.$$.fragment,t),dt=i(t),u=M(t,"P",{"data-svelte-h":!0}),a(u)!=="svelte-sw48j5"&&(u.textContent=ye),rt=i(t),I=M(t,"UL",{"data-svelte-h":!0}),a(I)!=="svelte-18ibhbu"&&(I.innerHTML=me),ut=i(t),j=M(t,"P",{"data-svelte-h":!0}),a(j)!=="svelte-v8xypo"&&(j.textContent=Te),It=i(t),w(c.$$.fragment,t),jt=i(t),b=M(t,"P",{"data-svelte-h":!0}),a(b)!=="svelte-1fgvesf"&&(b.textContent=Je),ct=i(t),x=M(t,"P",{"data-svelte-h":!0}),a(x)!=="svelte-1ickil9"&&(x.innerHTML=fe),bt=i(t),v=M(t,"P",{"data-svelte-h":!0}),a(v)!=="svelte-7jv407"&&(v.textContent=oe),xt=i(t),h=M(t,"P",{"data-svelte-h":!0}),a(h)!=="svelte-t19b0k"&&(h.textContent=de),vt=i(t),P=M(t,"P",{"data-svelte-h":!0}),a(P)!=="svelte-1l60rxq"&&(P.textContent=re),ht=i(t),B=M(t,"P",{"data-svelte-h":!0}),a(B)!=="svelte-d83w8p"&&(B.textContent=ue),Pt=i(t),_=M(t,"P",{"data-svelte-h":!0}),a(_)!=="svelte-qhi575"&&(_.textContent=Ie),Bt=i(t),N=M(t,"P",{"data-svelte-h":!0}),a(N)!=="svelte-1hrg78"&&(N.textContent=je),_t=i(t),k=M(t,"P",{"data-svelte-h":!0}),a(k)!=="svelte-umzsoy"&&(k.innerHTML=ce),Nt=i(t),G=M(t,"P",{"data-svelte-h":!0}),a(G)!=="svelte-1i6shx4"&&(G.textContent=be),kt=i(t),V=M(t,"P",{"data-svelte-h":!0}),a(V)!=="svelte-10vbjq8"&&(V.textContent=xe),Gt=i(t),$=M(t,"P",{"data-svelte-h":!0}),a($)!=="svelte-p4f5wa"&&($.textContent=ve),Vt=i(t),w(A.$$.fragment,t),$t=i(t),E=M(t,"P",{"data-svelte-h":!0}),a(E)!=="svelte-168wuut"&&(E.textContent=he),At=i(t),w(Z.$$.fragment,t),Et=i(t),S=M(t,"P",{"data-svelte-h":!0}),a(S)!=="svelte-17tt0lp"&&(S.textContent=Pe),Zt=i(t),w(L.$$.fragment,t),St=i(t),X=M(t,"P",{"data-svelte-h":!0}),a(X)!=="svelte-1ml9iad"&&(X.textContent=Be),Lt=i(t),w(R.$$.fragment,t),Xt=i(t),H=M(t,"P",{"data-svelte-h":!0}),a(H)!=="svelte-edd85a"&&(H.textContent=_e),Rt=i(t),w(W.$$.fragment,t),Ht=i(t),Q=M(t,"P",{"data-svelte-h":!0}),a(Q)!=="svelte-2v7b6i"&&(Q.innerHTML=Ne),Wt=i(t),g=M(t,"P",{"data-svelte-h":!0}),a(g)!=="svelte-zjp9ph"&&(g.textContent=ke),Qt=i(t),Y=M(t,"P",{"data-svelte-h":!0}),a(Y)!=="svelte-1lwfmge"&&(Y.textContent=Ge),gt=i(t),w(F.$$.fragment,t),Yt=i(t),z=M(t,"P",{"data-svelte-h":!0}),a(z)!=="svelte-wrowsz"&&(z.innerHTML=Ve),Ft=i(t),D=M(t,"P",{"data-svelte-h":!0}),a(D)!=="svelte-13p6p4b"&&(D.innerHTML=$e),zt=i(t),O=M(t,"BLOCKQUOTE",{"data-svelte-h":!0}),a(O)!=="svelte-14khom1"&&(O.innerHTML=Ae),Dt=i(t),q=M(t,"P",{"data-svelte-h":!0}),a(q)!=="svelte-1fpr61m"&&(q.innerHTML=Ee),Ot=i(t),K=M(t,"P",{"data-svelte-h":!0}),a(K)!=="svelte-fvsf9s"&&(K.textContent=Ze),qt=i(t),tt=M(t,"P",{"data-svelte-h":!0}),a(tt)!=="svelte-1lbnhaw"&&(tt.textContent=Se),Kt=i(t),et=M(t,"P",{"data-svelte-h":!0}),a(et)!=="svelte-16gw8ke"&&(et.textContent=Le),te=i(t),lt=M(t,"P",{"data-svelte-h":!0}),a(lt)!=="svelte-1syf6lt"&&(lt.textContent=Xe),ee=i(t),nt=M(t,"TABLE",{"data-svelte-h":!0}),a(nt)!=="svelte-1hvmx1i"&&(nt.innerHTML=Re),le=i(t),st=M(t,"P",{"data-svelte-h":!0}),a(st)!=="svelte-10gsjxh"&&(st.innerHTML=He),ne=i(t),it=M(t,"P",{"data-svelte-h":!0}),a(it)!=="svelte-kf5bi3"&&(it.textContent=We),se=i(t),w(pt.$$.fragment,t),ie=i(t),Mt=M(t,"P",{"data-svelte-h":!0}),a(Mt)!=="svelte-pittpg"&&(Mt.innerHTML=Qe),pe=i(t),w(at.$$.fragment,t),Me=i(t),wt=M(t,"P",{}),ge(wt).forEach(l),this.h()},h(){Ye(J,"name","hf:doc:metadata"),Ye(J,"content",nl)},m(t,e){tl(document.head,J),n(t,mt,e),n(t,Ut,e),n(t,Tt,e),C(f,t,e),n(t,Jt,e),n(t,o,e),n(t,ft,e),n(t,d,e),n(t,ot,e),C(r,t,e),n(t,dt,e),n(t,u,e),n(t,rt,e),n(t,I,e),n(t,ut,e),n(t,j,e),n(t,It,e),C(c,t,e),n(t,jt,e),n(t,b,e),n(t,ct,e),n(t,x,e),n(t,bt,e),n(t,v,e),n(t,xt,e),n(t,h,e),n(t,vt,e),n(t,P,e),n(t,ht,e),n(t,B,e),n(t,Pt,e),n(t,_,e),n(t,Bt,e),n(t,N,e),n(t,_t,e),n(t,k,e),n(t,Nt,e),n(t,G,e),n(t,kt,e),n(t,V,e),n(t,Gt,e),n(t,$,e),n(t,Vt,e),C(A,t,e),n(t,$t,e),n(t,E,e),n(t,At,e),C(Z,t,e),n(t,Et,e),n(t,S,e),n(t,Zt,e),C(L,t,e),n(t,St,e),n(t,X,e),n(t,Lt,e),C(R,t,e),n(t,Xt,e),n(t,H,e),n(t,Rt,e),C(W,t,e),n(t,Ht,e),n(t,Q,e),n(t,Wt,e),n(t,g,e),n(t,Qt,e),n(t,Y,e),n(t,gt,e),C(F,t,e),n(t,Yt,e),n(t,z,e),n(t,Ft,e),n(t,D,e),n(t,zt,e),n(t,O,e),n(t,Dt,e),n(t,q,e),n(t,Ot,e),n(t,K,e),n(t,qt,e),n(t,tt,e),n(t,Kt,e),n(t,et,e),n(t,te,e),n(t,lt,e),n(t,ee,e),n(t,nt,e),n(t,le,e),n(t,st,e),n(t,ne,e),n(t,it,e),n(t,se,e),C(pt,t,e),n(t,ie,e),n(t,Mt,e),n(t,pe,e),C(at,t,e),n(t,Me,e),n(t,wt,e),ae=!0},p:ze,i(t){ae||(y(f.$$.fragment,t),y(r.$$.fragment,t),y(c.$$.fragment,t),y(A.$$.fragment,t),y(Z.$$.fragment,t),y(L.$$.fragment,t),y(R.$$.fragment,t),y(W.$$.fragment,t),y(F.$$.fragment,t),y(pt.$$.fragment,t),y(at.$$.fragment,t),ae=!0)},o(t){m(f.$$.fragment,t),m(r.$$.fragment,t),m(c.$$.fragment,t),m(A.$$.fragment,t),m(Z.$$.fragment,t),m(L.$$.fragment,t),m(R.$$.fragment,t),m(W.$$.fragment,t),m(F.$$.fragment,t),m(pt.$$.fragment,t),m(at.$$.fragment,t),ae=!1},d(t){t&&(l(mt),l(Ut),l(Tt),l(Jt),l(o),l(ft),l(d),l(ot),l(dt),l(u),l(rt),l(I),l(ut),l(j),l(It),l(jt),l(b),l(ct),l(x),l(bt),l(v),l(xt),l(h),l(vt),l(P),l(ht),l(B),l(Pt),l(_),l(Bt),l(N),l(_t),l(k),l(Nt),l(G),l(kt),l(V),l(Gt),l($),l(Vt),l($t),l(E),l(At),l(Et),l(S),l(Zt),l(St),l(X),l(Lt),l(Xt),l(H),l(Rt),l(Ht),l(Q),l(Wt),l(g),l(Qt),l(Y),l(gt),l(Yt),l(z),l(Ft),l(D),l(zt),l(O),l(Dt),l(q),l(Ot),l(K),l(qt),l(tt),l(Kt),l(et),l(te),l(lt),l(ee),l(nt),l(le),l(st),l(ne),l(it),l(se),l(ie),l(Mt),l(pe),l(Me),l(wt)),l(J),T(f,t),T(r,t),T(c,t),T(A,t),T(Z,t),T(L,t),T(R,t),T(W,t),T(F,t),T(pt,t),T(at,t)}}}const nl='{"title":"Custom hardware for training","local":"custom-hardware-for-training","sections":[{"title":"GPU","local":"gpu","sections":[{"title":"Power and Cooling","local":"power-and-cooling","sections":[],"depth":3},{"title":"Multi-GPU Connectivity","local":"multi-gpu-connectivity","sections":[{"title":"NVlink","local":"nvlink","sections":[],"depth":4}],"depth":3}],"depth":2}],"depth":1}';function sl(Ue){return De(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class Ul extends Oe{constructor(J){super(),qe(this,J,sl,ll,Fe,{})}}export{Ul as component};