course/pr_1021/ja/_app/immutable/nodes/4.a98d56be.js

import{s as de,n as ve,o as Ve}from"../chunks/scheduler.37c15a92.js";import{S as Se,i as ze,g as P,s as $,r as l,A as He,h as K,f as n,c as i,j as Ie,u as a,x as ke,k as _e,y as Fe,a as s,v as r,d as m,t as p,w as f}from"../chunks/index.7cb9c9b8.js";import{C as We}from"../chunks/CodeBlock.abae2786.js";import{C as Ee}from"../chunks/CourseFloatingBanner.df82c153.js";import{Q as u}from"../chunks/Question.f95a37ca.js";import{H as g,E as Re}from"../chunks/getInferenceSnippets.a2135f3c.js";function Ye(Ce){let o,X,Q,A,x,L,y,D,c,Ge="この章では多くの物事を学びました！詳細を把握できなくても安心してください。次の章はどのようにこれらのツールが動いているか理解する上で役に立ちます。",O,w,Ze="まずは、この章で学んだことを確かめましょう！",ee,b,te,T,ne,h,se,M,$e,J,ie,q,le,U,ae,j,re,B,me,W,pe,C,fe,G,ge,Z,ue,I,oe,k,xe,_,ye,d,ce,v,we,V,be,S,Te,z,he,H,Me,F,Je,E,qe,R,Ue,Y,je,N,Be;return x=new g({props:{title:"章末クイズ",local:"章末クイズ",headingTag:"h1"}}),y=new Ee({props:{chapter:1,classNames:"absolute z-10 right-0 top-0"}}),b=new g({props:{title:"1.Hubを探索して roberta-large-mnli チェックポイントを見つけましょう。 このモデルはどのタスクに適していますか?",local:"1hubを探索して-roberta-large-mnli-チェックポイントを見つけましょう-このモデルはどのタスクに適していますか",headingTag:"h3"}}),T=new u({props:{choices:[{text:"文章要約",explain:'もう一度roberta-large-mnliの<a href="https://huggingface.co/roberta-large-mnli">ページ</a>を見てみましょう。'},{text:"文章分類",explain:"より正確には2つの文が論理的にどのような関係を持つか、３つのラベル（矛盾、中立、含意）について分類します。このタスクは<em>自然言語推論</em>とも呼ばれます。",correct:!0},{text:"文章生成",explain:'もう一度roberta-large-mnliの<a href="https://huggingface.co/roberta-large-mnli">ページ</a>を見てみましょう。'}]}}),h=new g({props:{title:"2.次のコードは何を返しますか?",local:"2次のコードは何を返しますか",headingTag:"h3"}}),M=new We({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBbmVyJTIwJTNEJTIwcGlwZWxpbmUoJTIybmVyJTIyJTJDJTIwZ3JvdXBlZF9lbnRpdGllcyUzRFRydWUpJTBBbmVyKCUyMk15JTIwbmFtZSUyMGlzJTIwU3lsdmFpbiUyMGFuZCUyMEklMjB3b3JrJTIwYXQlMjBIdWdnaW5nJTIwRmFjZSUyMGluJTIwQnJvb2tseW4uJTIyKQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

ner = pipeline(<span class="hljs-string">&quot;ner&quot;</span>, grouped_entities=<span class="hljs-literal">True</span>)
ner(<span class="hljs-string">&quot;My name is Sylvain and I work at Hugging Face in Brooklyn.&quot;</span>)`,wrap:!1}}),J=new u({props:{choices:[{text:'この文章の分類スコアを"positive"または"negative"のラベルとともに返します。',explain:"間違いです。それは<code>sentiment-analysis</code> パイプラインを用いたときの動作です。"},{text:"この文章を完結させるための生成された文を返します。",explain:"間違いです。それは <code>text-generation</code> パイプラインを用いたときの動作です。"},{text:"この文中の人物、団体、場所を表す単語を返します。",explain:"さらに、<code>grouped_entities=True</code>を用いると、同じエンティティに属する単語をグループ化します。",correct:!0}]}}),q=new g({props:{title:"3. このサンプルコードでは…をどのように置き換えればよいでしょうか?",local:"3-このサンプルコードではをどのように置き換えればよいでしょうか",headingTag:"h3"}}),U=new We({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBZmlsbGVyJTIwJTNEJTIwcGlwZWxpbmUoJTIyZmlsbC1tYXNrJTIyJTJDJTIwbW9kZWwlM0QlMjJiZXJ0LWJhc2UtY2FzZWQlMjIpJTBBcmVzdWx0JTIwJTNEJTIwZmlsbGVyKCUyMi4uLiUyMik=",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

filler = pipeline(<span class="hljs-string">&quot;fill-mask&quot;</span>, model=<span class="hljs-string">&quot;bert-base-cased&quot;</span>)
result = filler(<span class="hljs-string">&quot;...&quot;</span>)`,wrap:!1}}),j=new u({props:{choices:[{text:"This <mask> has been waiting for you.",explain:"間違いです。<code>bert-base-cased</code>のモデルカードをチェックして、あなたの間違いを見つけましょう。"},{text:"This [MASK] has been waiting for you.",explain:"正解！このモデルのマスクトークンは[MASK]です。",correct:!0},{text:"This man has been waiting for you.",explain:"間違いです。このパイプラインはマスクされた単語を埋めるので、どこかにマスクトークンが必要です。"}]}}),B=new g({props:{title:"4. なぜこのコードは動かないのでしょうか？",local:"4-なぜこのコードは動かないのでしょうか",headingTag:"h3"}}),W=new We({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBY2xhc3NpZmllciUyMCUzRCUyMHBpcGVsaW5lKCUyMnplcm8tc2hvdC1jbGFzc2lmaWNhdGlvbiUyMiklMEFyZXN1bHQlMjAlM0QlMjBjbGFzc2lmaWVyKCUyMlRoaXMlMjBpcyUyMGElMjBjb3Vyc2UlMjBhYm91dCUyMHRoZSUyMFRyYW5zZm9ybWVycyUyMGxpYnJhcnklMjIp",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

classifier = pipeline(<span class="hljs-string">&quot;zero-shot-classification&quot;</span>)
result = classifier(<span class="hljs-string">&quot;This is a course about the Transformers library&quot;</span>)`,wrap:!1}}),C=new u({props:{choices:[{text:"このパイプラインには、テキストを分類するためのラベルを与える必要があります。",explain:"正解です。正しいコードには<code>candidate_labels=[...]</code>を含める必要があります。",correct:!0},{text:"このパイプラインには、一つの文だけでなく複数の文が必要です。",explain:"これは間違いです。しかし、適切に使用すれば、このパイプラインは処理する文のリストを受け取ることができます（他のパイプラインも同様です）。"},{text:"いつもどおり、この🤗Transformersライブラリは壊れています。",explain:"ノーコメント！"},{text:"このパイプラインはもっと長い入力が必要です。この入力は短すぎます。",explain:"これは間違いです。ただし、とても長い文をこのパイプラインで処理すると、切り捨てられることに注意してください。"}]}}),G=new g({props:{title:"5. 転移学習とはどのような意味ですか？",local:"5-転移学習とはどのような意味ですか",headingTag:"h3"}}),Z=new u({props:{choices:[{text:"同じデータセットで学習することで、事前学習モデルが持つ知識を新しいモデルに転移させること。",explain:"間違いです。それは、2つのバージョンの同じモデルになります。"},{text:"事前学習モデルの重みを用いて、2つ目の新しいモデルを初期化することで、事前学習モデルの知識を転移させること。",explain:"正解です。2つ目のモデルを新しいタスクで学習する場合、それは最初のモデルが知識を*転移*したことになります。",correct:!0},{text:"事前学習モデルと同じアーキテクチャを持つ新しいモデルを構築することで、事前学習モデルの知識を転移させること。",explain:"アーキテクチャはあくまでもモデルの作り方であるため、この場合には知識の共有、転移は行われません。"}]}}),I=new g({props:{title:"6. マルバツクイズ、言語モデルの事前学習にラベルは通常は必要ない？",local:"6-マルバツクイズ言語モデルの事前学習にラベルは通常は必要ない",headingTag:"h3"}}),k=new u({props:{choices:[{text:"マル",explain:"事前学習は通常、<em>自己教師あり学習</em>で行われます。つまり、ラベルは入力から自動的に作成されます（例えば、次の単語を予測したり、マスクされた単語を埋めたりといったように）。",correct:!0},{text:"バツ",explain:"これは正しい回答ではありません。"}]}}),_=new g({props:{title:"7.「モデル」、「アーキテクチャ」、「重み」という用語を最も適切に説明している文を選んでください。",local:"7モデルアーキテクチャ重みという用語を最も適切に説明している文を選んでください",headingTag:"h3"}}),d=new u({props:{choices:[{text:"モデルが建物であるとすれば、アーキテクチャはその設計図で、重みは中に住んでいる人です。",explain:"このたとえに従うなら、重みはレンガなどビルを構成する材料になります。"},{text:"アーキテクチャはモデルを構築するための地図であり、その重みは地図上に表される都市です。",explain:"このたとえの問題は、通常地図は一つの実在する現実を表していることにあります（フランスにはパリという都市は一つしかない）。一方で、あるアーキテクチャに対して複数の重みを考えることができます。"},{text:"アーキテクチャはモデルを構築する一連の数学的な関数であり、重みはそれらの関数のパラメータです。",explain:"同じ数学的な関数の集合（アーキテクチャ）に対して、異なるパラメーター（重み）を用いることで、異なるモデルを作ることができます。",correct:!0}]}}),v=new g({props:{title:"8. 生成された文でプロンプトを完成させるために使うモデルはどれでしょうか？",local:"8-生成された文でプロンプトを完成させるために使うモデルはどれでしょうか",headingTag:"h3"}}),V=new u({props:{choices:[{text:"エンコーダーモデル",explain:"エンコーダーモデルは文章全体の埋め込み表現を生成するので、文章分類のようなタスクにより適しています。"},{text:"デコーダーモデル",explain:"デコーダーモデルはプロンプトから文章を生成するために、完璧に適したモデルです。",correct:!0},{text:"sequence-to-sequenceモデル",explain:"Sequence-to-sequenceモデルは、与えられたプロンプトではなく入力文と関連のある文章を生成したいときにより適したモデルです。"}]}}),S=new g({props:{title:"9. 文章要約タスクに使うモデルはどれでしょうか?",local:"9-文章要約タスクに使うモデルはどれでしょうか",headingTag:"h3"}}),z=new u({props:{choices:[{text:"エンコーダーモデル",explain:"エンコーダーモデルは文章全体の埋め込み表現を生成するので、文章分類のようなタスクにより適しています。"},{text:"デコーダーモデル",explain:"デコーダーモデルは出力文を生成する上で良いモデルです（たとえば要約のように）。しかし、要約対象の文章全体のような文脈を利用する能力はありません。"},{text:"sequence-to-sequenceモデル",explain:"Sequence-to-sequenceモデルは要約タスクに完璧に適したモデルです。",correct:!0}]}}),H=new g({props:{title:"10. 入力された文を特定のラベルに分類したいときに使うモデルはどれでしょうか？",local:"10-入力された文を特定のラベルに分類したいときに使うモデルはどれでしょうか",headingTag:"h3"}}),F=new u({props:{choices:[{text:"エンコーダーモデル",explain:"エンコーダーモデルは文章全体の埋め込み表現を生成するので、文章分類のようなタスクに完璧に適しています。",correct:!0},{text:"デコーダーモデル",explain:"デコーダーモデルは出力文を生成する上で良いモデルですが、文からラベルを抽出するモデルではありません。"},{text:"sequence-to-sequenceモデル",explain:"Sequence-to-sequenceモデルは、入力文に基づいて文を生成するときにより適したモデルで、ラベルを出力するモデルではありません。"}]}}),E=new g({props:{title:"11. モデルが持つバイアスはどのような要因で生じますか?",local:"11-モデルが持つバイアスはどのような要因で生じますか",headingTag:"h3"}}),R=new u({props:{choices:[{text:"モデルが事前学習モデルをファインチューニングしたバージョンであり、そのモデルが元のモデルよりバイアスを受け継いだとき。",explain:"転移学習が適用されるとき、事前学習モデルのバイアスがファインチューニングされたモデルに発現します。",correct:!0},{text:"モデルを訓練するデータに偏りがある時。",explain:"これは最も顕著なバイアスの要因です。しかし、要因はこれだけではありません。",correct:!0},{text:"モデルを最適化するための指標に偏りがある時",explain:"バイアスの要因としてあまり知られていないのはモデルの学習方法です。モデルはあなたが選んだどんな指標に対しても、やみくもに最適化します。",correct:!0}]}}),Y=new Re({props:{source:"https://github.com/huggingface/course/blob/main/chapters/ja/chapter1/10.mdx"}}),{c(){o=P("meta"),X=$(),Q=P("p"),A=$(),l(x.$$.fragment),L=$(),l(y.$$.fragment),D=$(),c=P("p"),c.textContent=Ge,O=$(),w=P("p"),w.textContent=Ze,ee=$(),l(b.$$.fragment),te=$(),l(T.$$.fragment),ne=$(),l(h.$$.fragment),se=$(),l(M.$$.fragment),$e=$(),l(J.$$.fragment),ie=$(),l(q.$$.fragment),le=$(),l(U.$$.fragment),ae=$(),l(j.$$.fragment),re=$(),l(B.$$.fragment),me=$(),l(W.$$.fragment),pe=$(),l(C.$$.fragment),fe=$(),l(G.$$.fragment),ge=$(),l(Z.$$.fragment),ue=$(),l(I.$$.fragment),oe=$(),l(k.$$.fragment),xe=$(),l(_.$$.fragment),ye=$(),l(d.$$.fragment),ce=$(),l(v.$$.fragment),we=$(),l(V.$$.fragment),be=$(),l(S.$$.fragment),Te=$(),l(z.$$.fragment),he=$(),l(H.$$.fragment),Me=$(),l(F.$$.fragment),Je=$(),l(E.$$.fragment),qe=$(),l(R.$$.fragment),Ue=$(),l(Y.$$.fragment),je=$(),N=P("p"),this.h()},l(e){const t=He("svelte-u9bgzb",document.head);o=K(t,"META",{name:!0,content:!0}),t.forEach(n),X=i(e),Q=K(e,"P",{}),Ie(Q).forEach(n),A=i(e),a(x.$$.fragment,e),L=i(e),a(y.$$.fragment,e),D=i(e),c=K(e,"P",{"data-svelte-h":!0}),ke(c)!=="svelte-1mx65p5"&&(c.textContent=Ge),O=i(e),w=K(e,"P",{"data-svelte-h":!0}),ke(w)!=="svelte-rhyuw1"&&(w.textContent=Ze),ee=i(e),a(b.$$.fragment,e),te=i(e),a(T.$$.fragment,e),ne=i(e),a(h.$$.fragment,e),se=i(e),a(M.$$.fragment,e),$e=i(e),a(J.$$.fragment,e),ie=i(e),a(q.$$.fragment,e),le=i(e),a(U.$$.fragment,e),ae=i(e),a(j.$$.fragment,e),re=i(e),a(B.$$.fragment,e),me=i(e),a(W.$$.fragment,e),pe=i(e),a(C.$$.fragment,e),fe=i(e),a(G.$$.fragment,e),ge=i(e),a(Z.$$.fragment,e),ue=i(e),a(I.$$.fragment,e),oe=i(e),a(k.$$.fragment,e),xe=i(e),a(_.$$.fragment,e),ye=i(e),a(d.$$.fragment,e),ce=i(e),a(v.$$.fragment,e),we=i(e),a(V.$$.fragment,e),be=i(e),a(S.$$.fragment,e),Te=i(e),a(z.$$.fragment,e),he=i(e),a(H.$$.fragment,e),Me=i(e),a(F.$$.fragment,e),Je=i(e),a(E.$$.fragment,e),qe=i(e),a(R.$$.fragment,e),Ue=i(e),a(Y.$$.fragment,e),je=i(e),N=K(e,"P",{}),Ie(N).forEach(n),this.h()},h(){_e(o,"name","hf:doc:metadata"),_e(o,"content",Qe)},m(e,t){Fe(document.head,o),s(e,X,t),s(e,Q,t),s(e,A,t),r(x,e,t),s(e,L,t),r(y,e,t),s(e,D,t),s(e,c,t),s(e,O,t),s(e,w,t),s(e,ee,t),r(b,e,t),s(e,te,t),r(T,e,t),s(e,ne,t),r(h,e,t),s(e,se,t),r(M,e,t),s(e,$e,t),r(J,e,t),s(e,ie,t),r(q,e,t),s(e,le,t),r(U,e,t),s(e,ae,t),r(j,e,t),s(e,re,t),r(B,e,t),s(e,me,t),r(W,e,t),s(e,pe,t),r(C,e,t),s(e,fe,t),r(G,e,t),s(e,ge,t),r(Z,e,t),s(e,ue,t),r(I,e,t),s(e,oe,t),r(k,e,t),s(e,xe,t),r(_,e,t),s(e,ye,t),r(d,e,t),s(e,ce,t),r(v,e,t),s(e,we,t),r(V,e,t),s(e,be,t),r(S,e,t),s(e,Te,t),r(z,e,t),s(e,he,t),r(H,e,t),s(e,Me,t),r(F,e,t),s(e,Je,t),r(E,e,t),s(e,qe,t),r(R,e,t),s(e,Ue,t),r(Y,e,t),s(e,je,t),s(e,N,t),Be=!0},p:ve,i(e){Be||(m(x.$$.fragment,e),m(y.$$.fragment,e),m(b.$$.fragment,e),m(T.$$.fragment,e),m(h.$$.fragment,e),m(M.$$.fragment,e),m(J.$$.fragment,e),m(q.$$.fragment,e),m(U.$$.fragment,e),m(j.$$.fragment,e),m(B.$$.fragment,e),m(W.$$.fragment,e),m(C.$$.fragment,e),m(G.$$.fragment,e),m(Z.$$.fragment,e),m(I.$$.fragment,e),m(k.$$.fragment,e),m(_.$$.fragment,e),m(d.$$.fragment,e),m(v.$$.fragment,e),m(V.$$.fragment,e),m(S.$$.fragment,e),m(z.$$.fragment,e),m(H.$$.fragment,e),m(F.$$.fragment,e),m(E.$$.fragment,e),m(R.$$.fragment,e),m(Y.$$.fragment,e),Be=!0)},o(e){p(x.$$.fragment,e),p(y.$$.fragment,e),p(b.$$.fragment,e),p(T.$$.fragment,e),p(h.$$.fragment,e),p(M.$$.fragment,e),p(J.$$.fragment,e),p(q.$$.fragment,e),p(U.$$.fragment,e),p(j.$$.fragment,e),p(B.$$.fragment,e),p(W.$$.fragment,e),p(C.$$.fragment,e),p(G.$$.fragment,e),p(Z.$$.fragment,e),p(I.$$.fragment,e),p(k.$$.fragment,e),p(_.$$.fragment,e),p(d.$$.fragment,e),p(v.$$.fragment,e),p(V.$$.fragment,e),p(S.$$.fragment,e),p(z.$$.fragment,e),p(H.$$.fragment,e),p(F.$$.fragment,e),p(E.$$.fragment,e),p(R.$$.fragment,e),p(Y.$$.fragment,e),Be=!1},d(e){e&&(n(X),n(Q),n(A),n(L),n(D),n(c),n(O),n(w),n(ee),n(te),n(ne),n(se),n($e),n(ie),n(le),n(ae),n(re),n(me),n(pe),n(fe),n(ge),n(ue),n(oe),n(xe),n(ye),n(ce),n(we),n(be),n(Te),n(he),n(Me),n(Je),n(qe),n(Ue),n(je),n(N)),n(o),f(x,e),f(y,e),f(b,e),f(T,e),f(h,e),f(M,e),f(J,e),f(q,e),f(U,e),f(j,e),f(B,e),f(W,e),f(C,e),f(G,e),f(Z,e),f(I,e),f(k,e),f(_,e),f(d,e),f(v,e),f(V,e),f(S,e),f(z,e),f(H,e),f(F,e),f(E,e),f(R,e),f(Y,e)}}}const Qe='{"title":"章末クイズ","local":"章末クイズ","sections":[{"title":"1.Hubを探索して roberta-large-mnli チェックポイントを見つけましょう。 このモデルはどのタスクに適していますか?","local":"1hubを探索して-roberta-large-mnli-チェックポイントを見つけましょう-このモデルはどのタスクに適していますか","sections":[],"depth":3},{"title":"2.次のコードは何を返しますか?","local":"2次のコードは何を返しますか","sections":[],"depth":3},{"title":"3. このサンプルコードでは…をどのように置き換えればよいでしょうか?","local":"3-このサンプルコードではをどのように置き換えればよいでしょうか","sections":[],"depth":3},{"title":"4. なぜこのコードは動かないのでしょうか？","local":"4-なぜこのコードは動かないのでしょうか","sections":[],"depth":3},{"title":"5. 転移学習とはどのような意味ですか？","local":"5-転移学習とはどのような意味ですか","sections":[],"depth":3},{"title":"6. マルバツクイズ、言語モデルの事前学習にラベルは通常は必要ない？","local":"6-マルバツクイズ言語モデルの事前学習にラベルは通常は必要ない","sections":[],"depth":3},{"title":"7.「モデル」、「アーキテクチャ」、「重み」という用語を最も適切に説明している文を選んでください。","local":"7モデルアーキテクチャ重みという用語を最も適切に説明している文を選んでください","sections":[],"depth":3},{"title":"8. 生成された文でプロンプトを完成させるために使うモデルはどれでしょうか？","local":"8-生成された文でプロンプトを完成させるために使うモデルはどれでしょうか","sections":[],"depth":3},{"title":"9. 文章要約タスクに使うモデルはどれでしょうか?","local":"9-文章要約タスクに使うモデルはどれでしょうか","sections":[],"depth":3},{"title":"10. 入力された文を特定のラベルに分類したいときに使うモデルはどれでしょうか？","local":"10-入力された文を特定のラベルに分類したいときに使うモデルはどれでしょうか","sections":[],"depth":3},{"title":"11. モデルが持つバイアスはどのような要因で生じますか?","local":"11-モデルが持つバイアスはどのような要因で生じますか","sections":[],"depth":3}],"depth":1}';function Ne(Ce){return Ve(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class Oe extends Se{constructor(o){super(),ze(this,o,Ne,Ye,de,{})}}export{Oe as component};