course/pr_1180/ja/_app/immutable/nodes/11.1c19cadf.js

import{s as F,n as Y,o as K}from"../chunks/scheduler.ddeee2a5.js";import{S as D,i as O,e as g,s as n,c as $,h as ss,a as b,d as e,b as l,f as L,g as d,j as H,k as P,l as ts,m as a,n as j,t as w,o as x,p as J}from"../chunks/index.b5ed4bbb.js";import{C as es,H as as,E as ns}from"../chunks/MermaidChart.svelte_svelte_type_style_lang.62eb88c9.js";import{C as X}from"../chunks/CodeBlock.ed973e2d.js";import{C as ls}from"../chunks/CourseFloatingBanner.e70be405.js";function rs(S){let r,C,T,U,p,B,i,_,o,I,c,z=`事前学習済みモデルやファインチューニング済みのモデルを使う場合、これらのモデルは強力なツールですが、一方で限界もあることに注意しなければなりません。
その代表例は、大量のデータによる事前学習を行うために、研究者はインターネット上にある利用可能なデータを良いものから悪いものまで手当たりしだいに集めてしまうことです。`,V,m,A="簡単に説明するために、BERTによる<code>fill-mask</code>パイプラインの例に戻りましょう:",W,u,v,f,N,h,R=`これらの２つの文の欠落した単語を埋めさせたときに、モデルはジェンダーフリーの回答を一つだけしか与えません(waiter/waitress)。他はたいていの場合、特定の性別と関連付けられる職業です。そして、モデルは「女性」と「仕事」から連想される可能性のある職業としてトップ５に「売春婦（prostitute）」を上げています。
BERTはインターネット上のあらゆるところからデータをかき集めて構築されたのではなく、中立的なデータ(<a href="https://huggingface.co/datasets/wikipedia" rel="nofollow">English Wikipedia</a>と<a href="https://huggingface.co/datasets/bookcorpus" rel="nofollow">BookCorpus</a>を用いて学習されています) を用いて構築されためずらしいTransformerモデルであるにも関わらず、このような現象が発生してしまいます。`,E,y,Z="したがって、これらのツールを使用する際は、オリジナルのモデルがとても簡単に性的、差別的、あるいは同性愛嫌悪のコンテンツを生成してしまうことを念頭に置く必要があります。この本質的なバイアスは、あるデータでファインチューニングしても消えることはありません。",G,M,Q,k,q;return p=new es({props:{containerStyle:"float: right; margin-left: 10px; display: inline-flex; position: relative; z-index: 10;"}}),i=new as({props:{title:"バイアスと限界",local:"バイアスと限界",headingTag:"h1"}}),o=new ls({props:{chapter:1,classNames:"absolute z-10 right-0 top-0",notebooks:[{label:"Google Colab",value:"https://colab.research.google.com/github/huggingface/notebooks/blob/master/course/en/chapter1/section8.ipynb"},{label:"Aws Studio",value:"https://studiolab.sagemaker.aws/import/github/huggingface/notebooks/blob/master/course/en/chapter1/section8.ipynb"}]}}),u=new X({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBdW5tYXNrZXIlMjAlM0QlMjBwaXBlbGluZSglMjJmaWxsLW1hc2slMjIlMkMlMjBtb2RlbCUzRCUyMmJlcnQtYmFzZS11bmNhc2VkJTIyKSUwQXJlc3VsdCUyMCUzRCUyMHVubWFza2VyKCUyMlRoaXMlMjBtYW4lMjB3b3JrcyUyMGFzJTIwYSUyMCU1Qk1BU0slNUQuJTIyKSUwQXByaW50KCU1QnIlNUIlMjJ0b2tlbl9zdHIlMjIlNUQlMjBmb3IlMjByJTIwaW4lMjByZXN1bHQlNUQpJTBBJTBBcmVzdWx0JTIwJTNEJTIwdW5tYXNrZXIoJTIyVGhpcyUyMHdvbWFuJTIwd29ya3MlMjBhcyUyMGElMjAlNUJNQVNLJTVELiUyMiklMEFwcmludCglNUJyJTVCJTIydG9rZW5fc3RyJTIyJTVEJTIwZm9yJTIwciUyMGluJTIwcmVzdWx0JTVEKQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

unmasker = pipeline(<span class="hljs-string">&quot;fill-mask&quot;</span>, model=<span class="hljs-string">&quot;bert-base-uncased&quot;</span>)
result = unmasker(<span class="hljs-string">&quot;This man works as a [MASK].&quot;</span>)
<span class="hljs-built_in">print</span>([r[<span class="hljs-string">&quot;token_str&quot;</span>] <span class="hljs-keyword">for</span> r <span class="hljs-keyword">in</span> result])

result = unmasker(<span class="hljs-string">&quot;This woman works as a [MASK].&quot;</span>)
<span class="hljs-built_in">print</span>([r[<span class="hljs-string">&quot;token_str&quot;</span>] <span class="hljs-keyword">for</span> r <span class="hljs-keyword">in</span> result])`,wrap:!1}}),f=new X({props:{code:"JTVCJ2xhd3llciclMkMlMjAnY2FycGVudGVyJyUyQyUyMCdkb2N0b3InJTJDJTIwJ3dhaXRlciclMkMlMjAnbWVjaGFuaWMnJTVEJTBBJTVCJ251cnNlJyUyQyUyMCd3YWl0cmVzcyclMkMlMjAndGVhY2hlciclMkMlMjAnbWFpZCclMkMlMjAncHJvc3RpdHV0ZSclNUQ=",highlighted:`[<span class="hljs-string">&#x27;lawyer&#x27;</span>, <span class="hljs-string">&#x27;carpenter&#x27;</span>, <span class="hljs-string">&#x27;doctor&#x27;</span>, <span class="hljs-string">&#x27;waiter&#x27;</span>, <span class="hljs-string">&#x27;mechanic&#x27;</span>]
[<span class="hljs-string">&#x27;nurse&#x27;</span>, <span class="hljs-string">&#x27;waitress&#x27;</span>, <span class="hljs-string">&#x27;teacher&#x27;</span>, <span class="hljs-string">&#x27;maid&#x27;</span>, <span class="hljs-string">&#x27;prostitute&#x27;</span>]`,wrap:!1}}),M=new ns({props:{source:"https://github.com/huggingface/course/blob/main/chapters/ja/chapter1/8.mdx"}}),{c(){r=g("meta"),C=n(),T=g("p"),U=n(),$(p.$$.fragment),B=n(),$(i.$$.fragment),_=n(),$(o.$$.fragment),I=n(),c=g("p"),c.textContent=z,V=n(),m=g("p"),m.innerHTML=A,W=n(),$(u.$$.fragment),v=n(),$(f.$$.fragment),N=n(),h=g("p"),h.innerHTML=R,E=n(),y=g("p"),y.textContent=Z,G=n(),$(M.$$.fragment),Q=n(),k=g("p"),this.h()},l(s){const t=ss("svelte-u9bgzb",document.head);r=b(t,"META",{name:!0,content:!0}),t.forEach(e),C=l(s),T=b(s,"P",{}),L(T).forEach(e),U=l(s),d(p.$$.fragment,s),B=l(s),d(i.$$.fragment,s),_=l(s),d(o.$$.fragment,s),I=l(s),c=b(s,"P",{"data-svelte-h":!0}),H(c)!=="svelte-j67gus"&&(c.textContent=z),V=l(s),m=b(s,"P",{"data-svelte-h":!0}),H(m)!=="svelte-1xeyrx7"&&(m.innerHTML=A),W=l(s),d(u.$$.fragment,s),v=l(s),d(f.$$.fragment,s),N=l(s),h=b(s,"P",{"data-svelte-h":!0}),H(h)!=="svelte-n4hh17"&&(h.innerHTML=R),E=l(s),y=b(s,"P",{"data-svelte-h":!0}),H(y)!=="svelte-bqnapl"&&(y.textContent=Z),G=l(s),d(M.$$.fragment,s),Q=l(s),k=b(s,"P",{}),L(k).forEach(e),this.h()},h(){P(r,"name","hf:doc:metadata"),P(r,"content",ps)},m(s,t){ts(document.head,r),a(s,C,t),a(s,T,t),a(s,U,t),j(p,s,t),a(s,B,t),j(i,s,t),a(s,_,t),j(o,s,t),a(s,I,t),a(s,c,t),a(s,V,t),a(s,m,t),a(s,W,t),j(u,s,t),a(s,v,t),j(f,s,t),a(s,N,t),a(s,h,t),a(s,E,t),a(s,y,t),a(s,G,t),j(M,s,t),a(s,Q,t),a(s,k,t),q=!0},p:Y,i(s){q||(w(p.$$.fragment,s),w(i.$$.fragment,s),w(o.$$.fragment,s),w(u.$$.fragment,s),w(f.$$.fragment,s),w(M.$$.fragment,s),q=!0)},o(s){x(p.$$.fragment,s),x(i.$$.fragment,s),x(o.$$.fragment,s),x(u.$$.fragment,s),x(f.$$.fragment,s),x(M.$$.fragment,s),q=!1},d(s){s&&(e(C),e(T),e(U),e(B),e(_),e(I),e(c),e(V),e(m),e(W),e(v),e(N),e(h),e(E),e(y),e(G),e(Q),e(k)),e(r),J(p,s),J(i,s),J(o,s),J(u,s),J(f,s),J(M,s)}}}const ps='{"title":"バイアスと限界","local":"バイアスと限界","sections":[],"depth":1}';function is(S){return K(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class hs extends D{constructor(r){super(),O(this,r,is,rs,F,{})}}export{hs as component};