Buckets:

hf-doc-build
/

doc-dev

hf-doc-build/doc-dev / transformers /pr_34290 /ja /_app /immutable /nodes /11.8a488cd2.js

rtrm's picture

3 months ago

52.8 kB

	import{s as _e,o as Me,n as G}from"../chunks/scheduler.9bc65507.js";import{S as Te,i as ve,g as f,s as p,r as d,A as Ze,h as u,f as e,c as i,j as he,u as $,x as b,k as je,y as we,a,v as g,d as y,t as h,w as j}from"../chunks/index.707bf1b6.js";import{T as Hs}from"../chunks/Tip.c2ecdbf4.js";import{C as q}from"../chunks/CodeBlock.54a9f38d.js";import{F as be,M as Xt}from"../chunks/Markdown.8ab98a13.js";import{H as Q,E as qe}from"../chunks/EditOnGithub.922df6ba.js";function Je(w){let l,c='カスタム構成ファイルを辞書として保存することも、カスタム構成属性とデフォルトの構成属性の違いだけを保存することもできます！詳細については<a href="main_classes/configuration">configuration</a>のドキュメンテーションをご覧ください。';return{c(){l=f("p"),l.innerHTML=c},l(n){l=u(n,"P",{"data-svelte-h":!0}),b(l)!=="svelte-1es1e5s"&&(l.innerHTML=c)},m(n,o){a(n,l,o)},p:G,d(n){n&&e(l)}}}function Re(w){let l,c="モデルにカスタム構成属性をロードします：",n,o,_,M,W=`これにより、事前トレーニング済みの重みではなくランダムな値を持つモデルが作成されます。
	これは、トレーニングが行われるまで、まだ有用なものとして使用することはできません。
	トレーニングはコストと時間がかかるプロセスです。
	通常、トレーニングに必要なリソースの一部しか使用せず、より速くより良い結果を得るために事前学習済みモデルを使用することが良いでしょう。`,R,T,J='<a href="/docs/transformers/pr_34290/ja/main_classes/model#transformers.PreTrainedModel.from_pretrained">from_pretrained()</a>を使用して事前学習済みモデルを作成します：',m,v,U,k,x="事前学習済みの重みをロードする際、モデルが🤗 Transformersによって提供されている場合、デフォルトのモデル設定が自動的にロードされます。ただし、必要に応じてデフォルトのモデル設定属性の一部またはすべてを独自のもので置き換えることができます。",z,C,V;return o=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRNb2RlbCUwQSUwQW15X2NvbmZpZyUyMCUzRCUyMERpc3RpbEJlcnRDb25maWcuZnJvbV9wcmV0cmFpbmVkKCUyMi4lMkZ5b3VyX21vZGVsX3NhdmVfcGF0aCUyRmNvbmZpZy5qc29uJTIyKSUwQW1vZGVsJTIwJTNEJTIwRGlzdGlsQmVydE1vZGVsKG15X2NvbmZpZyk=",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertModel

	<span class="hljs-meta">>>> </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">"./your_model_save_path/config.json"</span>)
	<span class="hljs-meta">>>> </span>model = DistilBertModel(my_config)`,wrap:!1}}),v=new q({props:{code:"bW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0TW9kZWwuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:'<span class="hljs-meta">>>> </span>model = DistilBertModel.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)',wrap:!1}}),C=new q({props:{code:"bW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0TW9kZWwuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMiUyQyUyMGNvbmZpZyUzRG15X2NvbmZpZyk=",highlighted:'<span class="hljs-meta">>>> </span>model = DistilBertModel.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>, config=my_config)',wrap:!1}}),{c(){l=f("p"),l.textContent=c,n=p(),d(o.$$.fragment),_=p(),M=f("p"),M.textContent=W,R=p(),T=f("p"),T.innerHTML=J,m=p(),d(v.$$.fragment),U=p(),k=f("p"),k.textContent=x,z=p(),d(C.$$.fragment)},l(r){l=u(r,"P",{"data-svelte-h":!0}),b(l)!=="svelte-2f7gqq"&&(l.textContent=c),n=i(r),$(o.$$.fragment,r),_=i(r),M=u(r,"P",{"data-svelte-h":!0}),b(M)!=="svelte-1kzpzh3"&&(M.textContent=W),R=i(r),T=u(r,"P",{"data-svelte-h":!0}),b(T)!=="svelte-1kdq3k3"&&(T.innerHTML=J),m=i(r),$(v.$$.fragment,r),U=i(r),k=u(r,"P",{"data-svelte-h":!0}),b(k)!=="svelte-17tmn3z"&&(k.textContent=x),z=i(r),$(C.$$.fragment,r)},m(r,Z){a(r,l,Z),a(r,n,Z),g(o,r,Z),a(r,_,Z),a(r,M,Z),a(r,R,Z),a(r,T,Z),a(r,m,Z),g(v,r,Z),a(r,U,Z),a(r,k,Z),a(r,z,Z),g(C,r,Z),V=!0},p:G,i(r){V\|\|(y(o.$$.fragment,r),y(v.$$.fragment,r),y(C.$$.fragment,r),V=!0)},o(r){h(o.$$.fragment,r),h(v.$$.fragment,r),h(C.$$.fragment,r),V=!1},d(r){r&&(e(l),e(n),e(_),e(M),e(R),e(T),e(m),e(U),e(k),e(z)),j(o,r),j(v,r),j(C,r)}}}function ke(w){let l,c;return l=new Xt({props:{$$slots:{default:[Re]},$$scope:{ctx:w}}}),{c(){d(l.$$.fragment)},l(n){$(l.$$.fragment,n)},m(n,o){g(l,n,o),c=!0},p(n,o){const _={};o&2&&(_.$$scope={dirty:o,ctx:n}),l.$set(_)},i(n){c\|\|(y(l.$$.fragment,n),c=!0)},o(n){h(l.$$.fragment,n),c=!1},d(n){j(l,n)}}}function Ce(w){let l,c="モデルにカスタム設定属性をロードしてください：",n,o,_,M,W=`これにより、事前学習済みの重みではなくランダムな値を持つモデルが作成されます。
	このモデルを有用な目的にはまだ使用することはできません。トレーニングはコストがかかり、時間がかかるプロセスです。
	一般的には、トレーニングに必要なリソースの一部しか使用せずに、より速く優れた結果を得るために事前学習済みモデルを使用することが良いでしょう。`,R,T,J='<a href="/docs/transformers/pr_34290/ja/main_classes/model#transformers.TFPreTrainedModel.from_pretrained">from_pretrained()</a>を使用して事前学習済みモデルを作成します：',m,v,U,k,x="事前学習済みの重みをロードする際、モデルが🤗 Transformersによって提供されている場合、デフォルトのモデル構成が自動的にロードされます。ただし、必要であればデフォルトのモデル構成属性の一部またはすべてを独自のもので置き換えることもできます：",z,C,V;return o=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydE1vZGVsJTBBJTBBbXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyLiUyRnlvdXJfbW9kZWxfc2F2ZV9wYXRoJTJGbXlfY29uZmlnLmpzb24lMjIpJTBBdGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbChteV9jb25maWcp",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertModel

	<span class="hljs-meta">>>> </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">"./your_model_save_path/my_config.json"</span>)
	<span class="hljs-meta">>>> </span>tf_model = TFDistilBertModel(my_config)`,wrap:!1}}),v=new q({props:{code:"dGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:'<span class="hljs-meta">>>> </span>tf_model = TFDistilBertModel.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)',wrap:!1}}),C=new q({props:{code:"dGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyJTJDJTIwY29uZmlnJTNEbXlfY29uZmlnKQ==",highlighted:'<span class="hljs-meta">>>> </span>tf_model = TFDistilBertModel.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>, config=my_config)',wrap:!1}}),{c(){l=f("p"),l.textContent=c,n=p(),d(o.$$.fragment),_=p(),M=f("p"),M.textContent=W,R=p(),T=f("p"),T.innerHTML=J,m=p(),d(v.$$.fragment),U=p(),k=f("p"),k.textContent=x,z=p(),d(C.$$.fragment)},l(r){l=u(r,"P",{"data-svelte-h":!0}),b(l)!=="svelte-68i60b"&&(l.textContent=c),n=i(r),$(o.$$.fragment,r),_=i(r),M=u(r,"P",{"data-svelte-h":!0}),b(M)!=="svelte-4zczag"&&(M.textContent=W),R=i(r),T=u(r,"P",{"data-svelte-h":!0}),b(T)!=="svelte-pbyz99"&&(T.innerHTML=J),m=i(r),$(v.$$.fragment,r),U=i(r),k=u(r,"P",{"data-svelte-h":!0}),b(k)!=="svelte-1l2jp01"&&(k.textContent=x),z=i(r),$(C.$$.fragment,r)},m(r,Z){a(r,l,Z),a(r,n,Z),g(o,r,Z),a(r,_,Z),a(r,M,Z),a(r,R,Z),a(r,T,Z),a(r,m,Z),g(v,r,Z),a(r,U,Z),a(r,k,Z),a(r,z,Z),g(C,r,Z),V=!0},p:G,i(r){V\|\|(y(o.$$.fragment,r),y(v.$$.fragment,r),y(C.$$.fragment,r),V=!0)},o(r){h(o.$$.fragment,r),h(v.$$.fragment,r),h(C.$$.fragment,r),V=!1},d(r){r&&(e(l),e(n),e(_),e(M),e(R),e(T),e(m),e(U),e(k),e(z)),j(o,r),j(v,r),j(C,r)}}}function We(w){let l,c;return l=new Xt({props:{$$slots:{default:[Ce]},$$scope:{ctx:w}}}),{c(){d(l.$$.fragment)},l(n){$(l.$$.fragment,n)},m(n,o){g(l,n,o),c=!0},p(n,o){const _={};o&2&&(_.$$scope={dirty:o,ctx:n}),l.$set(_)},i(n){c\|\|(y(l.$$.fragment,n),c=!0)},o(n){h(l.$$.fragment,n),c=!1},d(n){j(l,n)}}}function Ue(w){let l,c="たとえば、<code>DistilBertForSequenceClassification</code>は、シーケンス分類ヘッドを持つベースのDistilBERTモデルです。シーケンス分類ヘッドは、プールされた出力の上にある線形層です。",n,o,_,M,W=`新しいタスクにこのチェックポイントを簡単に再利用するには、異なるモデルヘッドに切り替えます。
	質問応答タスクの場合、<code>DistilBertForQuestionAnswering</code> モデルヘッドを使用します。
	質問応答ヘッドはシーケンス分類ヘッドと類似していますが、隠れ状態の出力の上に線形層があります。`,R,T,J;return o=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRGb3JTZXF1ZW5jZUNsYXNzaWZpY2F0aW9uJTBBJTBBbW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0Rm9yU2VxdWVuY2VDbGFzc2lmaWNhdGlvbi5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertForSequenceClassification

	<span class="hljs-meta">>>> </span>model = DistilBertForSequenceClassification.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),T=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRGb3JRdWVzdGlvbkFuc3dlcmluZyUwQSUwQW1vZGVsJTIwJTNEJTIwRGlzdGlsQmVydEZvclF1ZXN0aW9uQW5zd2VyaW5nLmZyb21fcHJldHJhaW5lZCglMjJkaXN0aWxiZXJ0JTJGZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQlMjIp",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertForQuestionAnswering

	<span class="hljs-meta">>>> </span>model = DistilBertForQuestionAnswering.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),{c(){l=f("p"),l.innerHTML=c,n=p(),d(o.$$.fragment),_=p(),M=f("p"),M.innerHTML=W,R=p(),d(T.$$.fragment)},l(m){l=u(m,"P",{"data-svelte-h":!0}),b(l)!=="svelte-1k4xv3d"&&(l.innerHTML=c),n=i(m),$(o.$$.fragment,m),_=i(m),M=u(m,"P",{"data-svelte-h":!0}),b(M)!=="svelte-1c4ilc3"&&(M.innerHTML=W),R=i(m),$(T.$$.fragment,m)},m(m,v){a(m,l,v),a(m,n,v),g(o,m,v),a(m,_,v),a(m,M,v),a(m,R,v),g(T,m,v),J=!0},p:G,i(m){J\|\|(y(o.$$.fragment,m),y(T.$$.fragment,m),J=!0)},o(m){h(o.$$.fragment,m),h(T.$$.fragment,m),J=!1},d(m){m&&(e(l),e(n),e(_),e(M),e(R)),j(o,m),j(T,m)}}}function Ve(w){let l,c;return l=new Xt({props:{$$slots:{default:[Ue]},$$scope:{ctx:w}}}),{c(){d(l.$$.fragment)},l(n){$(l.$$.fragment,n)},m(n,o){g(l,n,o),c=!0},p(n,o){const _={};o&2&&(_.$$scope={dirty:o,ctx:n}),l.$set(_)},i(n){c\|\|(y(l.$$.fragment,n),c=!0)},o(n){h(l.$$.fragment,n),c=!1},d(n){j(l,n)}}}function xe(w){let l,c="例えば、<code>TFDistilBertForSequenceClassification</code>は、シーケンス分類ヘッドを持つベースのDistilBERTモデルです。シーケンス分類ヘッドは、プールされた出力の上にある線形層です。",n,o,_,M,W=`別のタスクにこのチェックポイントを簡単に再利用することができ、異なるモデルヘッドに切り替えるだけです。
	質問応答タスクの場合、<code>TFDistilBertForQuestionAnswering</code>モデルヘッドを使用します。
	質問応答ヘッドはシーケンス分類ヘッドと似ていますが、隠れ状態の出力の上に線形層があるだけです。`,R,T,J;return o=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24lMEElMEF0Zl9tb2RlbCUyMCUzRCUyMFRGRGlzdGlsQmVydEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24uZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertForSequenceClassification

	<span class="hljs-meta">>>> </span>tf_model = TFDistilBertForSequenceClassification.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),T=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydEZvclF1ZXN0aW9uQW5zd2VyaW5nJTBBJTBBdGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRGb3JRdWVzdGlvbkFuc3dlcmluZy5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertForQuestionAnswering

	<span class="hljs-meta">>>> </span>tf_model = TFDistilBertForQuestionAnswering.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),{c(){l=f("p"),l.innerHTML=c,n=p(),d(o.$$.fragment),_=p(),M=f("p"),M.innerHTML=W,R=p(),d(T.$$.fragment)},l(m){l=u(m,"P",{"data-svelte-h":!0}),b(l)!=="svelte-1l1ixjb"&&(l.innerHTML=c),n=i(m),$(o.$$.fragment,m),_=i(m),M=u(m,"P",{"data-svelte-h":!0}),b(M)!=="svelte-10dgokn"&&(M.innerHTML=W),R=i(m),$(T.$$.fragment,m)},m(m,v){a(m,l,v),a(m,n,v),g(o,m,v),a(m,_,v),a(m,M,v),a(m,R,v),g(T,m,v),J=!0},p:G,i(m){J\|\|(y(o.$$.fragment,m),y(T.$$.fragment,m),J=!0)},o(m){h(o.$$.fragment,m),h(T.$$.fragment,m),J=!1},d(m){m&&(e(l),e(n),e(_),e(M),e(R)),j(o,m),j(T,m)}}}function ze(w){let l,c;return l=new Xt({props:{$$slots:{default:[xe]},$$scope:{ctx:w}}}),{c(){d(l.$$.fragment)},l(n){$(l.$$.fragment,n)},m(n,o){g(l,n,o),c=!0},p(n,o){const _={};o&2&&(_.$$scope={dirty:o,ctx:n}),l.$set(_)},i(n){c\|\|(y(l.$$.fragment,n),c=!0)},o(n){h(l.$$.fragment,n),c=!1},d(n){j(l,n)}}}function Ge(w){let l,c=`すべてのモデルが高速なトークナイザをサポートしているわけではありません。
	モデルが高速なトークナイザをサポートしているかどうかを確認するには、この<a href="index#supported-frameworks">表</a>をご覧ください。`;return{c(){l=f("p"),l.innerHTML=c},l(n){l=u(n,"P",{"data-svelte-h":!0}),b(l)!=="svelte-10ryv2l"&&(l.innerHTML=c)},m(n,o){a(n,l,o)},p:G,d(n){n&&e(l)}}}function Fe(w){let l,c='デフォルトでは、<a href="/docs/transformers/pr_34290/ja/model_doc/auto#transformers.AutoTokenizer">AutoTokenizer</a>は高速なトークナイザを読み込もうとします。<code>from_pretrained</code>内で<code>use_fast=False</code>を設定することで、この動作を無効にすることができます。';return{c(){l=f("p"),l.innerHTML=c},l(n){l=u(n,"P",{"data-svelte-h":!0}),b(l)!=="svelte-q7sroi"&&(l.innerHTML=c)},m(n,o){a(n,l,o)},p:G,d(n){n&&e(l)}}}function He(w){let l,c="カスタマイズを必要としない場合、モデルのデフォルトの画像プロセッサパラメータをロードするには、単純に<code>from_pretrained</code>メソッドを使用してください。";return{c(){l=f("p"),l.innerHTML=c},l(n){l=u(n,"P",{"data-svelte-h":!0}),b(l)!=="svelte-hj79vi"&&(l.innerHTML=c)},m(n,o){a(n,l,o)},p:G,d(n){n&&e(l)}}}function Xe(w){let l,c="カスタマイズを行わない場合、モデルのデフォルトの特徴抽出器パラメーターをロードするには、単に <code>from_pretrained</code> メソッドを使用してください。";return{c(){l=f("p"),l.innerHTML=c},l(n){l=u(n,"P",{"data-svelte-h":!0}),b(l)!=="svelte-bb0lk7"&&(l.innerHTML=c)},m(n,o){a(n,l,o)},p:G,d(n){n&&e(l)}}}function Be(w){let l,c,n,o,_,M,W,R='<a href="model_doc/auto"><code>AutoClass</code></a>は、モデルのアーキテクチャを自動的に推論し、事前学習済みの設定と重みをダウンロードします。一般的には、チェックポイントに依存しないコードを生成するために<code>AutoClass</code>を使用することをお勧めします。ただし、特定のモデルパラメータに対する制御をより詳細に行いたいユーザーは、いくつかの基本クラスからカスタム🤗 Transformersモデルを作成できます。これは、🤗 Transformersモデルを研究、トレーニング、または実験する興味があるユーザーに特に役立つかもしれません。このガイドでは、<code>AutoClass</code>を使用しないカスタムモデルの作成について詳しく説明します。次の方法を学びます：',T,J,m="<li>モデルの設定をロードおよびカスタマイズする。</li> <li>モデルアーキテクチャを作成する。</li> <li>テキスト用の遅いトークナイザと高速トークナイザを作成する。</li> <li>ビジョンタスク用の画像プロセッサを作成する。</li> <li>オーディオタスク用の特徴抽出器を作成する。</li> <li>マルチモーダルタスク用のプロセッサを作成する。</li>",v,U,k,x,z='<a href="main_classes/configuration">設定</a>は、モデルの特定の属性を指します。各モデルの設定には異なる属性があります。たとえば、すべてのNLPモデルには、<code>hidden_size</code>、<code>num_attention_heads</code>、<code>num_hidden_layers</code>、および<code>vocab_size</code>属性が共通してあります。これらの属性は、モデルを構築するための注意ヘッドの数や隠れ層の数を指定します。',C,V,r='<a href="model_doc/distilbert">DistilBERT</a>をより詳しく調べるために、<code>DistilBertConfig</code>にアクセスしてその属性を調べてみましょう：',Z,P,Xs,N,Bt=`<code>DistilBertConfig</code>は、基本の<code>DistilBertModel</code>を構築するために使用されるすべてのデフォルト属性を表示します。
	すべての属性はカスタマイズ可能で、実験のためのスペースを提供します。例えば、デフォルトのモデルをカスタマイズして以下のようなことができます：`,Bs,I,Et="<li><code>activation</code>パラメータで異なる活性化関数を試す。</li> <li><code>attention_dropout</code>パラメータで注意確率の高いドロップアウト率を使用する。</li>",Es,D,Ys,S,Yt='事前学習済みモデルの属性は、<a href="/docs/transformers/pr_34290/ja/main_classes/configuration#transformers.PretrainedConfig.from_pretrained">from_pretrained()</a> 関数で変更できます：',Ls,A,Qs,K,Lt='Once you are satisfied with your model configuration, you can save it with <a href="/docs/transformers/pr_34290/ja/main_classes/configuration#transformers.PretrainedConfig.save_pretrained">PretrainedConfig.save_pretrained()</a>. Your configuration file is stored as a JSON file in the specified save directory.',Ps,O,Ns,ss,Qt='設定ファイルを再利用するには、<a href="/docs/transformers/pr_34290/ja/main_classes/configuration#transformers.PretrainedConfig.from_pretrained">from_pretrained()</a>を使用してそれをロードします：',Is,ts,Ds,F,Ss,es,As,as,Pt=`次のステップは、<a href="main_classes/models">モデル</a>を作成することです。モデル（アーキテクチャとも緩く言われることがあります）は、各レイヤーが何をしているか、どの操作が行われているかを定義します。構成からの <code>num_hidden_layers</code> のような属性はアーキテクチャを定義するために使用されます。
	すべてのモデルは <a href="/docs/transformers/pr_34290/ja/main_classes/model#transformers.PreTrainedModel">PreTrainedModel</a> をベースクラスとし、入力埋め込みのリサイズやセルフアテンションヘッドのプルーニングなど、共通のメソッドがいくつかあります。
	さらに、すべてのモデルは <a href="https://pytorch.org/docs/stable/generated/torch.nn.Module.html" rel="nofollow"><code>torch.nn.Module</code></a>、<a href="https://www.tensorflow.org/api_docs/python/tf/keras/Model" rel="nofollow"><code>tf.keras.Model</code></a>、または <a href="https://flax.readthedocs.io/en/latest/api_reference/flax.linen/module.html" rel="nofollow"><code>flax.linen.Module</code></a> のいずれかのサブクラスでもあります。つまり、モデルはそれぞれのフレームワークの使用法と互換性があります。`,Ks,H,Os,ls,st,ns,Nt="この時点で、ベースのDistilBERTモデルがあり、これは隠れた状態を出力します。隠れた状態はモデルのヘッドへの入力として渡され、最終的な出力を生成します。🤗 Transformersは、モデルがそのタスクをサポートしている限り、各タスクに対応する異なるモデルヘッドを提供します（つまり、DistilBERTを翻訳のようなシーケンス対シーケンスタスクに使用することはできません）。",tt,X,et,rs,at,ps,It=`テキストデータをモデルで使用する前に必要な最後のベースクラスは、生のテキストをテンソルに変換するための<a href="main_classes/tokenizer">トークナイザ</a>です。
	🤗 Transformersで使用できる2つのタイプのトークナイザがあります：`,lt,is,Dt=`<li><a href="/docs/transformers/pr_34290/ja/main_classes/tokenizer#transformers.PreTrainedTokenizer">PreTrainedTokenizer</a>: トークナイザのPython実装です。</li> <li><a href="/docs/transformers/pr_34290/ja/main_classes/tokenizer#transformers.PreTrainedTokenizerFast">PreTrainedTokenizerFast</a>: Rustベースの<a href="https://huggingface.co/docs/tokenizers/python/latest/" rel="nofollow">🤗 Tokenizer</a>ライブラリからのトークナイザです。
	このトークナイザのタイプは、そのRust実装により、特にバッチトークナイゼーション中に高速です。
	高速なトークナイザは、トークンを元の単語または文字にマッピングする<em>オフセットマッピング</em>などの追加メソッドも提供します。</li>`,nt,os,St="両方のトークナイザは、エンコードとデコード、新しいトークンの追加、特別なトークンの管理など、共通のメソッドをサポートしています。",rt,B,pt,ms,At="独自のトークナイザをトレーニングした場合、<em>ボキャブラリー</em>ファイルからトークナイザを作成できます。",it,cs,ot,fs,Kt=`カスタムトークナイザーから生成される語彙は、事前学習済みモデルのトークナイザーが生成する語彙とは異なることを覚えておくことは重要です。
	事前学習済みモデルを使用する場合は、事前学習済みモデルの語彙を使用する必要があります。そうしないと、入力が意味をなさなくなります。
	<code>DistilBertTokenizer</code>クラスを使用して、事前学習済みモデルの語彙を持つトークナイザーを作成します:`,mt,us,ct,ds,Ot="<code>DistilBertTokenizerFast</code>クラスを使用して高速なトークナイザを作成します：",ft,$s,ut,E,dt,gs,$t,ys,se='画像プロセッサはビジョン入力を処理します。これは基本クラス <a href="/docs/transformers/pr_34290/ja/internal/image_processing_utils#transformers.ImageProcessingMixin">ImageProcessingMixin</a> を継承しています。',gt,hs,te=`使用するには、使用しているモデルに関連付けられた画像プロセッサを作成します。
	たとえば、画像分類に<a href="model_doc/vit">ViT</a>を使用する場合、デフォルトの <code>ViTImageProcessor</code> を作成します。`,yt,js,ht,Y,jt,bs,ee="<code>ViTImageProcessor</code>のパラメータを変更して、カスタムの画像プロセッサを作成できます：",bt,_s,_t,Ms,Mt,Ts,ae='フィーチャー抽出器は音声入力を処理します。これは基本的な <a href="/docs/transformers/pr_34290/ja/main_classes/feature_extractor#transformers.FeatureExtractionMixin">FeatureExtractionMixin</a> クラスから継承され、音声入力を処理するための <a href="/docs/transformers/pr_34290/ja/main_classes/feature_extractor#transformers.SequenceFeatureExtractor">SequenceFeatureExtractor</a> クラスからも継承されることがあります。',Tt,vs,le='使用するには、モデルに関連付けられたフィーチャー抽出器を作成します。たとえば、音声分類に <a href="model_doc/wav2vec2">Wav2Vec2</a> を使用する場合、デフォルトの <code>Wav2Vec2FeatureExtractor</code> を作成します。',vt,Zs,Zt,L,wt,ws,ne="<code>Wav2Vec2FeatureExtractor</code> のパラメーターを変更して、カスタム特徴抽出器を作成できます:",qt,qs,Jt,Js,Rt,Rs,re=`マルチモーダルタスクをサポートするモデルに対して、🤗 Transformersは便利なプロセッサクラスを提供しています。
	このプロセッサクラスは、特徴量抽出器やトークナイザなどの処理クラスを便利にラップし、単一のオブジェクトに結合します。
	たとえば、自動音声認識タスク（ASR）用に<code>Wav2Vec2Processor</code>を使用してみましょう。
	ASRは音声をテキストに転写するタスクであり、音声入力を処理するために特徴量抽出器とトークナイザが必要です。`,kt,ks,pe="音声入力を処理する特徴量抽出器を作成します：",Ct,Cs,Wt,Ws,ie="テキスト入力を処理するトークナイザを作成します:",Ut,Us,Vt,Vs,oe="<code>Wav2Vec2Processor</code>で特徴量抽出器とトークナイザを組み合わせます：",xt,xs,zt,zs,me="二つの基本クラス - 設定とモデル - および追加の前処理クラス（トークナイザ、画像プロセッサ、特徴抽出器、またはプロセッサ）を使用することで、🤗 Transformers がサポートするモデルのいずれかを作成できます。これらの基本クラスは設定可能で、必要な特性を使用できます。モデルをトレーニング用に簡単にセットアップしたり、既存の事前学習済みモデルを微調整することができます。",Gt,Gs,Ft,Fs,Ht;return _=new Q({props:{title:"Create a custom architecture",local:"create-a-custom-architecture",headingTag:"h1"}}),U=new Q({props:{title:"Configuration",local:"configuration",headingTag:"h2"}}),P=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRDb25maWclMEElMEFjb25maWclMjAlM0QlMjBEaXN0aWxCZXJ0Q29uZmlnKCklMEFwcmludChjb25maWcp",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertConfig

	<span class="hljs-meta">>>> </span>config = DistilBertConfig()
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(config)
	DistilBertConfig {
	<span class="hljs-string">"activation"</span>: <span class="hljs-string">"gelu"</span>,
	<span class="hljs-string">"attention_dropout"</span>: <span class="hljs-number">0.1</span>,
	<span class="hljs-string">"dim"</span>: <span class="hljs-number">768</span>,
	<span class="hljs-string">"dropout"</span>: <span class="hljs-number">0.1</span>,
	<span class="hljs-string">"hidden_dim"</span>: <span class="hljs-number">3072</span>,
	<span class="hljs-string">"initializer_range"</span>: <span class="hljs-number">0.02</span>,
	<span class="hljs-string">"max_position_embeddings"</span>: <span class="hljs-number">512</span>,
	<span class="hljs-string">"model_type"</span>: <span class="hljs-string">"distilbert"</span>,
	<span class="hljs-string">"n_heads"</span>: <span class="hljs-number">12</span>,
	<span class="hljs-string">"n_layers"</span>: <span class="hljs-number">6</span>,
	<span class="hljs-string">"pad_token_id"</span>: <span class="hljs-number">0</span>,
	<span class="hljs-string">"qa_dropout"</span>: <span class="hljs-number">0.1</span>,
	<span class="hljs-string">"seq_classif_dropout"</span>: <span class="hljs-number">0.2</span>,
	<span class="hljs-string">"sinusoidal_pos_embds"</span>: false,
	<span class="hljs-string">"transformers_version"</span>: <span class="hljs-string">"4.16.2"</span>,
	<span class="hljs-string">"vocab_size"</span>: <span class="hljs-number">30522</span>
	}`,wrap:!1}}),D=new q({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZyhhY3RpdmF0aW9uJTNEJTIycmVsdSUyMiUyQyUyMGF0dGVudGlvbl9kcm9wb3V0JTNEMC40KSUwQXByaW50KG15X2NvbmZpZyk=",highlighted:`<span class="hljs-meta">>>> </span>my_config = DistilBertConfig(activation=<span class="hljs-string">"relu"</span>, attention_dropout=<span class="hljs-number">0.4</span>)
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(my_config)
	DistilBertConfig {
	<span class="hljs-string">"activation"</span>: <span class="hljs-string">"relu"</span>,
	<span class="hljs-string">"attention_dropout"</span>: <span class="hljs-number">0.4</span>,
	<span class="hljs-string">"dim"</span>: <span class="hljs-number">768</span>,
	<span class="hljs-string">"dropout"</span>: <span class="hljs-number">0.1</span>,
	<span class="hljs-string">"hidden_dim"</span>: <span class="hljs-number">3072</span>,
	<span class="hljs-string">"initializer_range"</span>: <span class="hljs-number">0.02</span>,
	<span class="hljs-string">"max_position_embeddings"</span>: <span class="hljs-number">512</span>,
	<span class="hljs-string">"model_type"</span>: <span class="hljs-string">"distilbert"</span>,
	<span class="hljs-string">"n_heads"</span>: <span class="hljs-number">12</span>,
	<span class="hljs-string">"n_layers"</span>: <span class="hljs-number">6</span>,
	<span class="hljs-string">"pad_token_id"</span>: <span class="hljs-number">0</span>,
	<span class="hljs-string">"qa_dropout"</span>: <span class="hljs-number">0.1</span>,
	<span class="hljs-string">"seq_classif_dropout"</span>: <span class="hljs-number">0.2</span>,
	<span class="hljs-string">"sinusoidal_pos_embds"</span>: false,
	<span class="hljs-string">"transformers_version"</span>: <span class="hljs-string">"4.16.2"</span>,
	<span class="hljs-string">"vocab_size"</span>: <span class="hljs-number">30522</span>
	}`,wrap:!1}}),A=new q({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyJTJDJTIwYWN0aXZhdGlvbiUzRCUyMnJlbHUlMjIlMkMlMjBhdHRlbnRpb25fZHJvcG91dCUzRDAuNCk=",highlighted:'<span class="hljs-meta">>>> </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>, activation=<span class="hljs-string">"relu"</span>, attention_dropout=<span class="hljs-number">0.4</span>)',wrap:!1}}),O=new q({props:{code:"bXlfY29uZmlnLnNhdmVfcHJldHJhaW5lZChzYXZlX2RpcmVjdG9yeSUzRCUyMi4lMkZ5b3VyX21vZGVsX3NhdmVfcGF0aCUyMik=",highlighted:'<span class="hljs-meta">>>> </span>my_config.save_pretrained(save_directory=<span class="hljs-string">"./your_model_save_path"</span>)',wrap:!1}}),ts=new q({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyLiUyRnlvdXJfbW9kZWxfc2F2ZV9wYXRoJTJGY29uZmlnLmpzb24lMjIp",highlighted:'<span class="hljs-meta">>>> </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">"./your_model_save_path/config.json"</span>)',wrap:!1}}),F=new Hs({props:{$$slots:{default:[Je]},$$scope:{ctx:w}}}),es=new Q({props:{title:"Model",local:"model",headingTag:"h2"}}),H=new be({props:{pytorch:!0,tensorflow:!0,jax:!1,$$slots:{tensorflow:[We],pytorch:[ke]},$$scope:{ctx:w}}}),ls=new Q({props:{title:"Model heads",local:"model-heads",headingTag:"h3"}}),X=new be({props:{pytorch:!0,tensorflow:!0,jax:!1,$$slots:{tensorflow:[ze],pytorch:[Ve]},$$scope:{ctx:w}}}),rs=new Q({props:{title:"Tokenizer",local:"tokenizer",headingTag:"h2"}}),B=new Hs({props:{warning:!0,$$slots:{default:[Ge]},$$scope:{ctx:w}}}),cs=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXIlMEElMEFteV90b2tlbml6ZXIlMjAlM0QlMjBEaXN0aWxCZXJ0VG9rZW5pemVyKHZvY2FiX2ZpbGUlM0QlMjJteV92b2NhYl9maWxlLnR4dCUyMiUyQyUyMGRvX2xvd2VyX2Nhc2UlM0RGYWxzZSUyQyUyMHBhZGRpbmdfc2lkZSUzRCUyMmxlZnQlMjIp",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizer

	<span class="hljs-meta">>>> </span>my_tokenizer = DistilBertTokenizer(vocab_file=<span class="hljs-string">"my_vocab_file.txt"</span>, do_lower_case=<span class="hljs-literal">False</span>, padding_side=<span class="hljs-string">"left"</span>)`,wrap:!1}}),us=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXIlMEElMEFzbG93X3Rva2VuaXplciUyMCUzRCUyMERpc3RpbEJlcnRUb2tlbml6ZXIuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizer

	<span class="hljs-meta">>>> </span>slow_tokenizer = DistilBertTokenizer.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),$s=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXJGYXN0JTBBJTBBZmFzdF90b2tlbml6ZXIlMjAlM0QlMjBEaXN0aWxCZXJ0VG9rZW5pemVyRmFzdC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizerFast

	<span class="hljs-meta">>>> </span>fast_tokenizer = DistilBertTokenizerFast.from_pretrained(<span class="hljs-string">"distilbert/distilbert-base-uncased"</span>)`,wrap:!1}}),E=new Hs({props:{$$slots:{default:[Fe]},$$scope:{ctx:w}}}),gs=new Q({props:{title:"Image Processor",local:"image-processor",headingTag:"h2"}}),js=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFZpVEltYWdlUHJvY2Vzc29yJTBBJTBBdml0X2V4dHJhY3RvciUyMCUzRCUyMFZpVEltYWdlUHJvY2Vzc29yKCklMEFwcmludCh2aXRfZXh0cmFjdG9yKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> ViTImageProcessor

	<span class="hljs-meta">>>> </span>vit_extractor = ViTImageProcessor()
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(vit_extractor)
	ViTImageProcessor {
	<span class="hljs-string">"do_normalize"</span>: true,
	<span class="hljs-string">"do_resize"</span>: true,
	<span class="hljs-string">"image_processor_type"</span>: <span class="hljs-string">"ViTImageProcessor"</span>,
	<span class="hljs-string">"image_mean"</span>: [
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>
	],
	<span class="hljs-string">"image_std"</span>: [
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>
	],
	<span class="hljs-string">"resample"</span>: <span class="hljs-number">2</span>,
	<span class="hljs-string">"size"</span>: <span class="hljs-number">224</span>
	}`,wrap:!1}}),Y=new Hs({props:{$$slots:{default:[He]},$$scope:{ctx:w}}}),_s=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFZpVEltYWdlUHJvY2Vzc29yJTBBJTBBbXlfdml0X2V4dHJhY3RvciUyMCUzRCUyMFZpVEltYWdlUHJvY2Vzc29yKHJlc2FtcGxlJTNEJTIyUElMLkltYWdlLkJPWCUyMiUyQyUyMGRvX25vcm1hbGl6ZSUzREZhbHNlJTJDJTIwaW1hZ2VfbWVhbiUzRCU1QjAuMyUyQyUyMDAuMyUyQyUyMDAuMyU1RCklMEFwcmludChteV92aXRfZXh0cmFjdG9yKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> ViTImageProcessor

	<span class="hljs-meta">>>> </span>my_vit_extractor = ViTImageProcessor(resample=<span class="hljs-string">"PIL.Image.BOX"</span>, do_normalize=<span class="hljs-literal">False</span>, image_mean=[<span class="hljs-number">0.3</span>, <span class="hljs-number">0.3</span>, <span class="hljs-number">0.3</span>])
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(my_vit_extractor)
	ViTImageProcessor {
	<span class="hljs-string">"do_normalize"</span>: false,
	<span class="hljs-string">"do_resize"</span>: true,
	<span class="hljs-string">"image_processor_type"</span>: <span class="hljs-string">"ViTImageProcessor"</span>,
	<span class="hljs-string">"image_mean"</span>: [
	<span class="hljs-number">0.3</span>,
	<span class="hljs-number">0.3</span>,
	<span class="hljs-number">0.3</span>
	],
	<span class="hljs-string">"image_std"</span>: [
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>,
	<span class="hljs-number">0.5</span>
	],
	<span class="hljs-string">"resample"</span>: <span class="hljs-string">"PIL.Image.BOX"</span>,
	<span class="hljs-string">"size"</span>: <span class="hljs-number">224</span>
	}`,wrap:!1}}),Ms=new Q({props:{title:"Feature Extractor",local:"feature-extractor",headingTag:"h2"}}),Zs=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyRmVhdHVyZUV4dHJhY3RvciUwQSUwQXcydjJfZXh0cmFjdG9yJTIwJTNEJTIwV2F2MlZlYzJGZWF0dXJlRXh0cmFjdG9yKCklMEFwcmludCh3MnYyX2V4dHJhY3Rvcik=",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2FeatureExtractor

	<span class="hljs-meta">>>> </span>w2v2_extractor = Wav2Vec2FeatureExtractor()
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(w2v2_extractor)
	Wav2Vec2FeatureExtractor {
	<span class="hljs-string">"do_normalize"</span>: true,
	<span class="hljs-string">"feature_extractor_type"</span>: <span class="hljs-string">"Wav2Vec2FeatureExtractor"</span>,
	<span class="hljs-string">"feature_size"</span>: <span class="hljs-number">1</span>,
	<span class="hljs-string">"padding_side"</span>: <span class="hljs-string">"right"</span>,
	<span class="hljs-string">"padding_value"</span>: <span class="hljs-number">0.0</span>,
	<span class="hljs-string">"return_attention_mask"</span>: false,
	<span class="hljs-string">"sampling_rate"</span>: <span class="hljs-number">16000</span>
	}`,wrap:!1}}),L=new Hs({props:{$$slots:{default:[Xe]},$$scope:{ctx:w}}}),qs=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyRmVhdHVyZUV4dHJhY3RvciUwQSUwQXcydjJfZXh0cmFjdG9yJTIwJTNEJTIwV2F2MlZlYzJGZWF0dXJlRXh0cmFjdG9yKHNhbXBsaW5nX3JhdGUlM0Q4MDAwJTJDJTIwZG9fbm9ybWFsaXplJTNERmFsc2UpJTBBcHJpbnQodzJ2Ml9leHRyYWN0b3Ip",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2FeatureExtractor

	<span class="hljs-meta">>>> </span>w2v2_extractor = Wav2Vec2FeatureExtractor(sampling_rate=<span class="hljs-number">8000</span>, do_normalize=<span class="hljs-literal">False</span>)
	<span class="hljs-meta">>>> </span><span class="hljs-built_in">print</span>(w2v2_extractor)
	Wav2Vec2FeatureExtractor {
	<span class="hljs-string">"do_normalize"</span>: false,
	<span class="hljs-string">"feature_extractor_type"</span>: <span class="hljs-string">"Wav2Vec2FeatureExtractor"</span>,
	<span class="hljs-string">"feature_size"</span>: <span class="hljs-number">1</span>,
	<span class="hljs-string">"padding_side"</span>: <span class="hljs-string">"right"</span>,
	<span class="hljs-string">"padding_value"</span>: <span class="hljs-number">0.0</span>,
	<span class="hljs-string">"return_attention_mask"</span>: false,
	<span class="hljs-string">"sampling_rate"</span>: <span class="hljs-number">8000</span>
	}`,wrap:!1}}),Js=new Q({props:{title:"Processor",local:"processor",headingTag:"h2"}}),Cs=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyRmVhdHVyZUV4dHJhY3RvciUwQSUwQWZlYXR1cmVfZXh0cmFjdG9yJTIwJTNEJTIwV2F2MlZlYzJGZWF0dXJlRXh0cmFjdG9yKHBhZGRpbmdfdmFsdWUlM0QxLjAlMkMlMjBkb19ub3JtYWxpemUlM0RUcnVlKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2FeatureExtractor

	<span class="hljs-meta">>>> </span>feature_extractor = Wav2Vec2FeatureExtractor(padding_value=<span class="hljs-number">1.0</span>, do_normalize=<span class="hljs-literal">True</span>)`,wrap:!1}}),Us=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyQ1RDVG9rZW5pemVyJTBBJTBBdG9rZW5pemVyJTIwJTNEJTIwV2F2MlZlYzJDVENUb2tlbml6ZXIodm9jYWJfZmlsZSUzRCUyMm15X3ZvY2FiX2ZpbGUudHh0JTIyKQ==",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2CTCTokenizer

	<span class="hljs-meta">>>> </span>tokenizer = Wav2Vec2CTCTokenizer(vocab_file=<span class="hljs-string">"my_vocab_file.txt"</span>)`,wrap:!1}}),xs=new q({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyUHJvY2Vzc29yJTBBJTBBcHJvY2Vzc29yJTIwJTNEJTIwV2F2MlZlYzJQcm9jZXNzb3IoZmVhdHVyZV9leHRyYWN0b3IlM0RmZWF0dXJlX2V4dHJhY3RvciUyQyUyMHRva2VuaXplciUzRHRva2VuaXplcik=",highlighted:`<span class="hljs-meta">>>> </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2Processor

	<span class="hljs-meta">>>> </span>processor = Wav2Vec2Processor(feature_extractor=feature_extractor, tokenizer=tokenizer)`,wrap:!1}}),Gs=new qe({props:{source:"https://github.com/huggingface/transformers/blob/main/docs/source/ja/create_a_model.md"}}),{c(){l=f("meta"),c=p(),n=f("p"),o=p(),d(_.$$.fragment),M=p(),W=f("p"),W.innerHTML=R,T=p(),J=f("ul"),J.innerHTML=m,v=p(),d(U.$$.fragment),k=p(),x=f("p"),x.innerHTML=z,C=p(),V=f("p"),V.innerHTML=r,Z=p(),d(P.$$.fragment),Xs=p(),N=f("p"),N.innerHTML=Bt,Bs=p(),I=f("ul"),I.innerHTML=Et,Es=p(),d(D.$$.fragment),Ys=p(),S=f("p"),S.innerHTML=Yt,Ls=p(),d(A.$$.fragment),Qs=p(),K=f("p"),K.innerHTML=Lt,Ps=p(),d(O.$$.fragment),Ns=p(),ss=f("p"),ss.innerHTML=Qt,Is=p(),d(ts.$$.fragment),Ds=p(),d(F.$$.fragment),Ss=p(),d(es.$$.fragment),As=p(),as=f("p"),as.innerHTML=Pt,Ks=p(),d(H.$$.fragment),Os=p(),d(ls.$$.fragment),st=p(),ns=f("p"),ns.textContent=Nt,tt=p(),d(X.$$.fragment),et=p(),d(rs.$$.fragment),at=p(),ps=f("p"),ps.innerHTML=It,lt=p(),is=f("ul"),is.innerHTML=Dt,nt=p(),os=f("p"),os.textContent=St,rt=p(),d(B.$$.fragment),pt=p(),ms=f("p"),ms.innerHTML=At,it=p(),d(cs.$$.fragment),ot=p(),fs=f("p"),fs.innerHTML=Kt,mt=p(),d(us.$$.fragment),ct=p(),ds=f("p"),ds.innerHTML=Ot,ft=p(),d($s.$$.fragment),ut=p(),d(E.$$.fragment),dt=p(),d(gs.$$.fragment),$t=p(),ys=f("p"),ys.innerHTML=se,gt=p(),hs=f("p"),hs.innerHTML=te,yt=p(),d(js.$$.fragment),ht=p(),d(Y.$$.fragment),jt=p(),bs=f("p"),bs.innerHTML=ee,bt=p(),d(_s.$$.fragment),_t=p(),d(Ms.$$.fragment),Mt=p(),Ts=f("p"),Ts.innerHTML=ae,Tt=p(),vs=f("p"),vs.innerHTML=le,vt=p(),d(Zs.$$.fragment),Zt=p(),d(L.$$.fragment),wt=p(),ws=f("p"),ws.innerHTML=ne,qt=p(),d(qs.$$.fragment),Jt=p(),d(Js.$$.fragment),Rt=p(),Rs=f("p"),Rs.innerHTML=re,kt=p(),ks=f("p"),ks.textContent=pe,Ct=p(),d(Cs.$$.fragment),Wt=p(),Ws=f("p"),Ws.textContent=ie,Ut=p(),d(Us.$$.fragment),Vt=p(),Vs=f("p"),Vs.innerHTML=oe,xt=p(),d(xs.$$.fragment),zt=p(),zs=f("p"),zs.textContent=me,Gt=p(),d(Gs.$$.fragment),Ft=p(),Fs=f("p"),this.h()},l(s){const t=Ze("svelte-u9bgzb",document.head);l=u(t,"META",{name:!0,content:!0}),t.forEach(e),c=i(s),n=u(s,"P",{}),he(n).forEach(e),o=i(s),$(_.$$.fragment,s),M=i(s),W=u(s,"P",{"data-svelte-h":!0}),b(W)!=="svelte-mcpcj1"&&(W.innerHTML=R),T=i(s),J=u(s,"UL",{"data-svelte-h":!0}),b(J)!=="svelte-1w0j0s8"&&(J.innerHTML=m),v=i(s),$(U.$$.fragment,s),k=i(s),x=u(s,"P",{"data-svelte-h":!0}),b(x)!=="svelte-m9ensk"&&(x.innerHTML=z),C=i(s),V=u(s,"P",{"data-svelte-h":!0}),b(V)!=="svelte-19cbxp1"&&(V.innerHTML=r),Z=i(s),$(P.$$.fragment,s),Xs=i(s),N=u(s,"P",{"data-svelte-h":!0}),b(N)!=="svelte-1jv2s9s"&&(N.innerHTML=Bt),Bs=i(s),I=u(s,"UL",{"data-svelte-h":!0}),b(I)!=="svelte-n8ze8y"&&(I.innerHTML=Et),Es=i(s),$(D.$$.fragment,s),Ys=i(s),S=u(s,"P",{"data-svelte-h":!0}),b(S)!=="svelte-1y5b78z"&&(S.innerHTML=Yt),Ls=i(s),$(A.$$.fragment,s),Qs=i(s),K=u(s,"P",{"data-svelte-h":!0}),b(K)!=="svelte-1a6ai82"&&(K.innerHTML=Lt),Ps=i(s),$(O.$$.fragment,s),Ns=i(s),ss=u(s,"P",{"data-svelte-h":!0}),b(ss)!=="svelte-1qqcqju"&&(ss.innerHTML=Qt),Is=i(s),$(ts.$$.fragment,s),Ds=i(s),$(F.$$.fragment,s),Ss=i(s),$(es.$$.fragment,s),As=i(s),as=u(s,"P",{"data-svelte-h":!0}),b(as)!=="svelte-19tq0sa"&&(as.innerHTML=Pt),Ks=i(s),$(H.$$.fragment,s),Os=i(s),$(ls.$$.fragment,s),st=i(s),ns=u(s,"P",{"data-svelte-h":!0}),b(ns)!=="svelte-6aa2me"&&(ns.textContent=Nt),tt=i(s),$(X.$$.fragment,s),et=i(s),$(rs.$$.fragment,s),at=i(s),ps=u(s,"P",{"data-svelte-h":!0}),b(ps)!=="svelte-powoua"&&(ps.innerHTML=It),lt=i(s),is=u(s,"UL",{"data-svelte-h":!0}),b(is)!=="svelte-1llh7co"&&(is.innerHTML=Dt),nt=i(s),os=u(s,"P",{"data-svelte-h":!0}),b(os)!=="svelte-vl9u2x"&&(os.textContent=St),rt=i(s),$(B.$$.fragment,s),pt=i(s),ms=u(s,"P",{"data-svelte-h":!0}),b(ms)!=="svelte-1d2sx2j"&&(ms.innerHTML=At),it=i(s),$(cs.$$.fragment,s),ot=i(s),fs=u(s,"P",{"data-svelte-h":!0}),b(fs)!=="svelte-snvj0m"&&(fs.innerHTML=Kt),mt=i(s),$(us.$$.fragment,s),ct=i(s),ds=u(s,"P",{"data-svelte-h":!0}),b(ds)!=="svelte-pckj0p"&&(ds.innerHTML=Ot),ft=i(s),$($s.$$.fragment,s),ut=i(s),$(E.$$.fragment,s),dt=i(s),$(gs.$$.fragment,s),$t=i(s),ys=u(s,"P",{"data-svelte-h":!0}),b(ys)!=="svelte-6z2f4h"&&(ys.innerHTML=se),gt=i(s),hs=u(s,"P",{"data-svelte-h":!0}),b(hs)!=="svelte-un51dz"&&(hs.innerHTML=te),yt=i(s),$(js.$$.fragment,s),ht=i(s),$(Y.$$.fragment,s),jt=i(s),bs=u(s,"P",{"data-svelte-h":!0}),b(bs)!=="svelte-1lw6ucr"&&(bs.innerHTML=ee),bt=i(s),$(_s.$$.fragment,s),_t=i(s),$(Ms.$$.fragment,s),Mt=i(s),Ts=u(s,"P",{"data-svelte-h":!0}),b(Ts)!=="svelte-1ny9vga"&&(Ts.innerHTML=ae),Tt=i(s),vs=u(s,"P",{"data-svelte-h":!0}),b(vs)!=="svelte-dt8fqz"&&(vs.innerHTML=le),vt=i(s),$(Zs.$$.fragment,s),Zt=i(s),$(L.$$.fragment,s),wt=i(s),ws=u(s,"P",{"data-svelte-h":!0}),b(ws)!=="svelte-o1uww"&&(ws.innerHTML=ne),qt=i(s),$(qs.$$.fragment,s),Jt=i(s),$(Js.$$.fragment,s),Rt=i(s),Rs=u(s,"P",{"data-svelte-h":!0}),b(Rs)!=="svelte-1u6m7h9"&&(Rs.innerHTML=re),kt=i(s),ks=u(s,"P",{"data-svelte-h":!0}),b(ks)!=="svelte-1l7ona4"&&(ks.textContent=pe),Ct=i(s),$(Cs.$$.fragment,s),Wt=i(s),Ws=u(s,"P",{"data-svelte-h":!0}),b(Ws)!=="svelte-10frop5"&&(Ws.textContent=ie),Ut=i(s),$(Us.$$.fragment,s),Vt=i(s),Vs=u(s,"P",{"data-svelte-h":!0}),b(Vs)!=="svelte-fr1oeq"&&(Vs.innerHTML=oe),xt=i(s),$(xs.$$.fragment,s),zt=i(s),zs=u(s,"P",{"data-svelte-h":!0}),b(zs)!=="svelte-1s5aq77"&&(zs.textContent=me),Gt=i(s),$(Gs.$$.fragment,s),Ft=i(s),Fs=u(s,"P",{}),he(Fs).forEach(e),this.h()},h(){je(l,"name","hf:doc:metadata"),je(l,"content",Ee)},m(s,t){we(document.head,l),a(s,c,t),a(s,n,t),a(s,o,t),g(_,s,t),a(s,M,t),a(s,W,t),a(s,T,t),a(s,J,t),a(s,v,t),g(U,s,t),a(s,k,t),a(s,x,t),a(s,C,t),a(s,V,t),a(s,Z,t),g(P,s,t),a(s,Xs,t),a(s,N,t),a(s,Bs,t),a(s,I,t),a(s,Es,t),g(D,s,t),a(s,Ys,t),a(s,S,t),a(s,Ls,t),g(A,s,t),a(s,Qs,t),a(s,K,t),a(s,Ps,t),g(O,s,t),a(s,Ns,t),a(s,ss,t),a(s,Is,t),g(ts,s,t),a(s,Ds,t),g(F,s,t),a(s,Ss,t),g(es,s,t),a(s,As,t),a(s,as,t),a(s,Ks,t),g(H,s,t),a(s,Os,t),g(ls,s,t),a(s,st,t),a(s,ns,t),a(s,tt,t),g(X,s,t),a(s,et,t),g(rs,s,t),a(s,at,t),a(s,ps,t),a(s,lt,t),a(s,is,t),a(s,nt,t),a(s,os,t),a(s,rt,t),g(B,s,t),a(s,pt,t),a(s,ms,t),a(s,it,t),g(cs,s,t),a(s,ot,t),a(s,fs,t),a(s,mt,t),g(us,s,t),a(s,ct,t),a(s,ds,t),a(s,ft,t),g($s,s,t),a(s,ut,t),g(E,s,t),a(s,dt,t),g(gs,s,t),a(s,$t,t),a(s,ys,t),a(s,gt,t),a(s,hs,t),a(s,yt,t),g(js,s,t),a(s,ht,t),g(Y,s,t),a(s,jt,t),a(s,bs,t),a(s,bt,t),g(_s,s,t),a(s,_t,t),g(Ms,s,t),a(s,Mt,t),a(s,Ts,t),a(s,Tt,t),a(s,vs,t),a(s,vt,t),g(Zs,s,t),a(s,Zt,t),g(L,s,t),a(s,wt,t),a(s,ws,t),a(s,qt,t),g(qs,s,t),a(s,Jt,t),g(Js,s,t),a(s,Rt,t),a(s,Rs,t),a(s,kt,t),a(s,ks,t),a(s,Ct,t),g(Cs,s,t),a(s,Wt,t),a(s,Ws,t),a(s,Ut,t),g(Us,s,t),a(s,Vt,t),a(s,Vs,t),a(s,xt,t),g(xs,s,t),a(s,zt,t),a(s,zs,t),a(s,Gt,t),g(Gs,s,t),a(s,Ft,t),a(s,Fs,t),Ht=!0},p(s,[t]){const ce={};t&2&&(ce.$$scope={dirty:t,ctx:s}),F.$set(ce);const fe={};t&2&&(fe.$$scope={dirty:t,ctx:s}),H.$set(fe);const ue={};t&2&&(ue.$$scope={dirty:t,ctx:s}),X.$set(ue);const de={};t&2&&(de.$$scope={dirty:t,ctx:s}),B.$set(de);const $e={};t&2&&($e.$$scope={dirty:t,ctx:s}),E.$set($e);const ge={};t&2&&(ge.$$scope={dirty:t,ctx:s}),Y.$set(ge);const ye={};t&2&&(ye.$$scope={dirty:t,ctx:s}),L.$set(ye)},i(s){Ht\|\|(y(_.$$.fragment,s),y(U.$$.fragment,s),y(P.$$.fragment,s),y(D.$$.fragment,s),y(A.$$.fragment,s),y(O.$$.fragment,s),y(ts.$$.fragment,s),y(F.$$.fragment,s),y(es.$$.fragment,s),y(H.$$.fragment,s),y(ls.$$.fragment,s),y(X.$$.fragment,s),y(rs.$$.fragment,s),y(B.$$.fragment,s),y(cs.$$.fragment,s),y(us.$$.fragment,s),y($s.$$.fragment,s),y(E.$$.fragment,s),y(gs.$$.fragment,s),y(js.$$.fragment,s),y(Y.$$.fragment,s),y(_s.$$.fragment,s),y(Ms.$$.fragment,s),y(Zs.$$.fragment,s),y(L.$$.fragment,s),y(qs.$$.fragment,s),y(Js.$$.fragment,s),y(Cs.$$.fragment,s),y(Us.$$.fragment,s),y(xs.$$.fragment,s),y(Gs.$$.fragment,s),Ht=!0)},o(s){h(_.$$.fragment,s),h(U.$$.fragment,s),h(P.$$.fragment,s),h(D.$$.fragment,s),h(A.$$.fragment,s),h(O.$$.fragment,s),h(ts.$$.fragment,s),h(F.$$.fragment,s),h(es.$$.fragment,s),h(H.$$.fragment,s),h(ls.$$.fragment,s),h(X.$$.fragment,s),h(rs.$$.fragment,s),h(B.$$.fragment,s),h(cs.$$.fragment,s),h(us.$$.fragment,s),h($s.$$.fragment,s),h(E.$$.fragment,s),h(gs.$$.fragment,s),h(js.$$.fragment,s),h(Y.$$.fragment,s),h(_s.$$.fragment,s),h(Ms.$$.fragment,s),h(Zs.$$.fragment,s),h(L.$$.fragment,s),h(qs.$$.fragment,s),h(Js.$$.fragment,s),h(Cs.$$.fragment,s),h(Us.$$.fragment,s),h(xs.$$.fragment,s),h(Gs.$$.fragment,s),Ht=!1},d(s){s&&(e(c),e(n),e(o),e(M),e(W),e(T),e(J),e(v),e(k),e(x),e(C),e(V),e(Z),e(Xs),e(N),e(Bs),e(I),e(Es),e(Ys),e(S),e(Ls),e(Qs),e(K),e(Ps),e(Ns),e(ss),e(Is),e(Ds),e(Ss),e(As),e(as),e(Ks),e(Os),e(st),e(ns),e(tt),e(et),e(at),e(ps),e(lt),e(is),e(nt),e(os),e(rt),e(pt),e(ms),e(it),e(ot),e(fs),e(mt),e(ct),e(ds),e(ft),e(ut),e(dt),e($t),e(ys),e(gt),e(hs),e(yt),e(ht),e(jt),e(bs),e(bt),e(_t),e(Mt),e(Ts),e(Tt),e(vs),e(vt),e(Zt),e(wt),e(ws),e(qt),e(Jt),e(Rt),e(Rs),e(kt),e(ks),e(Ct),e(Wt),e(Ws),e(Ut),e(Vt),e(Vs),e(xt),e(zt),e(zs),e(Gt),e(Ft),e(Fs)),e(l),j(_,s),j(U,s),j(P,s),j(D,s),j(A,s),j(O,s),j(ts,s),j(F,s),j(es,s),j(H,s),j(ls,s),j(X,s),j(rs,s),j(B,s),j(cs,s),j(us,s),j($s,s),j(E,s),j(gs,s),j(js,s),j(Y,s),j(_s,s),j(Ms,s),j(Zs,s),j(L,s),j(qs,s),j(Js,s),j(Cs,s),j(Us,s),j(xs,s),j(Gs,s)}}}const Ee='{"title":"Create a custom architecture","local":"create-a-custom-architecture","sections":[{"title":"Configuration","local":"configuration","sections":[],"depth":2},{"title":"Model","local":"model","sections":[{"title":"Model heads","local":"model-heads","sections":[],"depth":3}],"depth":2},{"title":"Tokenizer","local":"tokenizer","sections":[],"depth":2},{"title":"Image Processor","local":"image-processor","sections":[],"depth":2},{"title":"Feature Extractor","local":"feature-extractor","sections":[],"depth":2},{"title":"Processor","local":"processor","sections":[],"depth":2}],"depth":1}';function Ye(w){return Me(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class Se extends Te{constructor(l){super(),ve(this,l,Ye,Be,_e,{})}}export{Se as component};

Xet Storage Details

Size:: 52.8 kB
Xet hash:: a76acdf03d48f36ae63c2317d2d0c0212e52da40e8b81aeb128dadc6b28db50f

Xet efficiently stores files, intelligently splitting them into unique chunks and accelerating uploads and downloads. More info.