course/pr_1213/ja/_app/immutable/nodes/14.93dc60ea.js

import{s as zt,o as Bt}from"../chunks/scheduler.ddeee2a5.js";import{S as Lt,i as Ft,e as y,s as M,c as J,h as Xt,a as f,d as n,b as c,f as Rt,g as U,j as b,k as Tl,l as Yt,m as a,n as j,o,q as L,t as m,p as d,r as F}from"../chunks/index.b5ed4bbb.js";import{C as Pt,H as bl,E as qt}from"../chunks/MermaidChart.svelte_svelte_type_style_lang.8f098b22.js";import{Y as St}from"../chunks/Youtube.08e6a733.js";import{C as h}from"../chunks/CodeBlock.bc9ff7b2.js";import{C as Wt}from"../chunks/CourseFloatingBanner.e70be405.js";import{F as Kt}from"../chunks/FrameworkSwitchCourse.f26cbc91.js";function Ot(T){let s,p;return s=new Wt({props:{chapter:2,classNames:"absolute z-10 right-0 top-0",notebooks:[{label:"Google Colab",value:"https://colab.research.google.com/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_tf.ipynb"},{label:"Aws Studio",value:"https://studiolab.sagemaker.aws/import/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_tf.ipynb"}]}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function en(T){let s,p;return s=new Wt({props:{chapter:2,classNames:"absolute z-10 right-0 top-0",notebooks:[{label:"Google Colab",value:"https://colab.research.google.com/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_pt.ipynb"},{label:"Aws Studio",value:"https://studiolab.sagemaker.aws/import/github/huggingface/notebooks/blob/master/course/en/chapter2/section2_pt.ipynb"}]}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function ln(T){let s,p;return s=new St({props:{id:"wVN12smEvqg"}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function sn(T){let s,p;return s=new St({props:{id:"1pedAIvTWXk"}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function tn(T){let s,p;return s=new h({props:{code:"cmF3X2lucHV0cyUyMCUzRCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElNUQlMEFpbnB1dHMlMjAlM0QlMjB0b2tlbml6ZXIocmF3X2lucHV0cyUyQyUyMHBhZGRpbmclM0RUcnVlJTJDJTIwdHJ1bmNhdGlvbiUzRFRydWUlMkMlMjByZXR1cm5fdGVuc29ycyUzRCUyMnRmJTIyKSUwQXByaW50KGlucHV0cyk=",highlighted:`raw_inputs = [
    <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
    <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
]
inputs = tokenizer(raw_inputs, padding=<span class="hljs-literal">True</span>, truncation=<span class="hljs-literal">True</span>, return_tensors=<span class="hljs-string">&quot;tf&quot;</span>)
<span class="hljs-built_in">print</span>(inputs)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function nn(T){let s,p;return s=new h({props:{code:"cmF3X2lucHV0cyUyMCUzRCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElNUQlMEFpbnB1dHMlMjAlM0QlMjB0b2tlbml6ZXIocmF3X2lucHV0cyUyQyUyMHBhZGRpbmclM0RUcnVlJTJDJTIwdHJ1bmNhdGlvbiUzRFRydWUlMkMlMjByZXR1cm5fdGVuc29ycyUzRCUyMnB0JTIyKSUwQXByaW50KGlucHV0cyk=",highlighted:`raw_inputs = [
    <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
    <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
]
inputs = tokenizer(raw_inputs, padding=<span class="hljs-literal">True</span>, truncation=<span class="hljs-literal">True</span>, return_tensors=<span class="hljs-string">&quot;pt&quot;</span>)
<span class="hljs-built_in">print</span>(inputs)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function an(T){let s,p="TensorFlowのテンソルとしての結果は、以下のようになります。",l,i,u;return i=new h({props:{code:"JTdCJTBBJTIwJTIwJTIwJTIwJ2lucHV0X2lkcyclM0ElMjAlM0N0Zi5UZW5zb3IlM0ElMjBzaGFwZSUzRCgyJTJDJTIwMTYpJTJDJTIwZHR5cGUlM0RpbnQzMiUyQyUyMG51bXB5JTNEJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwYXJyYXkoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwJTIwMTAxJTJDJTIwJTIwMTA0NSUyQyUyMCUyMDEwMDUlMkMlMjAlMjAyMzEwJTJDJTIwJTIwMjA0MiUyQyUyMCUyMDM0MDMlMkMlMjAlMjAyMDA1JTJDJTIwJTIwMTAzNyUyQyUyMDE3NjYyJTJDJTIwMTIxNzIlMkMlMjAlMjAyNjA3JTJDJTIwJTIwMjAyNiUyQyUyMCUyMDI4NzglMkMlMjAlMjAyMTY2JTJDJTIwJTIwMTAxMiUyQyUyMCUyMCUyMDEwMiU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QiUyMCUyMDEwMSUyQyUyMCUyMDEwNDUlMkMlMjAlMjA1MjIzJTJDJTIwJTIwMjAyMyUyQyUyMCUyMDIwNjElMkMlMjAlMjAyMTcyJTJDJTIwJTIwJTIwOTk5JTJDJTIwJTIwJTIwMTAyJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlNUQlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUQlMkMlMjBkdHlwZSUzRGludDMyKSUzRSUyQyUyMCUwQSUyMCUyMCUyMCUyMCdhdHRlbnRpb25fbWFzayclM0ElMjAlM0N0Zi5UZW5zb3IlM0ElMjBzaGFwZSUzRCgyJTJDJTIwMTYpJTJDJTIwZHR5cGUlM0RpbnQzMiUyQyUyMG51bXB5JTNEJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwYXJyYXkoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QjElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlNUQlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUQlMkMlMjBkdHlwZSUzRGludDMyKSUzRSUwQSU3RA==",highlighted:`{
    <span class="hljs-string">&#x27;input_ids&#x27;</span>: &lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>), dtype=int32, numpy=
        array([
            [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">1005</span>,  <span class="hljs-number">2310</span>,  <span class="hljs-number">2042</span>,  <span class="hljs-number">3403</span>,  <span class="hljs-number">2005</span>,  <span class="hljs-number">1037</span>, <span class="hljs-number">17662</span>, <span class="hljs-number">12172</span>,  <span class="hljs-number">2607</span>,  <span class="hljs-number">2026</span>,  <span class="hljs-number">2878</span>,  <span class="hljs-number">2166</span>,  <span class="hljs-number">1012</span>,   <span class="hljs-number">102</span>],
            [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">5223</span>,  <span class="hljs-number">2023</span>,  <span class="hljs-number">2061</span>,  <span class="hljs-number">2172</span>,   <span class="hljs-number">999</span>,   <span class="hljs-number">102</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>]
        ], dtype=int32)&gt;, 
    <span class="hljs-string">&#x27;attention_mask&#x27;</span>: &lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>), dtype=int32, numpy=
        array([
            [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>],
            [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>]
        ], dtype=int32)&gt;
}`,wrap:!1}}),{c(){s=y("p"),s.textContent=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-dc00a9"&&(s.textContent=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function pn(T){let s,p="PyTorchのテンソルとしての結果は、以下のようになります。",l,i,u;return i=new h({props:{code:"JTdCJTBBJTIwJTIwJTIwJTIwJ2lucHV0X2lkcyclM0ElMjB0ZW5zb3IoJTVCJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwJTIwMTAxJTJDJTIwJTIwMTA0NSUyQyUyMCUyMDEwMDUlMkMlMjAlMjAyMzEwJTJDJTIwJTIwMjA0MiUyQyUyMCUyMDM0MDMlMkMlMjAlMjAyMDA1JTJDJTIwJTIwMTAzNyUyQyUyMDE3NjYyJTJDJTIwMTIxNzIlMkMlMjAyNjA3JTJDJTIwJTIwMjAyNiUyQyUyMCUyMDI4NzglMkMlMjAlMjAyMTY2JTJDJTIwJTIwMTAxMiUyQyUyMCUyMCUyMDEwMiU1RCUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCU1QiUyMCUyMDEwMSUyQyUyMCUyMDEwNDUlMkMlMjAlMjA1MjIzJTJDJTIwJTIwMjAyMyUyQyUyMCUyMDIwNjElMkMlMjAlMjAyMTcyJTJDJTIwJTIwJTIwOTk5JTJDJTIwJTIwJTIwMTAyJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlMkMlMjAlMjAlMjAlMjAlMjAwJTJDJTIwJTIwJTIwJTIwJTIwMCUyQyUyMCUyMCUyMCUyMCUyMDAlNUQlMEElMjAlMjAlMjAlMjAlNUQpJTJDJTIwJTBBJTIwJTIwJTIwJTIwJ2F0dGVudGlvbl9tYXNrJyUzQSUyMHRlbnNvciglNUIlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUIxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDElMkMlMjAxJTJDJTIwMSUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCUyQyUyMDAlMkMlMjAwJTJDJTIwMCU1RCUwQSUyMCUyMCUyMCUyMCU1RCklMEElN0Q=",highlighted:`{
    <span class="hljs-string">&#x27;input_ids&#x27;</span>: tensor([
        [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">1005</span>,  <span class="hljs-number">2310</span>,  <span class="hljs-number">2042</span>,  <span class="hljs-number">3403</span>,  <span class="hljs-number">2005</span>,  <span class="hljs-number">1037</span>, <span class="hljs-number">17662</span>, <span class="hljs-number">12172</span>, <span class="hljs-number">2607</span>,  <span class="hljs-number">2026</span>,  <span class="hljs-number">2878</span>,  <span class="hljs-number">2166</span>,  <span class="hljs-number">1012</span>,   <span class="hljs-number">102</span>],
        [  <span class="hljs-number">101</span>,  <span class="hljs-number">1045</span>,  <span class="hljs-number">5223</span>,  <span class="hljs-number">2023</span>,  <span class="hljs-number">2061</span>,  <span class="hljs-number">2172</span>,   <span class="hljs-number">999</span>,   <span class="hljs-number">102</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>,     <span class="hljs-number">0</span>]
    ]), 
    <span class="hljs-string">&#x27;attention_mask&#x27;</span>: tensor([
        [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>],
        [<span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">1</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>, <span class="hljs-number">0</span>]
    ])
}`,wrap:!1}}),{c(){s=y("p"),s.textContent=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-1hqocw1"&&(s.textContent=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function rn(T){let s,p="トークナイザで行ったのと同じ方法で事前学習したモデルをダウンロードすることができます。🤗 Transformers は <code>TFAutoModel</code> クラスを提供しており、このクラスは <code>from_pretrained</code> メソッドも持っています。",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGQXV0b01vZGVsJTBBJTBBY2hlY2twb2ludCUyMCUzRCUyMCUyMmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkLWZpbmV0dW5lZC1zc3QtMi1lbmdsaXNoJTIyJTBBbW9kZWwlMjAlM0QlMjBURkF1dG9Nb2RlbC5mcm9tX3ByZXRyYWluZWQoY2hlY2twb2ludCk=",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFAutoModel

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = TFAutoModel.from_pretrained(checkpoint)`,wrap:!1}}),{c(){s=y("p"),s.innerHTML=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-1pgp0r5"&&(s.innerHTML=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function Mn(T){let s,p="トークナイザで行ったのと同じ方法で事前学習したモデルをダウンロードすることができます。🤗 Transformersは <code>AutoModel</code> クラスを提供しており、このクラスは <code>from_pretrained()</code> メソッドも持っています。",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Nb2RlbCUwQSUwQWNoZWNrcG9pbnQlMjAlM0QlMjAlMjJkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZC1maW5ldHVuZWQtc3N0LTItZW5nbGlzaCUyMiUwQW1vZGVsJTIwJTNEJTIwQXV0b01vZGVsLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoModel

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = AutoModel.from_pretrained(checkpoint)`,wrap:!1}}),{c(){s=y("p"),s.innerHTML=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-8e1kri"&&(s.innerHTML=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function cn(T){let s,p,l,i;return s=new h({props:{code:"b3V0cHV0cyUyMCUzRCUyMG1vZGVsKGlucHV0cyklMEFwcmludChvdXRwdXRzLmxhc3RfaGlkZGVuX3N0YXRlLnNoYXBlKQ==",highlighted:`outputs = model(inputs)
<span class="hljs-built_in">print</span>(outputs.last_hidden_state.shape)`,wrap:!1}}),l=new h({props:{code:"KDIlMkMlMjAxNiUyQyUyMDc2OCk=",highlighted:'(<span class="hljs-number">2</span>, <span class="hljs-number">16</span>, <span class="hljs-number">768</span>)',wrap:!1}}),{c(){J(s.$$.fragment),p=M(),J(l.$$.fragment)},l(u){U(s.$$.fragment,u),p=c(u),U(l.$$.fragment,u)},m(u,r){j(s,u,r),a(u,p,r),j(l,u,r),i=!0},i(u){i||(m(s.$$.fragment,u),m(l.$$.fragment,u),i=!0)},o(u){o(s.$$.fragment,u),o(l.$$.fragment,u),i=!1},d(u){u&&n(p),d(s,u),d(l,u)}}}function un(T){let s,p,l,i;return s=new h({props:{code:"b3V0cHV0cyUyMCUzRCUyMG1vZGVsKCoqaW5wdXRzKSUwQXByaW50KG91dHB1dHMubGFzdF9oaWRkZW5fc3RhdGUuc2hhcGUp",highlighted:`outputs = model(**inputs)
<span class="hljs-built_in">print</span>(outputs.last_hidden_state.shape)`,wrap:!1}}),l=new h({props:{code:"dG9yY2guU2l6ZSglNUIyJTJDJTIwMTYlMkMlMjA3NjglNUQp",highlighted:'torch.Size([<span class="hljs-number">2</span>, <span class="hljs-number">16</span>, <span class="hljs-number">768</span>])',wrap:!1}}),{c(){J(s.$$.fragment),p=M(),J(l.$$.fragment)},l(u){U(s.$$.fragment,u),p=c(u),U(l.$$.fragment,u)},m(u,r){j(s,u,r),a(u,p,r),j(l,u,r),i=!0},i(u){i||(m(s.$$.fragment,u),m(l.$$.fragment,u),i=!0)},o(u){o(s.$$.fragment,u),o(l.$$.fragment,u),i=!1},d(u){u&&n(p),d(s,u),d(l,u)}}}function on(T){let s,p="今回の例では、文章分類のヘッドを持つモデルが必要になります（文章をポジティブかネガティブかに分類することができます）。そこで、実際には <code>TFAutoModel</code> クラスではなく、 <code>TFAutoModelForSequenceClassification</code> クラスを利用することになります。",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGQXV0b01vZGVsRm9yU2VxdWVuY2VDbGFzc2lmaWNhdGlvbiUwQSUwQWNoZWNrcG9pbnQlMjAlM0QlMjAlMjJkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZC1maW5ldHVuZWQtc3N0LTItZW5nbGlzaCUyMiUwQW1vZGVsJTIwJTNEJTIwVEZBdXRvTW9kZWxGb3JTZXF1ZW5jZUNsYXNzaWZpY2F0aW9uLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KSUwQW91dHB1dHMlMjAlM0QlMjBtb2RlbChpbnB1dHMp",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFAutoModelForSequenceClassification

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = TFAutoModelForSequenceClassification.from_pretrained(checkpoint)
outputs = model(inputs)`,wrap:!1}}),{c(){s=y("p"),s.innerHTML=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-y8w12f"&&(s.innerHTML=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function mn(T){let s,p="今回の例では、文章分類のヘッドを持つモデルが必要になります（文章をポジティブかネガティブかに分類できるようにするため）。そのため、実際には <code>AutoModel</code> クラスではなく、 <code>AutoModelForSequenceClassification</code> クラスを使用することになります。",l,i,u;return i=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Nb2RlbEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24lMEElMEFjaGVja3BvaW50JTIwJTNEJTIwJTIyZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQtZmluZXR1bmVkLXNzdC0yLWVuZ2xpc2glMjIlMEFtb2RlbCUyMCUzRCUyMEF1dG9Nb2RlbEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24uZnJvbV9wcmV0cmFpbmVkKGNoZWNrcG9pbnQpJTBBb3V0cHV0cyUyMCUzRCUyMG1vZGVsKCoqaW5wdXRzKQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoModelForSequenceClassification

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
model = AutoModelForSequenceClassification.from_pretrained(checkpoint)
outputs = model(**inputs)`,wrap:!1}}),{c(){s=y("p"),s.innerHTML=p,l=M(),J(i.$$.fragment)},l(r){s=f(r,"P",{"data-svelte-h":!0}),b(s)!=="svelte-qkb1tx"&&(s.innerHTML=p),l=c(r),U(i.$$.fragment,r)},m(r,w){a(r,s,w),a(r,l,w),j(i,r,w),u=!0},i(r){u||(m(i.$$.fragment,r),u=!0)},o(r){o(i.$$.fragment,r),u=!1},d(r){r&&(n(s),n(l)),d(i,r)}}}function yn(T){let s,p;return s=new h({props:{code:"KDIlMkMlMjAyKQ==",highlighted:'(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>)',wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function fn(T){let s,p;return s=new h({props:{code:"dG9yY2guU2l6ZSglNUIyJTJDJTIwMiU1RCk=",highlighted:'torch.Size([<span class="hljs-number">2</span>, <span class="hljs-number">2</span>])',wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function Tn(T){let s,p;return s=new h({props:{code:"JTNDdGYuVGVuc29yJTNBJTIwc2hhcGUlM0QoMiUyQyUyMDIpJTJDJTIwZHR5cGUlM0RmbG9hdDMyJTJDJTIwbnVtcHklM0QlMEElMjAlMjAlMjAlMjBhcnJheSglNUIlNUItMS41NjA2OTkxJTJDJTIwJTIwMS42MTIyODQyJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCJTIwNC4xNjkyMzElMjAlMkMlMjAtMy4zNDY0NDcyJTVEJTVEJTJDJTIwZHR5cGUlM0RmbG9hdDMyKSUzRQ==",highlighted:`&lt;tf.Tensor: shape=(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>), dtype=float32, numpy=
    array([[-<span class="hljs-number">1.5606991</span>,  <span class="hljs-number">1.6122842</span>],
           [ <span class="hljs-number">4.169231</span> , -<span class="hljs-number">3.3464472</span>]], dtype=float32)&gt;`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function bn(T){let s,p;return s=new h({props:{code:"dGVuc29yKCU1QiU1Qi0xLjU2MDclMkMlMjAlMjAxLjYxMjMlNUQlMkMlMEElMjAlMjAlMjAlMjAlMjAlMjAlMjAlMjAlNUIlMjA0LjE2OTIlMkMlMjAtMy4zNDY0JTVEJTVEJTJDJTIwZ3JhZF9mbiUzRCUzQ0FkZG1tQmFja3dhcmQlM0Up",highlighted:`tensor([[-<span class="hljs-number">1.5607</span>,  <span class="hljs-number">1.6123</span>],
        [ <span class="hljs-number">4.1692</span>, -<span class="hljs-number">3.3464</span>]], grad_fn=&lt;AddmmBackward&gt;)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function Jn(T){let s,p;return s=new h({props:{code:"aW1wb3J0JTIwdGVuc29yZmxvdyUyMGFzJTIwdGYlMEElMEFwcmVkaWN0aW9ucyUyMCUzRCUyMHRmLm1hdGguc29mdG1heChvdXRwdXRzLmxvZ2l0cyUyQyUyMGF4aXMlM0QtMSklMEFwcmludChwcmVkaWN0aW9ucyk=",highlighted:`<span class="hljs-keyword">import</span> tensorflow <span class="hljs-keyword">as</span> tf

predictions = tf.math.softmax(outputs.logits, axis=-<span class="hljs-number">1</span>)
<span class="hljs-built_in">print</span>(predictions)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function Un(T){let s,p;return s=new h({props:{code:"aW1wb3J0JTIwdG9yY2glMEElMEFwcmVkaWN0aW9ucyUyMCUzRCUyMHRvcmNoLm5uLmZ1bmN0aW9uYWwuc29mdG1heChvdXRwdXRzLmxvZ2l0cyUyQyUyMGRpbSUzRC0xKSUwQXByaW50KHByZWRpY3Rpb25zKQ==",highlighted:`<span class="hljs-keyword">import</span> torch

predictions = torch.nn.functional.softmax(outputs.logits, dim=-<span class="hljs-number">1</span>)
<span class="hljs-built_in">print</span>(predictions)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function jn(T){let s,p;return s=new h({props:{code:"dGYuVGVuc29yKCUwQSU1QiU1QjQuMDE5NTE2NzFlLTAyJTIwOS41OTgwNDgzM2UtMDElNUQlMEElMjAlNUI5Ljk5NDU1ODdlLTAxJTIwNS40NDE4NDI0ZS0wNCU1RCU1RCUyQyUyMHNoYXBlJTNEKDIlMkMlMjAyKSUyQyUyMGR0eXBlJTNEZmxvYXQzMik=",highlighted:`tf.Tensor(
[[<span class="hljs-number">4.01951671e-02</span> <span class="hljs-number">9.59804833e-01</span>]
 [<span class="hljs-number">9.9945587e-01</span> <span class="hljs-number">5.4418424e-04</span>]], shape=(<span class="hljs-number">2</span>, <span class="hljs-number">2</span>), dtype=float32)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function dn(T){let s,p;return s=new h({props:{code:"dGVuc29yKCU1QiU1QjQuMDE5NWUtMDIlMkMlMjA5LjU5ODBlLTAxJTVEJTJDJTBBJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTIwJTVCOS45OTQ2ZS0wMSUyQyUyMDUuNDQxOGUtMDQlNUQlNUQlMkMlMjBncmFkX2ZuJTNEJTNDU29mdG1heEJhY2t3YXJkJTNFKQ==",highlighted:`tensor([[<span class="hljs-number">4.0195e-02</span>, <span class="hljs-number">9.5980e-01</span>],
        [<span class="hljs-number">9.9946e-01</span>, <span class="hljs-number">5.4418e-04</span>]], grad_fn=&lt;SoftmaxBackward&gt;)`,wrap:!1}}),{c(){J(s.$$.fragment)},l(l){U(s.$$.fragment,l)},m(l,i){j(s,l,i),p=!0},i(l){p||(m(s.$$.fragment,l),p=!0)},o(l){o(s.$$.fragment,l),p=!1},d(l){d(s,l)}}}function wn(T){let s,p,l,i,u,r,w,Ul,K,jl,_,C,al,X,xs="<p>ここは、PyTorchとTensorFlowのどちらを使うかによって内容が少し異なる最初のセクションです。タイトルの上にあるスイッチを切り替えて、好きなプラットフォームを選んでください！</p>",dl,$,k,pl,O,Qs='まずは例として、<a href="/course/chapter1">Chapter1</a>で次のコードを実行したときに、その裏で何が起こったかを見てみましょう。',wl,ee,hl,le,Ns="そして、その出力は以下のようになります。",_l,se,Cl,te,Ds='<a href="/course/chapter1">第1章</a>で見たように、このpipelineは、前処理、モデルへの入力、後処理の3つのステップをグループ化したものです。',$l,Y,Es='<img class="block dark:hidden" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/full_nlp_pipeline.svg" alt="The full NLP pipeline: tokenization of text, conversion to IDs, and inference through the Transformer model and the model head."/> <img class="hidden dark:block" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/full_nlp_pipeline-dark.svg" alt="The full NLP pipeline: tokenization of text, conversion to IDs, and inference through the Transformer model and the model head."/>',kl,ne,Gs="早速、それぞれを確認してみましょう。",Il,ae,gl,pe,Zs="他のニューラルネットワークのように、Transformerのモデルは生のテキストを直接処理できないので、今回のpipelineの最初のステップは、テキストの入力をモデルが理解できる数値に変換することです。これを行うために我々は<em>トークナイザ</em> を使用します。<em>トークナイザ</em> は、以下の処理を担います。",Al,re,Vs="<li>入力を単語、サブワード、記号（句読点など）に分割する。それらを<em>トークン</em>と呼ぶ。</li> <li>各トークンを整数にマッピングする。</li> <li>モデルにとって有用な追加の入力を付け足す。</li>",vl,ie,Hs='この前処理はモデルが事前学習されたときと全く同じ方法で行われる必要があるので、まず<a href="https://huggingface.co/models" rel="nofollow">Model Hub</a>から情報をダウンロードする必要があります。これを行うには、<code>AutoTokenizer</code> クラスとその <code>from_pretrained()</code> メソッドを使用します。モデルのチェックポイント名を使って、モデルのトークナイザに関連するデータを自動的に取得し、キャッシュします (従って、以下のコードを最初に実行したときにのみダウンロードされます)。',xl,Me,Rs='<code>sentiment-analysis</code> のpipelineのデフォルトのチェックポイントは、<code>distilbert-base-uncased-finetuned-sst-2-english</code> なので (そのモデルカードは <a href="https://huggingface.co/distilbert-base-uncased-finetuned-sst-2-english" rel="nofollow">ここ</a> で見られます)、次のように実行します。',Ql,ce,Nl,ue,Ss="トークナイザがあれば、文章を直接トークナイザに渡し、モデルに与える準備ができた辞書データに変換することができます! あとは入力IDのリストをテンソルに変換するだけです。",Dl,oe,Ws="🤗 Transformerは、どのMLフレームワークをバックエンドとして使うかを気にせず使うことができます。PyTorchやTensorFlow、モデルによってはFlaxかもしれません。しかし、Transformerのモデルは、入力として<em>テンソル</em>しか受け付けません。もしテンソルに聞き馴染みがない場合は、NumPy配列を代わりに考えてもらうと良いかもしれません。NumPyの配列はスカラー（0次元）、ベクトル（1次元）、行列（2次元）、あるいはもっと多くの次元を持つことができます。これは事実上テンソルです。他のMLフレームワークのテンソルも同様な振る舞いをし、通常はNumPy配列と同じくらい簡単にインスタンス化することができます。",El,me,zs="返したいテンソルの種類（PyTorch、TensorFlow、あるいは素のNumPy）を指定するには、<code>return_tensors</code> 引数を用います。",Gl,I,g,rl,ye,Bs="パディングや切り捨てなどの処理についてはまだ心配しなくて大丈夫です。これらは後で説明します。ここで覚えておくべきことは、1つの文か文のリストを渡せることと、返したいテンソルの型を指定することです（型を渡さなければ、結果としてリストのリストを得ることになります）。",Zl,A,v,il,fe,Ls="出力自体は、<code>input_ids</code> と <code>attention_mask</code> という2つのキーを持つ辞書です。<code>input_ids</code> には2行の整数値（各文章に1つずつ）が含まれており、各文章に含まれるトークンを一意に識別することができます。<code>attention_mask</code> が何であるかは、この章の後半で説明します。",Vl,Te,Hl,x,Q,Ml,be,Fs="このコードスニペットでは、以前pipelineで使用したのと同じチェックポイントをダウンロードし（実際には既にキャッシュされているはずです）、それを使ってモデルをインスタンス化しています。",Rl,Je,Xs="このアーキテクチャには基本的なTransformerモジュールだけが含まれており、いくつかの入力が与えられると、<em>隠れ状態(hidden states)</em>（<em>特徴量</em>とも呼ばれます）と呼ばれるものを出力します。各モデルの入力に対して、我々は<strong>Transformerモデルによるその入力の文脈的理解</strong>を表す高次元ベクトルを取り出します。",Sl,Ue,Ys="もしこれが理解できなくても、心配しないでください。後ですべて説明します。",Wl,je,Ps='これらの隠れ状態はそれ自体で役に立つこともありますが、通常は<em>head</em>と呼ばれるモデルの別の部分への入力となります。<a href="/course/chapter1">第１章</a> では、異なるタスクでも同じアーキテクチャで実行されたかもしれませんが、これらのタスクにはそれぞれ異なるヘッドが使用されています。',zl,de,Bl,we,qs="Transformerモジュールが出力するベクトルは通常大きなものです。一般的に3つの次元を持ちます。",Ll,he,Ks="<li><strong>Batch size</strong>: 一度に処理する系列の数（この例では2）。</li> <li><strong>Sequence length</strong>: 系列の数値表現の長さ（この例では16）。</li> <li><strong>Hidden size</strong>: 各モデル入力のベクトル次元。</li>",Fl,_e,Os="Hidden sizeが大きいと「高次元」と言われます。Hidden sizeは非常に大きくすることができます（小さいモデルでは768が一般的で、大きいモデルでは3072以上に達することがあります）。",Xl,Ce,et="前処理をした入力をモデルに与えてみると、このことがわかります。",Yl,N,D,cl,$e,lt="🤗 Transformersモデルの出力は <code>namedtuple</code> や辞書のように動作することに注意してください。（私たちが行った）属性や（<code>outputs[&quot;last_hidden_state&quot;]</code>のような）キー、あるいは探しているものがどこにあるか正確に知っていれば（<code>outputs[0]</code>のような）インデックスによって要素にアクセスすることが可能です。",Pl,ke,ql,Ie,st="モデルヘッドは高次元の隠れ状態ベクトルを入力として受け取り、それを異なる次元に射影します。モデルヘッドは、通常、1つまたはいくつかの線形層で構成されます。",Kl,P,tt='<img class="block dark:hidden" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/transformer_and_head.svg" alt="A Transformer network alongside its head."/> <img class="hidden dark:block" src="https://huggingface.co/datasets/huggingface-course/documentation-images/resolve/main/en/chapter2/transformer_and_head-dark.svg" alt="A Transformer network alongside its head."/>',Ol,ge,nt="Transformerモデルの出力は直接モデルヘッドに送られ、処理されます。",es,Ae,at="この図では、モデルはその埋め込み層とそれに続く層で表現されています。埋め込み層は、トークン化された入力の各入力IDを、紐付いたトークンを表すベクトルに変換します。後続の層はアテンション機構を用いてそれらのベクトルを操作し、最終的な文の表現を生成します。",ls,ve,pt="🤗 Transformers には多くの異なるアーキテクチャがあり、それぞれが特定のタスクに取り組むために設計されています。以下はその一部のリストです。",ss,xe,rt="<li><code>*Model</code> (隠れ状態を取り出す)</li> <li><code>*ForCausalLM</code></li> <li><code>*ForMaskedLM</code></li> <li><code>*ForMultipleChoice</code></li> <li><code>*ForQuestionAnswering</code></li> <li><code>*ForSequenceClassification</code></li> <li><code>*ForTokenClassification</code></li>",ts,E,G,ul,Qe,it="ここで、入力の形を見ると、次元がかなり小さくなっています。モデルヘッドは、先ほどの高次元ベクトルを入力とし、2つの値（1ラベルにつき1つ）を含むベクトルを出力します。",ns,Ne,as,Z,V,ol,De,Mt="2つの文と2つのラベルがあるので、このモデルから得られる結果は2x2の形状です。",ps,Ee,rs,Ge,ct="モデルから出力される値は、それ自体では必ずしも意味をなしません。その例を見てみましょう。",is,Ze,Ms,H,R,ml,Ve,ut='我々のモデルは最初の文を<code>[-1.5607, 1.6123]</code>、2番目の文を<code>[ 4.1692, -3.3464]</code>と予測しました。これは確率ではなく<em>logits</em>であり、モデルの最終層が出力した正規化されていない生のスコアです。確率に変換するためには、<a href="https://en.wikipedia.org/wiki/Softmax_function" rel="nofollow">SoftMax</a>層を通る必要があります（すべての🤗 Transformersモデルはlogitsを出力します。学習用の損失関数は通常、SoftMaxなどの最後の活性化関数とクロスエントロピーのような実際の損失関数が融合されるためです）。',cs,S,W,yl,z,B,fl,He,ot="このモデルは、最初の文は<code>[0.0402, 0.9598]</code>、2番目の文は<code>[0.9995,  0.0005]</code>と予測したことがわかるでしょう。これらは確率のスコアです。",us,Re,mt="以下では、各ポジションに対応するラベルを得るには、モデル設定の <code>id2label</code> 属性を調べます（これについては次のセクションで詳しく説明します）。",os,Se,ms,We,ys,ze,yt="これで、このモデルは次のように予測したと結論づけることができます。",fs,Be,ft="<li>最初の文: ネガティブ: 0.0402、ポジティブ: 0.9598</li> <li>第二文: ネガティブ: 0.9995、 ポジティブ: 0.0005</li>",Ts,Le,Tt="これで、pipelineの3つのステップ、すなわち、トークナイザによる前処理、モデルへの入力、そして後処理がうまく再現できました。この先では、それぞれのステップをより深く掘り下げていきましょう。",bs,q,bt="<p>✏️ <strong>試してみよう!</strong> 自分でテキストを2つ（またはそれ以上）用意し、<code>sentiment-analysis</code> pipelineで実行します。そして、ここで見た手順を自分で再現して、同様な結果が得られるかどうか確認してみましょう!</p>",Js,Fe,Us,Jl,js;u=new Kt({props:{fw:T[0]}}),w=new Pt({props:{containerStyle:"float: right; margin-left: 10px; display: inline-flex; position: relative; z-index: 10;"}}),K=new bl({props:{title:"pipelineの裏側",local:"pipelineの裏側",headingTag:"h1"}});const Jt=[en,Ot],Xe=[];function Ut(e,t){return e[0]==="pt"?0:1}_=Ut(T),C=Xe[_]=Jt[_](T);const jt=[sn,ln],Ye=[];function dt(e,t){return e[0]==="pt"?0:1}$=dt(T),k=Ye[$]=jt[$](T),ee=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMHBpcGVsaW5lJTBBJTBBY2xhc3NpZmllciUyMCUzRCUyMHBpcGVsaW5lKCUyMnNlbnRpbWVudC1hbmFseXNpcyUyMiklMEFjbGFzc2lmaWVyKCUwQSUyMCUyMCUyMCUyMCU1QiUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMkkndmUlMjBiZWVuJTIwd2FpdGluZyUyMGZvciUyMGElMjBIdWdnaW5nRmFjZSUyMGNvdXJzZSUyMG15JTIwd2hvbGUlMjBsaWZlLiUyMiUyQyUwQSUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMCUyMkklMjBoYXRlJTIwdGhpcyUyMHNvJTIwbXVjaCElMjIlMkMlMEElMjAlMjAlMjAlMjAlNUQlMEEp",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> pipeline

classifier = pipeline(<span class="hljs-string">&quot;sentiment-analysis&quot;</span>)
classifier(
    [
        <span class="hljs-string">&quot;I&#x27;ve been waiting for a HuggingFace course my whole life.&quot;</span>,
        <span class="hljs-string">&quot;I hate this so much!&quot;</span>,
    ]
)`,wrap:!1}}),se=new h({props:{code:"JTVCJTdCJ2xhYmVsJyUzQSUyMCdQT1NJVElWRSclMkMlMjAnc2NvcmUnJTNBJTIwMC45NTk4MDQ3MTM3MjYwNDM3JTdEJTJDJTBBJTIwJTdCJ2xhYmVsJyUzQSUyMCdORUdBVElWRSclMkMlMjAnc2NvcmUnJTNBJTIwMC45OTk0NTU4MDk1OTMyMDA3JTdEJTVE",highlighted:`[{<span class="hljs-string">&#x27;label&#x27;</span>: <span class="hljs-string">&#x27;POSITIVE&#x27;</span>, <span class="hljs-string">&#x27;score&#x27;</span>: <span class="hljs-number">0.9598047137260437</span>},
 {<span class="hljs-string">&#x27;label&#x27;</span>: <span class="hljs-string">&#x27;NEGATIVE&#x27;</span>, <span class="hljs-string">&#x27;score&#x27;</span>: <span class="hljs-number">0.9994558095932007</span>}]`,wrap:!1}}),ae=new bl({props:{title:"トークナイザを用いた前処理",local:"トークナイザを用いた前処理",headingTag:"h2"}}),ce=new h({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMEF1dG9Ub2tlbml6ZXIlMEElMEFjaGVja3BvaW50JTIwJTNEJTIwJTIyZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQtZmluZXR1bmVkLXNzdC0yLWVuZ2xpc2glMjIlMEF0b2tlbml6ZXIlMjAlM0QlMjBBdXRvVG9rZW5pemVyLmZyb21fcHJldHJhaW5lZChjaGVja3BvaW50KQ==",highlighted:`<span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> AutoTokenizer

checkpoint = <span class="hljs-string">&quot;distilbert-base-uncased-finetuned-sst-2-english&quot;</span>
tokenizer = AutoTokenizer.from_pretrained(checkpoint)`,wrap:!1}});const wt=[nn,tn],Pe=[];function ht(e,t){return e[0]==="pt"?0:1}I=ht(T),g=Pe[I]=wt[I](T);const _t=[pn,an],qe=[];function Ct(e,t){return e[0]==="pt"?0:1}A=Ct(T),v=qe[A]=_t[A](T),Te=new bl({props:{title:"モデルの使い方",local:"モデルの使い方",headingTag:"h2"}});const $t=[Mn,rn],Ke=[];function kt(e,t){return e[0]==="pt"?0:1}x=kt(T),Q=Ke[x]=$t[x](T),de=new bl({props:{title:"高次元ベクトル?",local:"高次元ベクトル",headingTag:"h3"}});const It=[un,cn],Oe=[];function gt(e,t){return e[0]==="pt"?0:1}N=gt(T),D=Oe[N]=It[N](T),ke=new bl({props:{title:"モデルヘッド(Model heads): 数値の意味を理解する",local:"モデルヘッドmodel-heads-数値の意味を理解する",headingTag:"h3"}});const At=[mn,on],el=[];function vt(e,t){return e[0]==="pt"?0:1}E=vt(T),G=el[E]=At[E](T),Ne=new h({props:{code:"cHJpbnQob3V0cHV0cy5sb2dpdHMuc2hhcGUp",highlighted:'<span class="hljs-built_in">print</span>(outputs.logits.shape)',wrap:!1}});const xt=[fn,yn],ll=[];function Qt(e,t){return e[0]==="pt"?0:1}Z=Qt(T),V=ll[Z]=xt[Z](T),Ee=new bl({props:{title:"出力の後処理",local:"出力の後処理",headingTag:"h2"}}),Ze=new h({props:{code:"cHJpbnQob3V0cHV0cy5sb2dpdHMp",highlighted:'<span class="hljs-built_in">print</span>(outputs.logits)',wrap:!1}});const Nt=[bn,Tn],sl=[];function Dt(e,t){return e[0]==="pt"?0:1}H=Dt(T),R=sl[H]=Nt[H](T);const Et=[Un,Jn],tl=[];function Gt(e,t){return e[0]==="pt"?0:1}S=Gt(T),W=tl[S]=Et[S](T);const Zt=[dn,jn],nl=[];function Vt(e,t){return e[0]==="pt"?0:1}return z=Vt(T),B=nl[z]=Zt[z](T),Se=new h({props:{code:"bW9kZWwuY29uZmlnLmlkMmxhYmVs",highlighted:"model.config.id2label",wrap:!1}}),We=new h({props:{code:"JTdCMCUzQSUyMCdORUdBVElWRSclMkMlMjAxJTNBJTIwJ1BPU0lUSVZFJyU3RA==",highlighted:'{<span class="hljs-number">0</span>: <span class="hljs-string">&#x27;NEGATIVE&#x27;</span>, <span class="hljs-number">1</span>: <span class="hljs-string">&#x27;POSITIVE&#x27;</span>}',wrap:!1}}),Fe=new qt({props:{source:"https://github.com/huggingface/course/blob/main/chapters/ja/chapter2/2.mdx"}}),{c(){s=y("meta"),p=M(),l=y("p"),i=M(),J(u.$$.fragment),r=M(),J(w.$$.fragment),Ul=M(),J(K.$$.fragment),jl=M(),C.c(),al=M(),X=y("blockquote"),X.innerHTML=xs,dl=M(),k.c(),pl=M(),O=y("p"),O.innerHTML=Qs,wl=M(),J(ee.$$.fragment),hl=M(),le=y("p"),le.textContent=Ns,_l=M(),J(se.$$.fragment),Cl=M(),te=y("p"),te.innerHTML=Ds,$l=M(),Y=y("div"),Y.innerHTML=Es,kl=M(),ne=y("p"),ne.textContent=Gs,Il=M(),J(ae.$$.fragment),gl=M(),pe=y("p"),pe.innerHTML=Zs,Al=M(),re=y("ul"),re.innerHTML=Vs,vl=M(),ie=y("p"),ie.innerHTML=Hs,xl=M(),Me=y("p"),Me.innerHTML=Rs,Ql=M(),J(ce.$$.fragment),Nl=M(),ue=y("p"),ue.textContent=Ss,Dl=M(),oe=y("p"),oe.innerHTML=Ws,El=M(),me=y("p"),me.innerHTML=zs,Gl=M(),g.c(),rl=M(),ye=y("p"),ye.textContent=Bs,Zl=M(),v.c(),il=M(),fe=y("p"),fe.innerHTML=Ls,Vl=M(),J(Te.$$.fragment),Hl=M(),Q.c(),Ml=M(),be=y("p"),be.textContent=Fs,Rl=M(),Je=y("p"),Je.innerHTML=Xs,Sl=M(),Ue=y("p"),Ue.textContent=Ys,Wl=M(),je=y("p"),je.innerHTML=Ps,zl=M(),J(de.$$.fragment),Bl=M(),we=y("p"),we.textContent=qs,Ll=M(),he=y("ul"),he.innerHTML=Ks,Fl=M(),_e=y("p"),_e.textContent=Os,Xl=M(),Ce=y("p"),Ce.textContent=et,Yl=M(),D.c(),cl=M(),$e=y("p"),$e.innerHTML=lt,Pl=M(),J(ke.$$.fragment),ql=M(),Ie=y("p"),Ie.textContent=st,Kl=M(),P=y("div"),P.innerHTML=tt,Ol=M(),ge=y("p"),ge.textContent=nt,es=M(),Ae=y("p"),Ae.textContent=at,ls=M(),ve=y("p"),ve.textContent=pt,ss=M(),xe=y("ul"),xe.innerHTML=rt,ts=M(),G.c(),ul=M(),Qe=y("p"),Qe.textContent=it,ns=M(),J(Ne.$$.fragment),as=M(),V.c(),ol=M(),De=y("p"),De.textContent=Mt,ps=M(),J(Ee.$$.fragment),rs=M(),Ge=y("p"),Ge.textContent=ct,is=M(),J(Ze.$$.fragment),Ms=M(),R.c(),ml=M(),Ve=y("p"),Ve.innerHTML=ut,cs=M(),W.c(),yl=M(),B.c(),fl=M(),He=y("p"),He.innerHTML=ot,us=M(),Re=y("p"),Re.innerHTML=mt,os=M(),J(Se.$$.fragment),ms=M(),J(We.$$.fragment),ys=M(),ze=y("p"),ze.textContent=yt,fs=M(),Be=y("ul"),Be.innerHTML=ft,Ts=M(),Le=y("p"),Le.textContent=Tt,bs=M(),q=y("blockquote"),q.innerHTML=bt,Js=M(),J(Fe.$$.fragment),Us=M(),Jl=y("p"),this.h()},l(e){const t=Xt("svelte-u9bgzb",document.head);s=f(t,"META",{name:!0,content:!0}),t.forEach(n),p=c(e),l=f(e,"P",{}),Rt(l).forEach(n),i=c(e),U(u.$$.fragment,e),r=c(e),U(w.$$.fragment,e),Ul=c(e),U(K.$$.fragment,e),jl=c(e),C.l(e),al=c(e),X=f(e,"BLOCKQUOTE",{class:!0,"data-svelte-h":!0}),b(X)!=="svelte-1rtifot"&&(X.innerHTML=xs),dl=c(e),k.l(e),pl=c(e),O=f(e,"P",{"data-svelte-h":!0}),b(O)!=="svelte-1sol6sr"&&(O.innerHTML=Qs),wl=c(e),U(ee.$$.fragment,e),hl=c(e),le=f(e,"P",{"data-svelte-h":!0}),b(le)!=="svelte-1r7bisc"&&(le.textContent=Ns),_l=c(e),U(se.$$.fragment,e),Cl=c(e),te=f(e,"P",{"data-svelte-h":!0}),b(te)!=="svelte-deaiqm"&&(te.innerHTML=Ds),$l=c(e),Y=f(e,"DIV",{class:!0,"data-svelte-h":!0}),b(Y)!=="svelte-fbe70j"&&(Y.innerHTML=Es),kl=c(e),ne=f(e,"P",{"data-svelte-h":!0}),b(ne)!=="svelte-1vkvovj"&&(ne.textContent=Gs),Il=c(e),U(ae.$$.fragment,e),gl=c(e),pe=f(e,"P",{"data-svelte-h":!0}),b(pe)!=="svelte-fmtapy"&&(pe.innerHTML=Zs),Al=c(e),re=f(e,"UL",{"data-svelte-h":!0}),b(re)!=="svelte-s3jgi8"&&(re.innerHTML=Vs),vl=c(e),ie=f(e,"P",{"data-svelte-h":!0}),b(ie)!=="svelte-gcu5n7"&&(ie.innerHTML=Hs),xl=c(e),Me=f(e,"P",{"data-svelte-h":!0}),b(Me)!=="svelte-1y4xx9b"&&(Me.innerHTML=Rs),Ql=c(e),U(ce.$$.fragment,e),Nl=c(e),ue=f(e,"P",{"data-svelte-h":!0}),b(ue)!=="svelte-13tfgw9"&&(ue.textContent=Ss),Dl=c(e),oe=f(e,"P",{"data-svelte-h":!0}),b(oe)!=="svelte-qenkr7"&&(oe.innerHTML=Ws),El=c(e),me=f(e,"P",{"data-svelte-h":!0}),b(me)!=="svelte-u9iviz"&&(me.innerHTML=zs),Gl=c(e),g.l(e),rl=c(e),ye=f(e,"P",{"data-svelte-h":!0}),b(ye)!=="svelte-1ek9tod"&&(ye.textContent=Bs),Zl=c(e),v.l(e),il=c(e),fe=f(e,"P",{"data-svelte-h":!0}),b(fe)!=="svelte-lyupo7"&&(fe.innerHTML=Ls),Vl=c(e),U(Te.$$.fragment,e),Hl=c(e),Q.l(e),Ml=c(e),be=f(e,"P",{"data-svelte-h":!0}),b(be)!=="svelte-1l0mpb8"&&(be.textContent=Fs),Rl=c(e),Je=f(e,"P",{"data-svelte-h":!0}),b(Je)!=="svelte-1i3fqtb"&&(Je.innerHTML=Xs),Sl=c(e),Ue=f(e,"P",{"data-svelte-h":!0}),b(Ue)!=="svelte-lpn8mk"&&(Ue.textContent=Ys),Wl=c(e),je=f(e,"P",{"data-svelte-h":!0}),b(je)!=="svelte-1e4ih18"&&(je.innerHTML=Ps),zl=c(e),U(de.$$.fragment,e),Bl=c(e),we=f(e,"P",{"data-svelte-h":!0}),b(we)!=="svelte-un6i59"&&(we.textContent=qs),Ll=c(e),he=f(e,"UL",{"data-svelte-h":!0}),b(he)!=="svelte-118xab0"&&(he.innerHTML=Ks),Fl=c(e),_e=f(e,"P",{"data-svelte-h":!0}),b(_e)!=="svelte-yu01ek"&&(_e.textContent=Os),Xl=c(e),Ce=f(e,"P",{"data-svelte-h":!0}),b(Ce)!=="svelte-b0eozs"&&(Ce.textContent=et),Yl=c(e),D.l(e),cl=c(e),$e=f(e,"P",{"data-svelte-h":!0}),b($e)!=="svelte-kmz8n9"&&($e.innerHTML=lt),Pl=c(e),U(ke.$$.fragment,e),ql=c(e),Ie=f(e,"P",{"data-svelte-h":!0}),b(Ie)!=="svelte-1k4850h"&&(Ie.textContent=st),Kl=c(e),P=f(e,"DIV",{class:!0,"data-svelte-h":!0}),b(P)!=="svelte-8mo6lt"&&(P.innerHTML=tt),Ol=c(e),ge=f(e,"P",{"data-svelte-h":!0}),b(ge)!=="svelte-18u58rm"&&(ge.textContent=nt),es=c(e),Ae=f(e,"P",{"data-svelte-h":!0}),b(Ae)!=="svelte-1qr9w5k"&&(Ae.textContent=at),ls=c(e),ve=f(e,"P",{"data-svelte-h":!0}),b(ve)!=="svelte-19ppf9"&&(ve.textContent=pt),ss=c(e),xe=f(e,"UL",{"data-svelte-h":!0}),b(xe)!=="svelte-79gp53"&&(xe.innerHTML=rt),ts=c(e),G.l(e),ul=c(e),Qe=f(e,"P",{"data-svelte-h":!0}),b(Qe)!=="svelte-rpv44l"&&(Qe.textContent=it),ns=c(e),U(Ne.$$.fragment,e),as=c(e),V.l(e),ol=c(e),De=f(e,"P",{"data-svelte-h":!0}),b(De)!=="svelte-i9fnzo"&&(De.textContent=Mt),ps=c(e),U(Ee.$$.fragment,e),rs=c(e),Ge=f(e,"P",{"data-svelte-h":!0}),b(Ge)!=="svelte-sk5zs4"&&(Ge.textContent=ct),is=c(e),U(Ze.$$.fragment,e),Ms=c(e),R.l(e),ml=c(e),Ve=f(e,"P",{"data-svelte-h":!0}),b(Ve)!=="svelte-m1j3nb"&&(Ve.innerHTML=ut),cs=c(e),W.l(e),yl=c(e),B.l(e),fl=c(e),He=f(e,"P",{"data-svelte-h":!0}),b(He)!=="svelte-wmpowk"&&(He.innerHTML=ot),us=c(e),Re=f(e,"P",{"data-svelte-h":!0}),b(Re)!=="svelte-1k97w67"&&(Re.innerHTML=mt),os=c(e),U(Se.$$.fragment,e),ms=c(e),U(We.$$.fragment,e),ys=c(e),ze=f(e,"P",{"data-svelte-h":!0}),b(ze)!=="svelte-jrlq7e"&&(ze.textContent=yt),fs=c(e),Be=f(e,"UL",{"data-svelte-h":!0}),b(Be)!=="svelte-1s9lekd"&&(Be.innerHTML=ft),Ts=c(e),Le=f(e,"P",{"data-svelte-h":!0}),b(Le)!=="svelte-1su1vug"&&(Le.textContent=Tt),bs=c(e),q=f(e,"BLOCKQUOTE",{class:!0,"data-svelte-h":!0}),b(q)!=="svelte-o8ivea"&&(q.innerHTML=bt),Js=c(e),U(Fe.$$.fragment,e),Us=c(e),Jl=f(e,"P",{}),Rt(Jl).forEach(n),this.h()},h(){Tl(s,"name","hf:doc:metadata"),Tl(s,"content",hn),Tl(X,"class","tip"),Tl(Y,"class","flex justify-center"),Tl(P,"class","flex justify-center"),Tl(q,"class","tip")},m(e,t){Yt(document.head,s),a(e,p,t),a(e,l,t),a(e,i,t),j(u,e,t),a(e,r,t),j(w,e,t),a(e,Ul,t),j(K,e,t),a(e,jl,t),Xe[_].m(e,t),a(e,al,t),a(e,X,t),a(e,dl,t),Ye[$].m(e,t),a(e,pl,t),a(e,O,t),a(e,wl,t),j(ee,e,t),a(e,hl,t),a(e,le,t),a(e,_l,t),j(se,e,t),a(e,Cl,t),a(e,te,t),a(e,$l,t),a(e,Y,t),a(e,kl,t),a(e,ne,t),a(e,Il,t),j(ae,e,t),a(e,gl,t),a(e,pe,t),a(e,Al,t),a(e,re,t),a(e,vl,t),a(e,ie,t),a(e,xl,t),a(e,Me,t),a(e,Ql,t),j(ce,e,t),a(e,Nl,t),a(e,ue,t),a(e,Dl,t),a(e,oe,t),a(e,El,t),a(e,me,t),a(e,Gl,t),Pe[I].m(e,t),a(e,rl,t),a(e,ye,t),a(e,Zl,t),qe[A].m(e,t),a(e,il,t),a(e,fe,t),a(e,Vl,t),j(Te,e,t),a(e,Hl,t),Ke[x].m(e,t),a(e,Ml,t),a(e,be,t),a(e,Rl,t),a(e,Je,t),a(e,Sl,t),a(e,Ue,t),a(e,Wl,t),a(e,je,t),a(e,zl,t),j(de,e,t),a(e,Bl,t),a(e,we,t),a(e,Ll,t),a(e,he,t),a(e,Fl,t),a(e,_e,t),a(e,Xl,t),a(e,Ce,t),a(e,Yl,t),Oe[N].m(e,t),a(e,cl,t),a(e,$e,t),a(e,Pl,t),j(ke,e,t),a(e,ql,t),a(e,Ie,t),a(e,Kl,t),a(e,P,t),a(e,Ol,t),a(e,ge,t),a(e,es,t),a(e,Ae,t),a(e,ls,t),a(e,ve,t),a(e,ss,t),a(e,xe,t),a(e,ts,t),el[E].m(e,t),a(e,ul,t),a(e,Qe,t),a(e,ns,t),j(Ne,e,t),a(e,as,t),ll[Z].m(e,t),a(e,ol,t),a(e,De,t),a(e,ps,t),j(Ee,e,t),a(e,rs,t),a(e,Ge,t),a(e,is,t),j(Ze,e,t),a(e,Ms,t),sl[H].m(e,t),a(e,ml,t),a(e,Ve,t),a(e,cs,t),tl[S].m(e,t),a(e,yl,t),nl[z].m(e,t),a(e,fl,t),a(e,He,t),a(e,us,t),a(e,Re,t),a(e,os,t),j(Se,e,t),a(e,ms,t),j(We,e,t),a(e,ys,t),a(e,ze,t),a(e,fs,t),a(e,Be,t),a(e,Ts,t),a(e,Le,t),a(e,bs,t),a(e,q,t),a(e,Js,t),j(Fe,e,t),a(e,Us,t),a(e,Jl,t),js=!0},p(e,[t]){const Ht={};t&1&&(Ht.fw=e[0]),u.$set(Ht);let ds=_;_=Ut(e),_!==ds&&(F(),o(Xe[ds],1,1,()=>{Xe[ds]=null}),L(),C=Xe[_],C||(C=Xe[_]=Jt[_](e),C.c()),m(C,1),C.m(al.parentNode,al));let ws=$;$=dt(e),$!==ws&&(F(),o(Ye[ws],1,1,()=>{Ye[ws]=null}),L(),k=Ye[$],k||(k=Ye[$]=jt[$](e),k.c()),m(k,1),k.m(pl.parentNode,pl));let hs=I;I=ht(e),I!==hs&&(F(),o(Pe[hs],1,1,()=>{Pe[hs]=null}),L(),g=Pe[I],g||(g=Pe[I]=wt[I](e),g.c()),m(g,1),g.m(rl.parentNode,rl));let _s=A;A=Ct(e),A!==_s&&(F(),o(qe[_s],1,1,()=>{qe[_s]=null}),L(),v=qe[A],v||(v=qe[A]=_t[A](e),v.c()),m(v,1),v.m(il.parentNode,il));let Cs=x;x=kt(e),x!==Cs&&(F(),o(Ke[Cs],1,1,()=>{Ke[Cs]=null}),L(),Q=Ke[x],Q||(Q=Ke[x]=$t[x](e),Q.c()),m(Q,1),Q.m(Ml.parentNode,Ml));let $s=N;N=gt(e),N!==$s&&(F(),o(Oe[$s],1,1,()=>{Oe[$s]=null}),L(),D=Oe[N],D||(D=Oe[N]=It[N](e),D.c()),m(D,1),D.m(cl.parentNode,cl));let ks=E;E=vt(e),E!==ks&&(F(),o(el[ks],1,1,()=>{el[ks]=null}),L(),G=el[E],G||(G=el[E]=At[E](e),G.c()),m(G,1),G.m(ul.parentNode,ul));let Is=Z;Z=Qt(e),Z!==Is&&(F(),o(ll[Is],1,1,()=>{ll[Is]=null}),L(),V=ll[Z],V||(V=ll[Z]=xt[Z](e),V.c()),m(V,1),V.m(ol.parentNode,ol));let gs=H;H=Dt(e),H!==gs&&(F(),o(sl[gs],1,1,()=>{sl[gs]=null}),L(),R=sl[H],R||(R=sl[H]=Nt[H](e),R.c()),m(R,1),R.m(ml.parentNode,ml));let As=S;S=Gt(e),S!==As&&(F(),o(tl[As],1,1,()=>{tl[As]=null}),L(),W=tl[S],W||(W=tl[S]=Et[S](e),W.c()),m(W,1),W.m(yl.parentNode,yl));let vs=z;z=Vt(e),z!==vs&&(F(),o(nl[vs],1,1,()=>{nl[vs]=null}),L(),B=nl[z],B||(B=nl[z]=Zt[z](e),B.c()),m(B,1),B.m(fl.parentNode,fl))},i(e){js||(m(u.$$.fragment,e),m(w.$$.fragment,e),m(K.$$.fragment,e),m(C),m(k),m(ee.$$.fragment,e),m(se.$$.fragment,e),m(ae.$$.fragment,e),m(ce.$$.fragment,e),m(g),m(v),m(Te.$$.fragment,e),m(Q),m(de.$$.fragment,e),m(D),m(ke.$$.fragment,e),m(G),m(Ne.$$.fragment,e),m(V),m(Ee.$$.fragment,e),m(Ze.$$.fragment,e),m(R),m(W),m(B),m(Se.$$.fragment,e),m(We.$$.fragment,e),m(Fe.$$.fragment,e),js=!0)},o(e){o(u.$$.fragment,e),o(w.$$.fragment,e),o(K.$$.fragment,e),o(C),o(k),o(ee.$$.fragment,e),o(se.$$.fragment,e),o(ae.$$.fragment,e),o(ce.$$.fragment,e),o(g),o(v),o(Te.$$.fragment,e),o(Q),o(de.$$.fragment,e),o(D),o(ke.$$.fragment,e),o(G),o(Ne.$$.fragment,e),o(V),o(Ee.$$.fragment,e),o(Ze.$$.fragment,e),o(R),o(W),o(B),o(Se.$$.fragment,e),o(We.$$.fragment,e),o(Fe.$$.fragment,e),js=!1},d(e){e&&(n(p),n(l),n(i),n(r),n(Ul),n(jl),n(al),n(X),n(dl),n(pl),n(O),n(wl),n(hl),n(le),n(_l),n(Cl),n(te),n($l),n(Y),n(kl),n(ne),n(Il),n(gl),n(pe),n(Al),n(re),n(vl),n(ie),n(xl),n(Me),n(Ql),n(Nl),n(ue),n(Dl),n(oe),n(El),n(me),n(Gl),n(rl),n(ye),n(Zl),n(il),n(fe),n(Vl),n(Hl),n(Ml),n(be),n(Rl),n(Je),n(Sl),n(Ue),n(Wl),n(je),n(zl),n(Bl),n(we),n(Ll),n(he),n(Fl),n(_e),n(Xl),n(Ce),n(Yl),n(cl),n($e),n(Pl),n(ql),n(Ie),n(Kl),n(P),n(Ol),n(ge),n(es),n(Ae),n(ls),n(ve),n(ss),n(xe),n(ts),n(ul),n(Qe),n(ns),n(as),n(ol),n(De),n(ps),n(rs),n(Ge),n(is),n(Ms),n(ml),n(Ve),n(cs),n(yl),n(fl),n(He),n(us),n(Re),n(os),n(ms),n(ys),n(ze),n(fs),n(Be),n(Ts),n(Le),n(bs),n(q),n(Js),n(Us),n(Jl)),n(s),d(u,e),d(w,e),d(K,e),Xe[_].d(e),Ye[$].d(e),d(ee,e),d(se,e),d(ae,e),d(ce,e),Pe[I].d(e),qe[A].d(e),d(Te,e),Ke[x].d(e),d(de,e),Oe[N].d(e),d(ke,e),el[E].d(e),d(Ne,e),ll[Z].d(e),d(Ee,e),d(Ze,e),sl[H].d(e),tl[S].d(e),nl[z].d(e),d(Se,e),d(We,e),d(Fe,e)}}}const hn='{"title":"pipelineの裏側","local":"pipelineの裏側","sections":[{"title":"トークナイザを用いた前処理","local":"トークナイザを用いた前処理","sections":[],"depth":2},{"title":"モデルの使い方","local":"モデルの使い方","sections":[{"title":"高次元ベクトル?","local":"高次元ベクトル","sections":[],"depth":3},{"title":"モデルヘッド(Model heads): 数値の意味を理解する","local":"モデルヘッドmodel-heads-数値の意味を理解する","sections":[],"depth":3}],"depth":2},{"title":"出力の後処理","local":"出力の後処理","sections":[],"depth":2}],"depth":1}';function _n(T,s,p){let l="pt";return Bt(()=>{const i=new URLSearchParams(window.location.search);p(0,l=i.get("fw")||"pt")}),[l]}class xn extends Lt{constructor(s){super(),Ft(this,s,_n,wn,zt,{})}}export{xn as component};