import{s as it,o as pt,n as Y}from"../chunks/scheduler.d586627e.js";import{S as mt,i as ut,g as c,s as r,r as f,A as ct,h as d,f as t,c as i,j as nt,u as g,x as j,k as lt,y as dt,a,v as $,d as b,t as h,w as y}from"../chunks/index.8589a59c.js";import{T as Js}from"../chunks/Tip.84e2336e.js";import{C as w}from"../chunks/CodeBlock.dffc9a5b.js";import{F as rt,M as Rs}from"../chunks/Markdown.67fc2fa9.js";import{H as xe,E as ft}from"../chunks/index.0603e7fd.js";function gt(Z){let o,u='Você pode também salvar seu arquivo de configurações como um dicionário ou até mesmo com a diferença entre as seus atributos de configuração customizados e os atributos de configuração padrões! Olhe a documentação <a href="main_classes/configuration">configuration</a> para mais detalhes.';return{c(){o=c("p"),o.innerHTML=u},l(n){o=d(n,"P",{"data-svelte-h":!0}),j(o)!=="svelte-1w3c9xg"&&(o.innerHTML=u)},m(n,p){a(n,o,p)},p:Y,d(n){n&&t(o)}}}function $t(Z){let o,u="Carregar seus atributos de configuração customizados em um modelo:",n,p,v,M,x="Isso cria um modelo com valores aleatórios ao invés de pré-treinar os pesos. Você não irá conseguir usar usar esse modelo para nada útil ainda, até você treinar ele. Treino é um processo caro e demorado. Geralmente é melhor utilizar um modelo pré-treinado para obter melhores resultados mais rápido, enquanto usa apenas uma fração dos recursos necessários para treinar.",J,_,k="Criar um modelo pré-treinado com <code>from_pretrained()</code>:",m,q,z,R,W="Quando você carregar os pesos pré-treinados, a configuração padrão do modelo é automaticamente carregada se o modelo é provido pelo 🤗 Transformers. No entanto, você ainda consegue mudar - alguns ou todos - os atributos padrões de configuração do modelo com os seus próprio atributos, se você preferir:",U,C,V;return p=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRNb2RlbCUwQSUwQW15X2NvbmZpZyUyMCUzRCUyMERpc3RpbEJlcnRDb25maWcuZnJvbV9wcmV0cmFpbmVkKCUyMi4lMkZ5b3VyX21vZGVsX3NhdmVfcGF0aCUyRm15X2NvbmZpZy5qc29uJTIyKSUwQW1vZGVsJTIwJTNEJTIwRGlzdGlsQmVydE1vZGVsKG15X2NvbmZpZyk=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertModel

<span class="hljs-meta">&gt;&gt;&gt; </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">&quot;./your_model_save_path/my_config.json&quot;</span>)
<span class="hljs-meta">&gt;&gt;&gt; </span>model = DistilBertModel(my_config)`,wrap:!1}}),q=new w({props:{code:"bW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0TW9kZWwuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>model = DistilBertModel.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)',wrap:!1}}),C=new w({props:{code:"bW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0TW9kZWwuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMiUyQyUyMGNvbmZpZyUzRG15X2NvbmZpZyk=",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>model = DistilBertModel.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>, config=my_config)',wrap:!1}}),{c(){o=c("p"),o.textContent=u,n=r(),f(p.$$.fragment),v=r(),M=c("p"),M.textContent=x,J=r(),_=c("p"),_.innerHTML=k,m=r(),f(q.$$.fragment),z=r(),R=c("p"),R.textContent=W,U=r(),f(C.$$.fragment)},l(l){o=d(l,"P",{"data-svelte-h":!0}),j(o)!=="svelte-1c03gen"&&(o.textContent=u),n=i(l),g(p.$$.fragment,l),v=i(l),M=d(l,"P",{"data-svelte-h":!0}),j(M)!=="svelte-13tdbko"&&(M.textContent=x),J=i(l),_=d(l,"P",{"data-svelte-h":!0}),j(_)!=="svelte-11s0isn"&&(_.innerHTML=k),m=i(l),g(q.$$.fragment,l),z=i(l),R=d(l,"P",{"data-svelte-h":!0}),j(R)!=="svelte-1c3dpxi"&&(R.textContent=W),U=i(l),g(C.$$.fragment,l)},m(l,T){a(l,o,T),a(l,n,T),$(p,l,T),a(l,v,T),a(l,M,T),a(l,J,T),a(l,_,T),a(l,m,T),$(q,l,T),a(l,z,T),a(l,R,T),a(l,U,T),$(C,l,T),V=!0},p:Y,i(l){V||(b(p.$$.fragment,l),b(q.$$.fragment,l),b(C.$$.fragment,l),V=!0)},o(l){h(p.$$.fragment,l),h(q.$$.fragment,l),h(C.$$.fragment,l),V=!1},d(l){l&&(t(o),t(n),t(v),t(M),t(J),t(_),t(m),t(z),t(R),t(U)),y(p,l),y(q,l),y(C,l)}}}function bt(Z){let o,u;return o=new Rs({props:{$$slots:{default:[$t]},$$scope:{ctx:Z}}}),{c(){f(o.$$.fragment)},l(n){g(o.$$.fragment,n)},m(n,p){$(o,n,p),u=!0},p(n,p){const v={};p&2&&(v.$$scope={dirty:p,ctx:n}),o.$set(v)},i(n){u||(b(o.$$.fragment,n),u=!0)},o(n){h(o.$$.fragment,n),u=!1},d(n){y(o,n)}}}function ht(Z){let o,u="Carregar os seus próprios atributos padrões de contiguração no modelo:",n,p,v,M,x="Isso cria um modelo com valores aleatórios ao invés de pré-treinar os pesos. Você não irá conseguir usar usar esse modelo para nada útil ainda, até você treinar ele. Treino é um processo caro e demorado. Geralmente é melhor utilizar um modelo pré-treinado para obter melhores resultados mais rápido, enquanto usa apenas uma fração dos recursos necessários para treinar.",J,_,k="Criar um modelo pré-treinado com <code>from_pretrained()</code>:",m,q,z,R,W="Quando você carregar os pesos pré-treinados, a configuração padrão do modelo é automaticamente carregada se o modelo é provido pelo 🤗 Transformers. No entanto, você ainda consegue mudar - alguns ou todos - os atributos padrões de configuração do modelo com os seus próprio atributos, se você preferir:",U,C,V;return p=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydE1vZGVsJTBBJTBBbXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyLiUyRnlvdXJfbW9kZWxfc2F2ZV9wYXRoJTJGbXlfY29uZmlnLmpzb24lMjIpJTBBdGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbChteV9jb25maWcp",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertModel

<span class="hljs-meta">&gt;&gt;&gt; </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">&quot;./your_model_save_path/my_config.json&quot;</span>)
<span class="hljs-meta">&gt;&gt;&gt; </span>tf_model = TFDistilBertModel(my_config)`,wrap:!1}}),q=new w({props:{code:"dGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>tf_model = TFDistilBertModel.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)',wrap:!1}}),C=new w({props:{code:"dGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRNb2RlbC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyJTJDJTIwY29uZmlnJTNEbXlfY29uZmlnKQ==",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>tf_model = TFDistilBertModel.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>, config=my_config)',wrap:!1}}),{c(){o=c("p"),o.textContent=u,n=r(),f(p.$$.fragment),v=r(),M=c("p"),M.textContent=x,J=r(),_=c("p"),_.innerHTML=k,m=r(),f(q.$$.fragment),z=r(),R=c("p"),R.textContent=W,U=r(),f(C.$$.fragment)},l(l){o=d(l,"P",{"data-svelte-h":!0}),j(o)!=="svelte-k13ol"&&(o.textContent=u),n=i(l),g(p.$$.fragment,l),v=i(l),M=d(l,"P",{"data-svelte-h":!0}),j(M)!=="svelte-13tdbko"&&(M.textContent=x),J=i(l),_=d(l,"P",{"data-svelte-h":!0}),j(_)!=="svelte-11s0isn"&&(_.innerHTML=k),m=i(l),g(q.$$.fragment,l),z=i(l),R=d(l,"P",{"data-svelte-h":!0}),j(R)!=="svelte-1c3dpxi"&&(R.textContent=W),U=i(l),g(C.$$.fragment,l)},m(l,T){a(l,o,T),a(l,n,T),$(p,l,T),a(l,v,T),a(l,M,T),a(l,J,T),a(l,_,T),a(l,m,T),$(q,l,T),a(l,z,T),a(l,R,T),a(l,U,T),$(C,l,T),V=!0},p:Y,i(l){V||(b(p.$$.fragment,l),b(q.$$.fragment,l),b(C.$$.fragment,l),V=!0)},o(l){h(p.$$.fragment,l),h(q.$$.fragment,l),h(C.$$.fragment,l),V=!1},d(l){l&&(t(o),t(n),t(v),t(M),t(J),t(_),t(m),t(z),t(R),t(U)),y(p,l),y(q,l),y(C,l)}}}function yt(Z){let o,u;return o=new Rs({props:{$$slots:{default:[ht]},$$scope:{ctx:Z}}}),{c(){f(o.$$.fragment)},l(n){g(o.$$.fragment,n)},m(n,p){$(o,n,p),u=!0},p(n,p){const v={};p&2&&(v.$$scope={dirty:p,ctx:n}),o.$set(v)},i(n){u||(b(o.$$.fragment,n),u=!0)},o(n){h(o.$$.fragment,n),u=!1},d(n){y(o,n)}}}function jt(Z){let o,u="Por exemplo, <code>DistilBertForSequenceClassification</code> é um modelo DistilBERT base com uma head de classificação de sequência. A head de calssificação de sequência é uma camada linear no topo das saídas agrupadas.",n,p,v,M,x="Reutilize facilmente esse ponto de parada para outra tarefe mudando para uma head de modelo diferente. Para uma tarefe de responder questões, você usaria a head do modelo <code>DistilBertForQuestionAnswering</code>. A head de responder questões é similar com a de classificação de sequências exceto o fato de que ela é uma camada no topo dos estados das saídas ocultas.",J,_,k;return p=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRGb3JTZXF1ZW5jZUNsYXNzaWZpY2F0aW9uJTBBJTBBbW9kZWwlMjAlM0QlMjBEaXN0aWxCZXJ0Rm9yU2VxdWVuY2VDbGFzc2lmaWNhdGlvbi5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertForSequenceClassification

<span class="hljs-meta">&gt;&gt;&gt; </span>model = DistilBertForSequenceClassification.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),_=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRGb3JRdWVzdGlvbkFuc3dlcmluZyUwQSUwQW1vZGVsJTIwJTNEJTIwRGlzdGlsQmVydEZvclF1ZXN0aW9uQW5zd2VyaW5nLmZyb21fcHJldHJhaW5lZCglMjJkaXN0aWxiZXJ0JTJGZGlzdGlsYmVydC1iYXNlLXVuY2FzZWQlMjIp",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertForQuestionAnswering

<span class="hljs-meta">&gt;&gt;&gt; </span>model = DistilBertForQuestionAnswering.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),{c(){o=c("p"),o.innerHTML=u,n=r(),f(p.$$.fragment),v=r(),M=c("p"),M.innerHTML=x,J=r(),f(_.$$.fragment)},l(m){o=d(m,"P",{"data-svelte-h":!0}),j(o)!=="svelte-qzae0f"&&(o.innerHTML=u),n=i(m),g(p.$$.fragment,m),v=i(m),M=d(m,"P",{"data-svelte-h":!0}),j(M)!=="svelte-i9bvsw"&&(M.innerHTML=x),J=i(m),g(_.$$.fragment,m)},m(m,q){a(m,o,q),a(m,n,q),$(p,m,q),a(m,v,q),a(m,M,q),a(m,J,q),$(_,m,q),k=!0},p:Y,i(m){k||(b(p.$$.fragment,m),b(_.$$.fragment,m),k=!0)},o(m){h(p.$$.fragment,m),h(_.$$.fragment,m),k=!1},d(m){m&&(t(o),t(n),t(v),t(M),t(J)),y(p,m),y(_,m)}}}function vt(Z){let o,u;return o=new Rs({props:{$$slots:{default:[jt]},$$scope:{ctx:Z}}}),{c(){f(o.$$.fragment)},l(n){g(o.$$.fragment,n)},m(n,p){$(o,n,p),u=!0},p(n,p){const v={};p&2&&(v.$$scope={dirty:p,ctx:n}),o.$set(v)},i(n){u||(b(o.$$.fragment,n),u=!0)},o(n){h(o.$$.fragment,n),u=!1},d(n){y(o,n)}}}function Mt(Z){let o,u="Por exemplo, <code>TFDistilBertForSequenceClassification</code> é um modelo DistilBERT base com uma head de classificação de sequência. A head de calssificação de sequência é uma camada linear no topo das saídas agrupadas.",n,p,v,M,x="Reutilize facilmente esse ponto de parada para outra tarefe mudando para uma head de modelo diferente. Para uma tarefe de responder questões, você usaria a head do modelo <code>TFDistilBertForQuestionAnswering</code>. A head de responder questões é similar com a de classificação de sequências exceto o fato de que ela é uma camada no topo dos estados das saídas ocultas.",J,_,k;return p=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24lMEElMEF0Zl9tb2RlbCUyMCUzRCUyMFRGRGlzdGlsQmVydEZvclNlcXVlbmNlQ2xhc3NpZmljYXRpb24uZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertForSequenceClassification

<span class="hljs-meta">&gt;&gt;&gt; </span>tf_model = TFDistilBertForSequenceClassification.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),_=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFRGRGlzdGlsQmVydEZvclF1ZXN0aW9uQW5zd2VyaW5nJTBBJTBBdGZfbW9kZWwlMjAlM0QlMjBURkRpc3RpbEJlcnRGb3JRdWVzdGlvbkFuc3dlcmluZy5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> TFDistilBertForQuestionAnswering

<span class="hljs-meta">&gt;&gt;&gt; </span>tf_model = TFDistilBertForQuestionAnswering.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),{c(){o=c("p"),o.innerHTML=u,n=r(),f(p.$$.fragment),v=r(),M=c("p"),M.innerHTML=x,J=r(),f(_.$$.fragment)},l(m){o=d(m,"P",{"data-svelte-h":!0}),j(o)!=="svelte-1sg0zkd"&&(o.innerHTML=u),n=i(m),g(p.$$.fragment,m),v=i(m),M=d(m,"P",{"data-svelte-h":!0}),j(M)!=="svelte-s66f56"&&(M.innerHTML=x),J=i(m),g(_.$$.fragment,m)},m(m,q){a(m,o,q),a(m,n,q),$(p,m,q),a(m,v,q),a(m,M,q),a(m,J,q),$(_,m,q),k=!0},p:Y,i(m){k||(b(p.$$.fragment,m),b(_.$$.fragment,m),k=!0)},o(m){h(p.$$.fragment,m),h(_.$$.fragment,m),k=!1},d(m){m&&(t(o),t(n),t(v),t(M),t(J)),y(p,m),y(_,m)}}}function _t(Z){let o,u;return o=new Rs({props:{$$slots:{default:[Mt]},$$scope:{ctx:Z}}}),{c(){f(o.$$.fragment)},l(n){g(o.$$.fragment,n)},m(n,p){$(o,n,p),u=!0},p(n,p){const v={};p&2&&(v.$$scope={dirty:p,ctx:n}),o.$set(v)},i(n){u||(b(o.$$.fragment,n),u=!0)},o(n){h(o.$$.fragment,n),u=!1},d(n){y(o,n)}}}function qt(Z){let o,u='Nem todo modelo suporta um ‘fast tokenizer’. De uma olhada aqui <a href="index#supported-frameworks">table</a> pra checar se um modelo suporta ‘fast tokenizer’.';return{c(){o=c("p"),o.innerHTML=u},l(n){o=d(n,"P",{"data-svelte-h":!0}),j(o)!=="svelte-za00d2"&&(o.innerHTML=u)},m(n,p){a(n,o,p)},p:Y,d(n){n&&t(o)}}}function Tt(Z){let o,u="Pos padrão, <code>AutoTokenizer</code> tentará carregar um ‘fast tokenizer’. Você pode disabilitar esse comportamento colocando <code>use_fast=False</code> no <code>from_pretrained</code>.";return{c(){o=c("p"),o.innerHTML=u},l(n){o=d(n,"P",{"data-svelte-h":!0}),j(o)!=="svelte-7idicq"&&(o.innerHTML=u)},m(n,p){a(n,o,p)},p:Y,d(n){n&&t(o)}}}function Zt(Z){let o,u="Se você não estiver procurando por nenhuma customização, apenas use o método <code>from_pretrained</code> para carregar parâmetros do modelo de extrator de features padrão.";return{c(){o=c("p"),o.innerHTML=u},l(n){o=d(n,"P",{"data-svelte-h":!0}),j(o)!=="svelte-1y4q9rq"&&(o.innerHTML=u)},m(n,p){a(n,o,p)},p:Y,d(n){n&&t(o)}}}function wt(Z){let o,u,n,p,v,M,x,J='Uma <a href="model_doc/auto"><code>AutoClass</code></a> automaticamente infere a arquitetura do modelo e baixa configurações e pesos pré-treinados. Geralmente, nós recomendamos usar uma <code>AutoClass</code> para produzir um código independente de checkpoints. Mas usuários que querem mais contole sobre parâmetros específicos do modelo pode criar um modelo customizado 🤗 Transformers a partir de algumas classes bases. Isso pode ser particulamente útil para alguém que está interessado em estudar, treinar ou fazer experimentos com um modelo 🤗 Transformers. Nesse tutorial, será explicado como criar um modelo customizado sem uma <code>AutoClass</code>. Aprenda como:',_,k,m="<li>Carregar e customizar a configuração de um modelo.</li> <li>Criar a arquitetura de um modelo.</li> <li>Criar um tokenizer rápido e devagar para textos.</li> <li>Criar extrator de features para tarefas envolvendo audio e imagem.</li> <li>Criar um processador para tarefas multimodais.</li>",q,z,R,W,U='A <a href="main_classes/configuration">configuration</a> refere-se a atributos específicos de um modelo. Cada configuração de modelo tem atributos diferentes; por exemplo, todos modelo de PLN possuem os atributos <code>hidden_size</code>, <code>num_attention_heads</code>, <code>num_hidden_layers</code> e <code>vocab_size</code> em comum. Esse atributos especificam o numero de ‘attention heads’ ou ‘hidden layers’ para construir um modelo.',C,V,l='Dê uma olhada a mais em <a href="model_doc/distilbert">DistilBERT</a> acessando <code>DistilBertConfig</code> para observar esses atributos:',T,L,Ve,N,Cs="<code>DistilBertConfig</code> mostra todos os atributos padrões usados para construir um <code>DistilBertModel</code> base. Todos atributos são customizáveis, o que cria espaço para experimentos. Por exemplo, você pode customizar um modelo padrão para:",We,Q,xs="<li>Tentar uma função de ativação diferente com o parâmetro <code>activation</code>.</li> <li>Usar uma taxa de desistência maior para as probabilidades de ‘attention’ com o parâmetro <code>attention_dropout</code>.</li>",Ue,I,Ge,P,zs="Atributos de um modelo pré-treinado podem ser modificados na função <code>from_pretrained()</code>:",Xe,D,He,S,Vs="Uma vez que você está satisfeito com as configurações do seu modelo, você consegue salvar elas com <code>save_pretrained()</code>. Seu arquivo de configurações está salvo como um arquivo JSON no diretório especificado:",Fe,A,Ee,K,Ws="Para reusar o arquivo de configurações, carregue com <code>from_pretrained()</code>:",Be,O,Ye,G,Le,ee,Ne,se,Us='O próximo passo é criar um <a href="main_classes/models">model</a>. O modelo - também vagamente referido como arquitetura - define o que cada camada está fazendo e quais operações estão acontecendo. Atributos como <code>num_hidden_layers</code> das configurações são utilizados para definir a arquitetura. Todo modelo compartilha a classe base <code>PreTrainedModel</code> e alguns métodos em comum como redimensionar o tamanho dos embeddings de entrada e podar as ‘self-attention heads’. Além disso, todos os modelos também são subclasses de <a href="https://pytorch.org/docs/stable/generated/torch.nn.Module.html" rel="nofollow"><code>torch.nn.Module</code></a>, <a href="https://www.tensorflow.org/api_docs/python/tf/keras/Model" rel="nofollow"><code>tf.keras.Model</code></a> ou <a href="https://flax.readthedocs.io/en/latest/api_reference/flax.linen/module.html" rel="nofollow"><code>flax.linen.Module</code></a>. Isso significa que os modelos são compatíveis com cada respectivo uso de framework.',Qe,X,Ie,te,Pe,ae,Gs="Neste ponto, você tem um modelo básico do DistilBERT que gera os <em>estados ocultos</em>. Os estados ocultos são passados como entrada para a head do moelo para produzir a saída final. 🤗 Transformers fornece uma head de modelo diferente para cada tarefa desde que o modelo suporte essa tarefa (por exemplo, você não consegue utilizar o modelo DistilBERT para uma tarefa de ‘sequence-to-sequence’ como tradução).",De,H,Se,oe,Ae,ne,Xs='A útlima classe base que você precisa antes de usar um modelo para dados textuais é a <a href="main_classes/tokenizer">tokenizer</a> para converter textos originais para tensores. Existem dois tipos de tokenizers que você pode usar com 🤗 Transformers:',Ke,le,Hs='<li><code>PreTrainedTokenizer</code>: uma implementação em Python de um tokenizer.</li> <li><code>PreTrainedTokenizerFast</code>: um tokenizer da nossa biblioteca <a href="https://huggingface.co/docs/tokenizers/python/latest/" rel="nofollow">🤗 Tokenizer</a> baseada em Rust. Esse tipo de tokenizer é significantemente mais rapido - especialmente durante tokenization de codificação - devido a implementação em Rust. O tokenizer rápido tambem oferece métodos adicionais como <em>offset mapping</em> que mapeia tokens para suar palavras ou caracteres originais.</li>',Oe,re,Fs="Os dois tokenizers suporta métodos comuns como os de codificar e decodificar, adicionar novos tokens, e gerenciar tokens especiais.",es,F,ss,ie,Es="Se você treinou seu prórpio tokenizer, você pode criar um a partir do seu arquivo <em>vocabulary</em>:",ts,pe,as,me,Bs="É importante lembrar que o vocabulário de um tokenizer customizado será diferente de um vocabulário gerado pelo tokenizer de um modelo pré treinado. Você precisa usar o vocabulário de um modelo pré treinado se você estiver usando um modelo pré treinado, caso contrário as entradas não farão sentido. Criando um tokenizer com um vocabulário de um modelo pré treinado com a classe <code>DistilBertTokenizer</code>:",os,ue,ns,ce,Ys="Criando um ‘fast tokenizer’ com a classe <code>DistilBertTokenizerFast</code>:",ls,de,rs,E,is,fe,ps,ge,Ls="Um extrator de features processa entradas de imagem ou áudio. Ele herda da classe base <code>FeatureExtractionMixin</code>, e pode também herdar da classe <code>ImageFeatureExtractionMixin</code> para processamento de features de imagem ou da classe <code>SequenceFeatureExtractor</code> para processamento de entradas de áudio.",ms,$e,Ns='Dependendo do que você está trabalhando em um audio ou uma tarefa de visão, crie um estrator de features associado com o modelo que você está usando. Por exemplo, crie um <code>ViTFeatureExtractor</code> padrão se você estiver usando <a href="model_doc/vit">ViT</a> para classificação de imagens:',us,be,cs,B,ds,he,Qs="Modifique qualquer parâmetro dentre os <code>ViTFeatureExtractor</code> para criar seu extrator de features customizado.",fs,ye,gs,je,Is="Para entradas de áutio, você pode criar um <code>Wav2Vec2FeatureExtractor</code> e customizar os parâmetros de uma forma similar:",$s,ve,bs,Me,hs,_e,Ps="Para modelos que suportam tarefas multimodais, 🤗 Transformers oferece uma classe processadora que convenientemente cobre um extrator de features e tokenizer dentro de um único objeto. Por exemplo, vamos usar o <code>Wav2Vec2Processor</code> para uma tarefa de reconhecimento de fala automática (ASR). ASR transcreve áudio para texto, então você irá precisar de um extrator de um features e um tokenizer.",ys,qe,Ds="Crie um extrator de features para lidar com as entradas de áudio.",js,Te,vs,Ze,Ss="Crie um tokenizer para lidar com a entrada de textos:",Ms,we,_s,ke,As="Combine o extrator de features e o tokenizer no <code>Wav2Vec2Processor</code>:",qs,Je,Ts,Re,Ks="Com duas classes básicas - configuração e modelo - e um preprocessamento de classe adicional (tokenizer, extrator de features, ou processador), você pode criar qualquer modelo que suportado por 🤗 Transformers. Qualquer uma dessas classes base são configuráveis, te permitindo usar os atributos específicos que você queira. Você pode facilmente preparar um modelo para treinamento ou modificar um modelo pré-treinado com poucas mudanças.",Zs,Ce,ws,ze,ks;return v=new xe({props:{title:"Criar uma arquitetura customizada",local:"criar-uma-arquitetura-customizada",headingTag:"h1"}}),z=new xe({props:{title:"configuration",local:"configuration",headingTag:"h2"}}),L=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRDb25maWclMEElMEFjb25maWclMjAlM0QlMjBEaXN0aWxCZXJ0Q29uZmlnKCklMEFwcmludChjb25maWcp",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertConfig

<span class="hljs-meta">&gt;&gt;&gt; </span>config = DistilBertConfig()
<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-built_in">print</span>(config)
DistilBertConfig {
  <span class="hljs-string">&quot;activation&quot;</span>: <span class="hljs-string">&quot;gelu&quot;</span>,
  <span class="hljs-string">&quot;attention_dropout&quot;</span>: <span class="hljs-number">0.1</span>,
  <span class="hljs-string">&quot;dim&quot;</span>: <span class="hljs-number">768</span>,
  <span class="hljs-string">&quot;dropout&quot;</span>: <span class="hljs-number">0.1</span>,
  <span class="hljs-string">&quot;hidden_dim&quot;</span>: <span class="hljs-number">3072</span>,
  <span class="hljs-string">&quot;initializer_range&quot;</span>: <span class="hljs-number">0.02</span>,
  <span class="hljs-string">&quot;max_position_embeddings&quot;</span>: <span class="hljs-number">512</span>,
  <span class="hljs-string">&quot;model_type&quot;</span>: <span class="hljs-string">&quot;distilbert&quot;</span>,
  <span class="hljs-string">&quot;n_heads&quot;</span>: <span class="hljs-number">12</span>,
  <span class="hljs-string">&quot;n_layers&quot;</span>: <span class="hljs-number">6</span>,
  <span class="hljs-string">&quot;pad_token_id&quot;</span>: <span class="hljs-number">0</span>,
  <span class="hljs-string">&quot;qa_dropout&quot;</span>: <span class="hljs-number">0.1</span>,
  <span class="hljs-string">&quot;seq_classif_dropout&quot;</span>: <span class="hljs-number">0.2</span>,
  <span class="hljs-string">&quot;sinusoidal_pos_embds&quot;</span>: false,
  <span class="hljs-string">&quot;transformers_version&quot;</span>: <span class="hljs-string">&quot;4.16.2&quot;</span>,
  <span class="hljs-string">&quot;vocab_size&quot;</span>: <span class="hljs-number">30522</span>
}`,wrap:!1}}),I=new w({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZyhhY3RpdmF0aW9uJTNEJTIycmVsdSUyMiUyQyUyMGF0dGVudGlvbl9kcm9wb3V0JTNEMC40KSUwQXByaW50KG15X2NvbmZpZyk=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span>my_config = DistilBertConfig(activation=<span class="hljs-string">&quot;relu&quot;</span>, attention_dropout=<span class="hljs-number">0.4</span>)
<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-built_in">print</span>(my_config)
DistilBertConfig {
  <span class="hljs-string">&quot;activation&quot;</span>: <span class="hljs-string">&quot;relu&quot;</span>,
  <span class="hljs-string">&quot;attention_dropout&quot;</span>: <span class="hljs-number">0.4</span>,
  <span class="hljs-string">&quot;dim&quot;</span>: <span class="hljs-number">768</span>,
  <span class="hljs-string">&quot;dropout&quot;</span>: <span class="hljs-number">0.1</span>,
  <span class="hljs-string">&quot;hidden_dim&quot;</span>: <span class="hljs-number">3072</span>,
  <span class="hljs-string">&quot;initializer_range&quot;</span>: <span class="hljs-number">0.02</span>,
  <span class="hljs-string">&quot;max_position_embeddings&quot;</span>: <span class="hljs-number">512</span>,
  <span class="hljs-string">&quot;model_type&quot;</span>: <span class="hljs-string">&quot;distilbert&quot;</span>,
  <span class="hljs-string">&quot;n_heads&quot;</span>: <span class="hljs-number">12</span>,
  <span class="hljs-string">&quot;n_layers&quot;</span>: <span class="hljs-number">6</span>,
  <span class="hljs-string">&quot;pad_token_id&quot;</span>: <span class="hljs-number">0</span>,
  <span class="hljs-string">&quot;qa_dropout&quot;</span>: <span class="hljs-number">0.1</span>,
  <span class="hljs-string">&quot;seq_classif_dropout&quot;</span>: <span class="hljs-number">0.2</span>,
  <span class="hljs-string">&quot;sinusoidal_pos_embds&quot;</span>: false,
  <span class="hljs-string">&quot;transformers_version&quot;</span>: <span class="hljs-string">&quot;4.16.2&quot;</span>,
  <span class="hljs-string">&quot;vocab_size&quot;</span>: <span class="hljs-number">30522</span>
}`,wrap:!1}}),D=new w({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyJTJDJTIwYWN0aXZhdGlvbiUzRCUyMnJlbHUlMjIlMkMlMjBhdHRlbnRpb25fZHJvcG91dCUzRDAuNCk=",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>, activation=<span class="hljs-string">&quot;relu&quot;</span>, attention_dropout=<span class="hljs-number">0.4</span>)',wrap:!1}}),A=new w({props:{code:"bXlfY29uZmlnLnNhdmVfcHJldHJhaW5lZChzYXZlX2RpcmVjdG9yeSUzRCUyMi4lMkZ5b3VyX21vZGVsX3NhdmVfcGF0aCUyMik=",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>my_config.save_pretrained(save_directory=<span class="hljs-string">&quot;./your_model_save_path&quot;</span>)',wrap:!1}}),O=new w({props:{code:"bXlfY29uZmlnJTIwJTNEJTIwRGlzdGlsQmVydENvbmZpZy5mcm9tX3ByZXRyYWluZWQoJTIyLiUyRnlvdXJfbW9kZWxfc2F2ZV9wYXRoJTJGbXlfY29uZmlnLmpzb24lMjIp",highlighted:'<span class="hljs-meta">&gt;&gt;&gt; </span>my_config = DistilBertConfig.from_pretrained(<span class="hljs-string">&quot;./your_model_save_path/my_config.json&quot;</span>)',wrap:!1}}),G=new Js({props:{$$slots:{default:[gt]},$$scope:{ctx:Z}}}),ee=new xe({props:{title:"Modelo",local:"modelo",headingTag:"h2"}}),X=new rt({props:{pytorch:!0,tensorflow:!0,jax:!1,$$slots:{tensorflow:[yt],pytorch:[bt]},$$scope:{ctx:Z}}}),te=new xe({props:{title:"Heads do modelo",local:"heads-do-modelo",headingTag:"h3"}}),H=new rt({props:{pytorch:!0,tensorflow:!0,jax:!1,$$slots:{tensorflow:[_t],pytorch:[vt]},$$scope:{ctx:Z}}}),oe=new xe({props:{title:"Tokenizer",local:"tokenizer",headingTag:"h2"}}),F=new Js({props:{warning:!0,$$slots:{default:[qt]},$$scope:{ctx:Z}}}),pe=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXIlMEElMEFteV90b2tlbml6ZXIlMjAlM0QlMjBEaXN0aWxCZXJ0VG9rZW5pemVyKHZvY2FiX2ZpbGUlM0QlMjJteV92b2NhYl9maWxlLnR4dCUyMiUyQyUyMGRvX2xvd2VyX2Nhc2UlM0RGYWxzZSUyQyUyMHBhZGRpbmdfc2lkZSUzRCUyMmxlZnQlMjIp",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizer

<span class="hljs-meta">&gt;&gt;&gt; </span>my_tokenizer = DistilBertTokenizer(vocab_file=<span class="hljs-string">&quot;my_vocab_file.txt&quot;</span>, do_lower_case=<span class="hljs-literal">False</span>, padding_side=<span class="hljs-string">&quot;left&quot;</span>)`,wrap:!1}}),ue=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXIlMEElMEFzbG93X3Rva2VuaXplciUyMCUzRCUyMERpc3RpbEJlcnRUb2tlbml6ZXIuZnJvbV9wcmV0cmFpbmVkKCUyMmRpc3RpbGJlcnQlMkZkaXN0aWxiZXJ0LWJhc2UtdW5jYXNlZCUyMik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizer

<span class="hljs-meta">&gt;&gt;&gt; </span>slow_tokenizer = DistilBertTokenizer.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),de=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMERpc3RpbEJlcnRUb2tlbml6ZXJGYXN0JTBBJTBBZmFzdF90b2tlbml6ZXIlMjAlM0QlMjBEaXN0aWxCZXJ0VG9rZW5pemVyRmFzdC5mcm9tX3ByZXRyYWluZWQoJTIyZGlzdGlsYmVydCUyRmRpc3RpbGJlcnQtYmFzZS11bmNhc2VkJTIyKQ==",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> DistilBertTokenizerFast

<span class="hljs-meta">&gt;&gt;&gt; </span>fast_tokenizer = DistilBertTokenizerFast.from_pretrained(<span class="hljs-string">&quot;distilbert/distilbert-base-uncased&quot;</span>)`,wrap:!1}}),E=new Js({props:{$$slots:{default:[Tt]},$$scope:{ctx:Z}}}),fe=new xe({props:{title:"Extrator de features",local:"extrator-de-features",headingTag:"h2"}}),be=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFZpVEZlYXR1cmVFeHRyYWN0b3IlMEElMEF2aXRfZXh0cmFjdG9yJTIwJTNEJTIwVmlURmVhdHVyZUV4dHJhY3RvcigpJTBBcHJpbnQodml0X2V4dHJhY3Rvcik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> ViTFeatureExtractor

<span class="hljs-meta">&gt;&gt;&gt; </span>vit_extractor = ViTFeatureExtractor()
<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-built_in">print</span>(vit_extractor)
ViTFeatureExtractor {
  <span class="hljs-string">&quot;do_normalize&quot;</span>: true,
  <span class="hljs-string">&quot;do_resize&quot;</span>: true,
  <span class="hljs-string">&quot;feature_extractor_type&quot;</span>: <span class="hljs-string">&quot;ViTFeatureExtractor&quot;</span>,
  <span class="hljs-string">&quot;image_mean&quot;</span>: [
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>
  ],
  <span class="hljs-string">&quot;image_std&quot;</span>: [
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>
  ],
  <span class="hljs-string">&quot;resample&quot;</span>: <span class="hljs-number">2</span>,
  <span class="hljs-string">&quot;size&quot;</span>: <span class="hljs-number">224</span>
}`,wrap:!1}}),B=new Js({props:{$$slots:{default:[Zt]},$$scope:{ctx:Z}}}),ye=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFZpVEZlYXR1cmVFeHRyYWN0b3IlMEElMEFteV92aXRfZXh0cmFjdG9yJTIwJTNEJTIwVmlURmVhdHVyZUV4dHJhY3RvcihyZXNhbXBsZSUzRCUyMlBJTC5JbWFnZS5CT1glMjIlMkMlMjBkb19ub3JtYWxpemUlM0RGYWxzZSUyQyUyMGltYWdlX21lYW4lM0QlNUIwLjMlMkMlMjAwLjMlMkMlMjAwLjMlNUQpJTBBcHJpbnQobXlfdml0X2V4dHJhY3Rvcik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> ViTFeatureExtractor

<span class="hljs-meta">&gt;&gt;&gt; </span>my_vit_extractor = ViTFeatureExtractor(resample=<span class="hljs-string">&quot;PIL.Image.BOX&quot;</span>, do_normalize=<span class="hljs-literal">False</span>, image_mean=[<span class="hljs-number">0.3</span>, <span class="hljs-number">0.3</span>, <span class="hljs-number">0.3</span>])
<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-built_in">print</span>(my_vit_extractor)
ViTFeatureExtractor {
  <span class="hljs-string">&quot;do_normalize&quot;</span>: false,
  <span class="hljs-string">&quot;do_resize&quot;</span>: true,
  <span class="hljs-string">&quot;feature_extractor_type&quot;</span>: <span class="hljs-string">&quot;ViTFeatureExtractor&quot;</span>,
  <span class="hljs-string">&quot;image_mean&quot;</span>: [
    <span class="hljs-number">0.3</span>,
    <span class="hljs-number">0.3</span>,
    <span class="hljs-number">0.3</span>
  ],
  <span class="hljs-string">&quot;image_std&quot;</span>: [
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>,
    <span class="hljs-number">0.5</span>
  ],
  <span class="hljs-string">&quot;resample&quot;</span>: <span class="hljs-string">&quot;PIL.Image.BOX&quot;</span>,
  <span class="hljs-string">&quot;size&quot;</span>: <span class="hljs-number">224</span>
}`,wrap:!1}}),ve=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyRmVhdHVyZUV4dHJhY3RvciUwQSUwQXcydjJfZXh0cmFjdG9yJTIwJTNEJTIwV2F2MlZlYzJGZWF0dXJlRXh0cmFjdG9yKCklMEFwcmludCh3MnYyX2V4dHJhY3Rvcik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2FeatureExtractor

<span class="hljs-meta">&gt;&gt;&gt; </span>w2v2_extractor = Wav2Vec2FeatureExtractor()
<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-built_in">print</span>(w2v2_extractor)
Wav2Vec2FeatureExtractor {
  <span class="hljs-string">&quot;do_normalize&quot;</span>: true,
  <span class="hljs-string">&quot;feature_extractor_type&quot;</span>: <span class="hljs-string">&quot;Wav2Vec2FeatureExtractor&quot;</span>,
  <span class="hljs-string">&quot;feature_size&quot;</span>: <span class="hljs-number">1</span>,
  <span class="hljs-string">&quot;padding_side&quot;</span>: <span class="hljs-string">&quot;right&quot;</span>,
  <span class="hljs-string">&quot;padding_value&quot;</span>: <span class="hljs-number">0.0</span>,
  <span class="hljs-string">&quot;return_attention_mask&quot;</span>: false,
  <span class="hljs-string">&quot;sampling_rate&quot;</span>: <span class="hljs-number">16000</span>
}`,wrap:!1}}),Me=new xe({props:{title:"Processor",local:"processor",headingTag:"h2"}}),Te=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyRmVhdHVyZUV4dHJhY3RvciUwQSUwQWZlYXR1cmVfZXh0cmFjdG9yJTIwJTNEJTIwV2F2MlZlYzJGZWF0dXJlRXh0cmFjdG9yKHBhZGRpbmdfdmFsdWUlM0QxLjAlMkMlMjBkb19ub3JtYWxpemUlM0RUcnVlKQ==",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2FeatureExtractor

<span class="hljs-meta">&gt;&gt;&gt; </span>feature_extractor = Wav2Vec2FeatureExtractor(padding_value=<span class="hljs-number">1.0</span>, do_normalize=<span class="hljs-literal">True</span>)`,wrap:!1}}),we=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyQ1RDVG9rZW5pemVyJTBBJTBBdG9rZW5pemVyJTIwJTNEJTIwV2F2MlZlYzJDVENUb2tlbml6ZXIodm9jYWJfZmlsZSUzRCUyMm15X3ZvY2FiX2ZpbGUudHh0JTIyKQ==",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2CTCTokenizer

<span class="hljs-meta">&gt;&gt;&gt; </span>tokenizer = Wav2Vec2CTCTokenizer(vocab_file=<span class="hljs-string">&quot;my_vocab_file.txt&quot;</span>)`,wrap:!1}}),Je=new w({props:{code:"ZnJvbSUyMHRyYW5zZm9ybWVycyUyMGltcG9ydCUyMFdhdjJWZWMyUHJvY2Vzc29yJTBBJTBBcHJvY2Vzc29yJTIwJTNEJTIwV2F2MlZlYzJQcm9jZXNzb3IoZmVhdHVyZV9leHRyYWN0b3IlM0RmZWF0dXJlX2V4dHJhY3RvciUyQyUyMHRva2VuaXplciUzRHRva2VuaXplcik=",highlighted:`<span class="hljs-meta">&gt;&gt;&gt; </span><span class="hljs-keyword">from</span> transformers <span class="hljs-keyword">import</span> Wav2Vec2Processor

<span class="hljs-meta">&gt;&gt;&gt; </span>processor = Wav2Vec2Processor(feature_extractor=feature_extractor, tokenizer=tokenizer)`,wrap:!1}}),Ce=new ft({props:{source:"https://github.com/huggingface/transformers/blob/main/docs/source/pt/create_a_model.md"}}),{c(){o=c("meta"),u=r(),n=c("p"),p=r(),f(v.$$.fragment),M=r(),x=c("p"),x.innerHTML=J,_=r(),k=c("ul"),k.innerHTML=m,q=r(),f(z.$$.fragment),R=r(),W=c("p"),W.innerHTML=U,C=r(),V=c("p"),V.innerHTML=l,T=r(),f(L.$$.fragment),Ve=r(),N=c("p"),N.innerHTML=Cs,We=r(),Q=c("ul"),Q.innerHTML=xs,Ue=r(),f(I.$$.fragment),Ge=r(),P=c("p"),P.innerHTML=zs,Xe=r(),f(D.$$.fragment),He=r(),S=c("p"),S.innerHTML=Vs,Fe=r(),f(A.$$.fragment),Ee=r(),K=c("p"),K.innerHTML=Ws,Be=r(),f(O.$$.fragment),Ye=r(),f(G.$$.fragment),Le=r(),f(ee.$$.fragment),Ne=r(),se=c("p"),se.innerHTML=Us,Qe=r(),f(X.$$.fragment),Ie=r(),f(te.$$.fragment),Pe=r(),ae=c("p"),ae.innerHTML=Gs,De=r(),f(H.$$.fragment),Se=r(),f(oe.$$.fragment),Ae=r(),ne=c("p"),ne.innerHTML=Xs,Ke=r(),le=c("ul"),le.innerHTML=Hs,Oe=r(),re=c("p"),re.textContent=Fs,es=r(),f(F.$$.fragment),ss=r(),ie=c("p"),ie.innerHTML=Es,ts=r(),f(pe.$$.fragment),as=r(),me=c("p"),me.innerHTML=Bs,os=r(),f(ue.$$.fragment),ns=r(),ce=c("p"),ce.innerHTML=Ys,ls=r(),f(de.$$.fragment),rs=r(),f(E.$$.fragment),is=r(),f(fe.$$.fragment),ps=r(),ge=c("p"),ge.innerHTML=Ls,ms=r(),$e=c("p"),$e.innerHTML=Ns,us=r(),f(be.$$.fragment),cs=r(),f(B.$$.fragment),ds=r(),he=c("p"),he.innerHTML=Qs,fs=r(),f(ye.$$.fragment),gs=r(),je=c("p"),je.innerHTML=Is,$s=r(),f(ve.$$.fragment),bs=r(),f(Me.$$.fragment),hs=r(),_e=c("p"),_e.innerHTML=Ps,ys=r(),qe=c("p"),qe.textContent=Ds,js=r(),f(Te.$$.fragment),vs=r(),Ze=c("p"),Ze.textContent=Ss,Ms=r(),f(we.$$.fragment),_s=r(),ke=c("p"),ke.innerHTML=As,qs=r(),f(Je.$$.fragment),Ts=r(),Re=c("p"),Re.textContent=Ks,Zs=r(),f(Ce.$$.fragment),ws=r(),ze=c("p"),this.h()},l(e){const s=ct("svelte-u9bgzb",document.head);o=d(s,"META",{name:!0,content:!0}),s.forEach(t),u=i(e),n=d(e,"P",{}),nt(n).forEach(t),p=i(e),g(v.$$.fragment,e),M=i(e),x=d(e,"P",{"data-svelte-h":!0}),j(x)!=="svelte-m9o5vy"&&(x.innerHTML=J),_=i(e),k=d(e,"UL",{"data-svelte-h":!0}),j(k)!=="svelte-kgsom1"&&(k.innerHTML=m),q=i(e),g(z.$$.fragment,e),R=i(e),W=d(e,"P",{"data-svelte-h":!0}),j(W)!=="svelte-n6qi8b"&&(W.innerHTML=U),C=i(e),V=d(e,"P",{"data-svelte-h":!0}),j(V)!=="svelte-1d3fcvh"&&(V.innerHTML=l),T=i(e),g(L.$$.fragment,e),Ve=i(e),N=d(e,"P",{"data-svelte-h":!0}),j(N)!=="svelte-ig73dh"&&(N.innerHTML=Cs),We=i(e),Q=d(e,"UL",{"data-svelte-h":!0}),j(Q)!=="svelte-18hur0b"&&(Q.innerHTML=xs),Ue=i(e),g(I.$$.fragment,e),Ge=i(e),P=d(e,"P",{"data-svelte-h":!0}),j(P)!=="svelte-1hyxcvd"&&(P.innerHTML=zs),Xe=i(e),g(D.$$.fragment,e),He=i(e),S=d(e,"P",{"data-svelte-h":!0}),j(S)!=="svelte-xw156x"&&(S.innerHTML=Vs),Fe=i(e),g(A.$$.fragment,e),Ee=i(e),K=d(e,"P",{"data-svelte-h":!0}),j(K)!=="svelte-gyvtpp"&&(K.innerHTML=Ws),Be=i(e),g(O.$$.fragment,e),Ye=i(e),g(G.$$.fragment,e),Le=i(e),g(ee.$$.fragment,e),Ne=i(e),se=d(e,"P",{"data-svelte-h":!0}),j(se)!=="svelte-dzcltn"&&(se.innerHTML=Us),Qe=i(e),g(X.$$.fragment,e),Ie=i(e),g(te.$$.fragment,e),Pe=i(e),ae=d(e,"P",{"data-svelte-h":!0}),j(ae)!=="svelte-1lm563h"&&(ae.innerHTML=Gs),De=i(e),g(H.$$.fragment,e),Se=i(e),g(oe.$$.fragment,e),Ae=i(e),ne=d(e,"P",{"data-svelte-h":!0}),j(ne)!=="svelte-1umelbs"&&(ne.innerHTML=Xs),Ke=i(e),le=d(e,"UL",{"data-svelte-h":!0}),j(le)!=="svelte-1ety8m7"&&(le.innerHTML=Hs),Oe=i(e),re=d(e,"P",{"data-svelte-h":!0}),j(re)!=="svelte-aut08s"&&(re.textContent=Fs),es=i(e),g(F.$$.fragment,e),ss=i(e),ie=d(e,"P",{"data-svelte-h":!0}),j(ie)!=="svelte-1h3oxa5"&&(ie.innerHTML=Es),ts=i(e),g(pe.$$.fragment,e),as=i(e),me=d(e,"P",{"data-svelte-h":!0}),j(me)!=="svelte-2eztm5"&&(me.innerHTML=Bs),os=i(e),g(ue.$$.fragment,e),ns=i(e),ce=d(e,"P",{"data-svelte-h":!0}),j(ce)!=="svelte-1v580rz"&&(ce.innerHTML=Ys),ls=i(e),g(de.$$.fragment,e),rs=i(e),g(E.$$.fragment,e),is=i(e),g(fe.$$.fragment,e),ps=i(e),ge=d(e,"P",{"data-svelte-h":!0}),j(ge)!=="svelte-1t9u1z8"&&(ge.innerHTML=Ls),ms=i(e),$e=d(e,"P",{"data-svelte-h":!0}),j($e)!=="svelte-hk2gfs"&&($e.innerHTML=Ns),us=i(e),g(be.$$.fragment,e),cs=i(e),g(B.$$.fragment,e),ds=i(e),he=d(e,"P",{"data-svelte-h":!0}),j(he)!=="svelte-1g3d390"&&(he.innerHTML=Qs),fs=i(e),g(ye.$$.fragment,e),gs=i(e),je=d(e,"P",{"data-svelte-h":!0}),j(je)!=="svelte-93n9v0"&&(je.innerHTML=Is),$s=i(e),g(ve.$$.fragment,e),bs=i(e),g(Me.$$.fragment,e),hs=i(e),_e=d(e,"P",{"data-svelte-h":!0}),j(_e)!=="svelte-1o1ieuf"&&(_e.innerHTML=Ps),ys=i(e),qe=d(e,"P",{"data-svelte-h":!0}),j(qe)!=="svelte-q3t4d0"&&(qe.textContent=Ds),js=i(e),g(Te.$$.fragment,e),vs=i(e),Ze=d(e,"P",{"data-svelte-h":!0}),j(Ze)!=="svelte-xtgcfb"&&(Ze.textContent=Ss),Ms=i(e),g(we.$$.fragment,e),_s=i(e),ke=d(e,"P",{"data-svelte-h":!0}),j(ke)!=="svelte-nbytpq"&&(ke.innerHTML=As),qs=i(e),g(Je.$$.fragment,e),Ts=i(e),Re=d(e,"P",{"data-svelte-h":!0}),j(Re)!=="svelte-bza99h"&&(Re.textContent=Ks),Zs=i(e),g(Ce.$$.fragment,e),ws=i(e),ze=d(e,"P",{}),nt(ze).forEach(t),this.h()},h(){lt(o,"name","hf:doc:metadata"),lt(o,"content",kt)},m(e,s){dt(document.head,o),a(e,u,s),a(e,n,s),a(e,p,s),$(v,e,s),a(e,M,s),a(e,x,s),a(e,_,s),a(e,k,s),a(e,q,s),$(z,e,s),a(e,R,s),a(e,W,s),a(e,C,s),a(e,V,s),a(e,T,s),$(L,e,s),a(e,Ve,s),a(e,N,s),a(e,We,s),a(e,Q,s),a(e,Ue,s),$(I,e,s),a(e,Ge,s),a(e,P,s),a(e,Xe,s),$(D,e,s),a(e,He,s),a(e,S,s),a(e,Fe,s),$(A,e,s),a(e,Ee,s),a(e,K,s),a(e,Be,s),$(O,e,s),a(e,Ye,s),$(G,e,s),a(e,Le,s),$(ee,e,s),a(e,Ne,s),a(e,se,s),a(e,Qe,s),$(X,e,s),a(e,Ie,s),$(te,e,s),a(e,Pe,s),a(e,ae,s),a(e,De,s),$(H,e,s),a(e,Se,s),$(oe,e,s),a(e,Ae,s),a(e,ne,s),a(e,Ke,s),a(e,le,s),a(e,Oe,s),a(e,re,s),a(e,es,s),$(F,e,s),a(e,ss,s),a(e,ie,s),a(e,ts,s),$(pe,e,s),a(e,as,s),a(e,me,s),a(e,os,s),$(ue,e,s),a(e,ns,s),a(e,ce,s),a(e,ls,s),$(de,e,s),a(e,rs,s),$(E,e,s),a(e,is,s),$(fe,e,s),a(e,ps,s),a(e,ge,s),a(e,ms,s),a(e,$e,s),a(e,us,s),$(be,e,s),a(e,cs,s),$(B,e,s),a(e,ds,s),a(e,he,s),a(e,fs,s),$(ye,e,s),a(e,gs,s),a(e,je,s),a(e,$s,s),$(ve,e,s),a(e,bs,s),$(Me,e,s),a(e,hs,s),a(e,_e,s),a(e,ys,s),a(e,qe,s),a(e,js,s),$(Te,e,s),a(e,vs,s),a(e,Ze,s),a(e,Ms,s),$(we,e,s),a(e,_s,s),a(e,ke,s),a(e,qs,s),$(Je,e,s),a(e,Ts,s),a(e,Re,s),a(e,Zs,s),$(Ce,e,s),a(e,ws,s),a(e,ze,s),ks=!0},p(e,[s]){const Os={};s&2&&(Os.$$scope={dirty:s,ctx:e}),G.$set(Os);const et={};s&2&&(et.$$scope={dirty:s,ctx:e}),X.$set(et);const st={};s&2&&(st.$$scope={dirty:s,ctx:e}),H.$set(st);const tt={};s&2&&(tt.$$scope={dirty:s,ctx:e}),F.$set(tt);const at={};s&2&&(at.$$scope={dirty:s,ctx:e}),E.$set(at);const ot={};s&2&&(ot.$$scope={dirty:s,ctx:e}),B.$set(ot)},i(e){ks||(b(v.$$.fragment,e),b(z.$$.fragment,e),b(L.$$.fragment,e),b(I.$$.fragment,e),b(D.$$.fragment,e),b(A.$$.fragment,e),b(O.$$.fragment,e),b(G.$$.fragment,e),b(ee.$$.fragment,e),b(X.$$.fragment,e),b(te.$$.fragment,e),b(H.$$.fragment,e),b(oe.$$.fragment,e),b(F.$$.fragment,e),b(pe.$$.fragment,e),b(ue.$$.fragment,e),b(de.$$.fragment,e),b(E.$$.fragment,e),b(fe.$$.fragment,e),b(be.$$.fragment,e),b(B.$$.fragment,e),b(ye.$$.fragment,e),b(ve.$$.fragment,e),b(Me.$$.fragment,e),b(Te.$$.fragment,e),b(we.$$.fragment,e),b(Je.$$.fragment,e),b(Ce.$$.fragment,e),ks=!0)},o(e){h(v.$$.fragment,e),h(z.$$.fragment,e),h(L.$$.fragment,e),h(I.$$.fragment,e),h(D.$$.fragment,e),h(A.$$.fragment,e),h(O.$$.fragment,e),h(G.$$.fragment,e),h(ee.$$.fragment,e),h(X.$$.fragment,e),h(te.$$.fragment,e),h(H.$$.fragment,e),h(oe.$$.fragment,e),h(F.$$.fragment,e),h(pe.$$.fragment,e),h(ue.$$.fragment,e),h(de.$$.fragment,e),h(E.$$.fragment,e),h(fe.$$.fragment,e),h(be.$$.fragment,e),h(B.$$.fragment,e),h(ye.$$.fragment,e),h(ve.$$.fragment,e),h(Me.$$.fragment,e),h(Te.$$.fragment,e),h(we.$$.fragment,e),h(Je.$$.fragment,e),h(Ce.$$.fragment,e),ks=!1},d(e){e&&(t(u),t(n),t(p),t(M),t(x),t(_),t(k),t(q),t(R),t(W),t(C),t(V),t(T),t(Ve),t(N),t(We),t(Q),t(Ue),t(Ge),t(P),t(Xe),t(He),t(S),t(Fe),t(Ee),t(K),t(Be),t(Ye),t(Le),t(Ne),t(se),t(Qe),t(Ie),t(Pe),t(ae),t(De),t(Se),t(Ae),t(ne),t(Ke),t(le),t(Oe),t(re),t(es),t(ss),t(ie),t(ts),t(as),t(me),t(os),t(ns),t(ce),t(ls),t(rs),t(is),t(ps),t(ge),t(ms),t($e),t(us),t(cs),t(ds),t(he),t(fs),t(gs),t(je),t($s),t(bs),t(hs),t(_e),t(ys),t(qe),t(js),t(vs),t(Ze),t(Ms),t(_s),t(ke),t(qs),t(Ts),t(Re),t(Zs),t(ws),t(ze)),t(o),y(v,e),y(z,e),y(L,e),y(I,e),y(D,e),y(A,e),y(O,e),y(G,e),y(ee,e),y(X,e),y(te,e),y(H,e),y(oe,e),y(F,e),y(pe,e),y(ue,e),y(de,e),y(E,e),y(fe,e),y(be,e),y(B,e),y(ye,e),y(ve,e),y(Me,e),y(Te,e),y(we,e),y(Je,e),y(Ce,e)}}}const kt='{"title":"Criar uma arquitetura customizada","local":"criar-uma-arquitetura-customizada","sections":[{"title":"configuration","local":"configuration","sections":[],"depth":2},{"title":"Modelo","local":"modelo","sections":[{"title":"Heads do modelo","local":"heads-do-modelo","sections":[],"depth":3}],"depth":2},{"title":"Tokenizer","local":"tokenizer","sections":[],"depth":2},{"title":"Extrator de features","local":"extrator-de-features","sections":[],"depth":2},{"title":"Processor","local":"processor","sections":[],"depth":2}],"depth":1}';function Jt(Z){return pt(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class Ut extends mt{constructor(o){super(),ut(this,o,Jt,wt,it,{})}}export{Ut as component};
