import{S as Ht,i as It,s as Nt,e as s,k as m,w as yt,t as l,M as xt,c as r,d as a,m as u,a as o,x as Pt,h as n,b as y,G as e,g as _,y as wt,L as At,q as Lt,o as St,B as bt,v as Ct}from"../../chunks/vendor-hf-doc-builder.js";import{I as Ft}from"../../chunks/IconCopyLink-hf-doc-builder.js";import{C as kt}from"../../chunks/CourseFloatingBanner-hf-doc-builder.js";import"../../chunks/DocNotebookDropdown-hf-doc-builder.js";function Tt(ft){let p,F,h,v,S,$,G,b,J,k,D,T,P,R,O,i,H,j,K,d,Q,I,V,W,N,X,Y,Z,g,tt,x,et,at,st,A,rt,lt,C,ot,q,E,nt,w,it,ct,M;return $=new Ft({}),D=new kt({props:{chapter:5,classNames:"absolute z-10 right-0 top-0"}}),{c(){p=s("meta"),F=m(),h=s("h1"),v=s("a"),S=s("span"),yt($.$$.fragment),G=m(),b=s("span"),J=l("\u{1F917} Datasets, \u0438\u0442\u043E\u0433\u0438!"),k=m(),yt(D.$$.fragment),T=m(),P=s("p"),R=l("\u0427\u0442\u043E \u0436, \u044D\u0442\u043E \u0431\u044B\u043B\u043E \u043D\u0430\u0441\u0442\u043E\u044F\u0449\u0435\u0435 \u043F\u0443\u0442\u0435\u0448\u0435\u0441\u0442\u0432\u0438\u0435 \u043F\u043E \u0431\u0438\u0431\u043B\u0438\u043E\u0442\u0435\u043A\u0435 \u{1F917} Datasets \u2014 \u043F\u043E\u0437\u0434\u0440\u0430\u0432\u043B\u044F\u0435\u043C, \u0432\u044B \u0437\u0430\u0448\u043B\u0438 \u0442\u0430\u043A \u0434\u0430\u043B\u0435\u043A\u043E! \u0421\u043E \u0437\u043D\u0430\u043D\u0438\u044F\u043C\u0438, \u043A\u043E\u0442\u043E\u0440\u044B\u0435 \u0432\u044B \u043F\u043E\u043B\u0443\u0447\u0438\u043B\u0438 \u0438\u0437 \u044D\u0442\u043E\u0439 \u0433\u043B\u0430\u0432\u044B, \u0432\u044B \u0441\u043C\u043E\u0436\u0435\u0442\u0435:"),O=m(),i=s("ul"),H=s("li"),j=l("\u0417\u0430\u0433\u0440\u0443\u0436\u0430\u0442\u044C \u043D\u0430\u0431\u043E\u0440\u044B \u0434\u0430\u043D\u043D\u044B\u0445 \u0438\u0437 \u043B\u044E\u0431\u043E\u0433\u043E \u043C\u0435\u0441\u0442\u0430, \u0431\u0443\u0434\u044C \u0442\u043E Hugging Face Hub, \u0432\u0430\u0448 \u043D\u043E\u0443\u0442\u0431\u0443\u043A \u0438\u043B\u0438 \u0443\u0434\u0430\u043B\u0435\u043D\u043D\u044B\u0439 \u0441\u0435\u0440\u0432\u0435\u0440 \u0432 \u0432\u0430\u0448\u0435\u0439 \u043A\u043E\u043C\u043F\u0430\u043D\u0438\u0438."),K=m(),d=s("li"),Q=l("\u041E\u0431\u0440\u0430\u0431\u0430\u0442\u044B\u0432\u0430\u0442\u044C \u0441\u0432\u043E\u0438 \u0434\u0430\u043D\u043D\u044B\u0435, \u0438\u0441\u043F\u043E\u043B\u044C\u0437\u0443\u044F \u0441\u043E\u0447\u0435\u0442\u0430\u043D\u0438\u0435 \u0444\u0443\u043D\u043A\u0446\u0438\u0439 "),I=s("code"),V=l("Dataset.map()"),W=l(" \u0438 "),N=s("code"),X=l("Dataset.filter()"),Y=l("."),Z=m(),g=s("li"),tt=l("\u0411\u044B\u0441\u0442\u0440\u043E \u043F\u0435\u0440\u0435\u043A\u043B\u044E\u0447\u0430\u0442\u044C\u0441\u044F \u043C\u0435\u0436\u0434\u0443 \u0444\u043E\u0440\u043C\u0430\u0442\u0430\u043C\u0438 \u0434\u0430\u043D\u043D\u044B\u0445, \u0442\u0430\u043A\u0438\u043C\u0438 \u043A\u0430\u043A Pandas \u0438 NumPy, \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E "),x=s("code"),et=l("Dataset.set_format()"),at=l("."),st=m(),A=s("li"),rt=l("\u0421\u043E\u0437\u0434\u0430\u0432\u0430\u0442\u044C \u0441\u0432\u043E\u0439 \u0441\u043E\u0431\u0441\u0442\u0432\u0435\u043D\u043D\u044B\u0439 \u043D\u0430\u0431\u043E\u0440 \u0434\u0430\u043D\u043D\u044B\u0445 \u0438 \u043E\u0442\u043F\u0440\u0430\u0432\u043B\u044F\u0442\u044C \u0435\u0433\u043E \u0432 Hugging Face Hub."),lt=m(),C=s("li"),ot=l("\u0421\u0442\u0440\u043E\u0438\u0442\u044C \u0441\u0432\u043E\u0438 \u044D\u043C\u0431\u0435\u0434\u0434\u0438\u043D\u0433\u0438 \u0434\u043E\u043A\u0443\u043C\u0435\u043D\u0442\u043E\u0432 \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E \u043C\u043E\u0434\u0435\u043B\u0438 Transformer \u0438 \u0441\u043E\u0437\u0434\u0430\u0432\u0430\u0442\u044C \u0441\u0435\u043C\u0430\u043D\u0442\u0438\u0447\u0435\u0441\u043A\u0438\u0439 \u043F\u043E\u0438\u0441\u043A\u043E\u0432\u0438\u043A \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E FAISS."),q=m(),E=s("p"),nt=l("\u0412 "),w=s("a"),it=l("\u0413\u043B\u0430\u0432\u0435 7"),ct=l(" \u043C\u044B \u0431\u0443\u0434\u0435\u043C \u0438\u0441\u043F\u043E\u043B\u044C\u0437\u043E\u0432\u0430\u0442\u044C \u0432\u0441\u0435 \u044D\u0442\u043E \u0441 \u043F\u043E\u043B\u044C\u0437\u043E\u0439, \u043F\u043E\u0441\u043A\u043E\u043B\u044C\u043A\u0443 \u043C\u044B \u0443\u0433\u043B\u0443\u0431\u0438\u043C\u0441\u044F \u0432 \u043E\u0441\u043D\u043E\u0432\u043D\u044B\u0435 \u0437\u0430\u0434\u0430\u0447\u0438 NLP, \u0434\u043B\u044F \u043A\u043E\u0442\u043E\u0440\u044B\u0445 \u043E\u0442\u043B\u0438\u0447\u043D\u043E \u043F\u043E\u0434\u0445\u043E\u0434\u044F\u0442 \u043C\u043E\u0434\u0435\u043B\u0438 Transformer. \u041E\u0434\u043D\u0430\u043A\u043E, \u043F\u0440\u0435\u0436\u0434\u0435 \u0447\u0435\u043C \u0438\u0434\u0442\u0438 \u0432\u043F\u0435\u0440\u0435\u0434, \u043F\u0440\u043E\u0432\u0435\u0440\u044C\u0442\u0435 \u0441\u0432\u043E\u0438 \u0437\u043D\u0430\u043D\u0438\u044F \u043E \u{1F917} Datasets \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E \u0431\u044B\u0441\u0442\u0440\u043E\u0433\u043E \u0442\u0435\u0441\u0442\u0430!"),this.h()},l(t){const c=xt('[data-svelte="svelte-1phssyn"]',document.head);p=r(c,"META",{name:!0,content:!0}),c.forEach(a),F=u(t),h=r(t,"H1",{class:!0});var B=o(h);v=r(B,"A",{id:!0,class:!0,href:!0});var mt=o(v);S=r(mt,"SPAN",{});var ut=o(S);Pt($.$$.fragment,ut),ut.forEach(a),mt.forEach(a),G=u(B),b=r(B,"SPAN",{});var pt=o(b);J=n(pt,"\u{1F917} Datasets, \u0438\u0442\u043E\u0433\u0438!"),pt.forEach(a),B.forEach(a),k=u(t),Pt(D.$$.fragment,t),T=u(t),P=r(t,"P",{});var ht=o(P);R=n(ht,"\u0427\u0442\u043E \u0436, \u044D\u0442\u043E \u0431\u044B\u043B\u043E \u043D\u0430\u0441\u0442\u043E\u044F\u0449\u0435\u0435 \u043F\u0443\u0442\u0435\u0448\u0435\u0441\u0442\u0432\u0438\u0435 \u043F\u043E \u0431\u0438\u0431\u043B\u0438\u043E\u0442\u0435\u043A\u0435 \u{1F917} Datasets \u2014 \u043F\u043E\u0437\u0434\u0440\u0430\u0432\u043B\u044F\u0435\u043C, \u0432\u044B \u0437\u0430\u0448\u043B\u0438 \u0442\u0430\u043A \u0434\u0430\u043B\u0435\u043A\u043E! \u0421\u043E \u0437\u043D\u0430\u043D\u0438\u044F\u043C\u0438, \u043A\u043E\u0442\u043E\u0440\u044B\u0435 \u0432\u044B \u043F\u043E\u043B\u0443\u0447\u0438\u043B\u0438 \u0438\u0437 \u044D\u0442\u043E\u0439 \u0433\u043B\u0430\u0432\u044B, \u0432\u044B \u0441\u043C\u043E\u0436\u0435\u0442\u0435:"),ht.forEach(a),O=u(t),i=r(t,"UL",{});var f=o(i);H=r(f,"LI",{});var dt=o(H);j=n(dt,"\u0417\u0430\u0433\u0440\u0443\u0436\u0430\u0442\u044C \u043D\u0430\u0431\u043E\u0440\u044B \u0434\u0430\u043D\u043D\u044B\u0445 \u0438\u0437 \u043B\u044E\u0431\u043E\u0433\u043E \u043C\u0435\u0441\u0442\u0430, \u0431\u0443\u0434\u044C \u0442\u043E Hugging Face Hub, \u0432\u0430\u0448 \u043D\u043E\u0443\u0442\u0431\u0443\u043A \u0438\u043B\u0438 \u0443\u0434\u0430\u043B\u0435\u043D\u043D\u044B\u0439 \u0441\u0435\u0440\u0432\u0435\u0440 \u0432 \u0432\u0430\u0448\u0435\u0439 \u043A\u043E\u043C\u043F\u0430\u043D\u0438\u0438."),dt.forEach(a),K=u(f),d=r(f,"LI",{});var L=o(d);Q=n(L,"\u041E\u0431\u0440\u0430\u0431\u0430\u0442\u044B\u0432\u0430\u0442\u044C \u0441\u0432\u043E\u0438 \u0434\u0430\u043D\u043D\u044B\u0435, \u0438\u0441\u043F\u043E\u043B\u044C\u0437\u0443\u044F \u0441\u043E\u0447\u0435\u0442\u0430\u043D\u0438\u0435 \u0444\u0443\u043D\u043A\u0446\u0438\u0439 "),I=r(L,"CODE",{});var _t=o(I);V=n(_t,"Dataset.map()"),_t.forEach(a),W=n(L," \u0438 "),N=r(L,"CODE",{});var vt=o(N);X=n(vt,"Dataset.filter()"),vt.forEach(a),Y=n(L,"."),L.forEach(a),Z=u(f),g=r(f,"LI",{});var U=o(g);tt=n(U,"\u0411\u044B\u0441\u0442\u0440\u043E \u043F\u0435\u0440\u0435\u043A\u043B\u044E\u0447\u0430\u0442\u044C\u0441\u044F \u043C\u0435\u0436\u0434\u0443 \u0444\u043E\u0440\u043C\u0430\u0442\u0430\u043C\u0438 \u0434\u0430\u043D\u043D\u044B\u0445, \u0442\u0430\u043A\u0438\u043C\u0438 \u043A\u0430\u043A Pandas \u0438 NumPy, \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E "),x=r(U,"CODE",{});var Et=o(x);et=n(Et,"Dataset.set_format()"),Et.forEach(a),at=n(U,"."),U.forEach(a),st=u(f),A=r(f,"LI",{});var $t=o(A);rt=n($t,"\u0421\u043E\u0437\u0434\u0430\u0432\u0430\u0442\u044C \u0441\u0432\u043E\u0439 \u0441\u043E\u0431\u0441\u0442\u0432\u0435\u043D\u043D\u044B\u0439 \u043D\u0430\u0431\u043E\u0440 \u0434\u0430\u043D\u043D\u044B\u0445 \u0438 \u043E\u0442\u043F\u0440\u0430\u0432\u043B\u044F\u0442\u044C \u0435\u0433\u043E \u0432 Hugging Face Hub."),$t.forEach(a),lt=u(f),C=r(f,"LI",{});var Dt=o(C);ot=n(Dt,"\u0421\u0442\u0440\u043E\u0438\u0442\u044C \u0441\u0432\u043E\u0438 \u044D\u043C\u0431\u0435\u0434\u0434\u0438\u043D\u0433\u0438 \u0434\u043E\u043A\u0443\u043C\u0435\u043D\u0442\u043E\u0432 \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E \u043C\u043E\u0434\u0435\u043B\u0438 Transformer \u0438 \u0441\u043E\u0437\u0434\u0430\u0432\u0430\u0442\u044C \u0441\u0435\u043C\u0430\u043D\u0442\u0438\u0447\u0435\u0441\u043A\u0438\u0439 \u043F\u043E\u0438\u0441\u043A\u043E\u0432\u0438\u043A \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E FAISS."),Dt.forEach(a),f.forEach(a),q=u(t),E=r(t,"P",{});var z=o(E);nt=n(z,"\u0412 "),w=r(z,"A",{href:!0});var gt=o(w);it=n(gt,"\u0413\u043B\u0430\u0432\u0435 7"),gt.forEach(a),ct=n(z," \u043C\u044B \u0431\u0443\u0434\u0435\u043C \u0438\u0441\u043F\u043E\u043B\u044C\u0437\u043E\u0432\u0430\u0442\u044C \u0432\u0441\u0435 \u044D\u0442\u043E \u0441 \u043F\u043E\u043B\u044C\u0437\u043E\u0439, \u043F\u043E\u0441\u043A\u043E\u043B\u044C\u043A\u0443 \u043C\u044B \u0443\u0433\u043B\u0443\u0431\u0438\u043C\u0441\u044F \u0432 \u043E\u0441\u043D\u043E\u0432\u043D\u044B\u0435 \u0437\u0430\u0434\u0430\u0447\u0438 NLP, \u0434\u043B\u044F \u043A\u043E\u0442\u043E\u0440\u044B\u0445 \u043E\u0442\u043B\u0438\u0447\u043D\u043E \u043F\u043E\u0434\u0445\u043E\u0434\u044F\u0442 \u043C\u043E\u0434\u0435\u043B\u0438 Transformer. \u041E\u0434\u043D\u0430\u043A\u043E, \u043F\u0440\u0435\u0436\u0434\u0435 \u0447\u0435\u043C \u0438\u0434\u0442\u0438 \u0432\u043F\u0435\u0440\u0435\u0434, \u043F\u0440\u043E\u0432\u0435\u0440\u044C\u0442\u0435 \u0441\u0432\u043E\u0438 \u0437\u043D\u0430\u043D\u0438\u044F \u043E \u{1F917} Datasets \u0441 \u043F\u043E\u043C\u043E\u0449\u044C\u044E \u0431\u044B\u0441\u0442\u0440\u043E\u0433\u043E \u0442\u0435\u0441\u0442\u0430!"),z.forEach(a),this.h()},h(){y(p,"name","hf:doc:metadata"),y(p,"content",JSON.stringify(Ot)),y(v,"id","datasets"),y(v,"class","header-link block pr-1.5 text-lg no-hover:hidden with-hover:absolute with-hover:p-1.5 with-hover:opacity-0 with-hover:group-hover:opacity-100 with-hover:right-full"),y(v,"href","#datasets"),y(h,"class","relative group"),y(w,"href","/course/ru/chapter7")},m(t,c){e(document.head,p),_(t,F,c),_(t,h,c),e(h,v),e(v,S),wt($,S,null),e(h,G),e(h,b),e(b,J),_(t,k,c),wt(D,t,c),_(t,T,c),_(t,P,c),e(P,R),_(t,O,c),_(t,i,c),e(i,H),e(H,j),e(i,K),e(i,d),e(d,Q),e(d,I),e(I,V),e(d,W),e(d,N),e(N,X),e(d,Y),e(i,Z),e(i,g),e(g,tt),e(g,x),e(x,et),e(g,at),e(i,st),e(i,A),e(A,rt),e(i,lt),e(i,C),e(C,ot),_(t,q,c),_(t,E,c),e(E,nt),e(E,w),e(w,it),e(E,ct),M=!0},p:At,i(t){M||(Lt($.$$.fragment,t),Lt(D.$$.fragment,t),M=!0)},o(t){St($.$$.fragment,t),St(D.$$.fragment,t),M=!1},d(t){a(p),t&&a(F),t&&a(h),bt($),t&&a(k),bt(D,t),t&&a(T),t&&a(P),t&&a(O),t&&a(i),t&&a(q),t&&a(E)}}}const Ot={local:"datasets",title:"\u{1F917} Datasets, \u0438\u0442\u043E\u0433\u0438!"};function qt(ft){return Ct(()=>{new URLSearchParams(window.location.search).get("fw")}),[]}class Gt extends Ht{constructor(p){super();It(this,p,qt,Tt,Nt,{})}}export{Gt as default,Ot as metadata};
