Hugging Face erabiliz NLP eta Transformer Models-en hastapena ikastaroa

Iraupena: 10 ordu
Lekua: Online
Edukiera: 100 pertsonak
Hizkuntza Gaztelania
FASE/S HORA/S FECHA HORARIO TIPO
1 5.00 24-06-2024 09:00 – 14:00 Online
2 5.00 26-06-2024 09:00 – 14:00 Online
Horas no presenciales: 10.00

Konpetentziak

  • NLP eta Transformadoreen ereduen oinarri teorikoak:
    • PNLaren oinarrizko kontzeptuak eta bere aplikazio praktikoak.
    • Transformadoreen ereduak ulertzea, haien arkitektura eta funtzionamendua barne, kodetzaile zein deskodetzaile ereduak.
    • Kodetzaile eta Deskodetzaile ereduen desberdintasunak eta aplikazioak alderatzea eta ulertzea.

     

  • Plataformak eta tresnak erabiltzeko trebetasun praktikoak:
    • Google Colab konfigurazioa eta erabilera NLP proiektuetarako, bere oinarrizko funtzionalitateak aprobetxatuz.
    • Hugging Face ekosistemaren kudeaketa, Model Hub plataforma, Dataset Hub eta Transformers liburutegia barne.
    • BERT, RoBERTa, GPT, T5 eta BART bezalako aldez aurretik prestatutako ereduak kargatzea eta erabiltzea Hugging Face-n NLP hainbat zereginetarako.
    • Transformadoreen ereduen aplikazio praktikoa:

     

    BERT testuen sailkapenerako eta RoBERTaren erabilera praktikoa entitateak ateratzeko.

    • Testuak sortzea eta zeregin zehatzak Deskodetzaile ereduak erabiliz, hala nola GPT.
    • Ereduak doitzea zeregin zehatzetarako, hala nola itzulpen automatikoa, testu-laburpena eta galderak sortzeko.
    • Errendimenduaren ebaluazioa eta ereduen optimizazioa NLP aplikazio errealetan eraginkortasuna hobetzeko.

     

  • Ezagutzaren ebaluazioa eta hobekuntza:
    • Aldizkako ebaluazioak aukera anitzeko proben bidez, saioetan zehar lortutako ezagutza teorikoak zein gaitasun praktikoak finkatzeko.

Edukiak

1. saioa: NLP eta kodetzaile ereduen sarrera

1.- Teoria (1,25 ordu gutxi gorabehera)

  • NLPrako sarrera: oinarrizko kontzeptuak eta aplikazioak.
  • Transformadoreen ereduen oinarriak.
  • Kodetzaile-ereduak: Arkitektura eta funtzionamendua.
  • Hugging Face eta bere ekosistemaren aurkezpena.

2.- Praktika (3,5 ordu gutxi gorabehera)

  • Google Colab erabiltzea NLP proiektuetarako.
  • Google Colab-en sarrera: konfigurazioa eta oinarrizko funtzionalitateak.
  • Colab-eko Hugging Face-ra konektatzen.
  • Hugging Face plataformaren aurkezpena: Model Hub, Dataset Hub eta Transformers liburutegia.
  • Aurrez prestatutako modeloak Hugging Face-n kargatzen: BERT eta RoBERTa.
  • Testuak sailkatzeko BERT erabiltzearen adibide praktikoa.
  • RoBERTa entitateak erauzteko erabiltzearen adibide praktikoa.

 

2. Saioa: Deskodetzaile-ereduak eta haien aplikazioa NLPn

1. Teoria (1,25 ordu inguru)

  • Deskodetzaile-ereduen kontzeptuak eta arkitektura.
  • Kodetzaile eta Deskodetzaile ereduen arteko konparaketa.
  • Deskodetzaile ereduen aplikazio espezifikoak NLPn.

2. Praktika (3,5 ordu inguru)

  • Hugging Face: GPT-n aurrez prestatutako modeloak erabiltzea.
  • Testuak sortzeko Decoder ereduekin adibide praktikoak
  • Besarkada aurpegia erabiliz zeregin zehatzetarako Deskodetzaile ereduak doitzea.

Metodologia

  • Online modalitatea.
  • Metodologia aktibo-kolaboratiboa.

Ebaluazioa

  • Formakuntza orduen %90arekin bete behar da.
  • Ikastaroan ezarritako konpetentzia garatzea.
  • Ikastaroan modu aktiboan parte hartzea.

Baldintzak

  • EAEko Lanbide Heziketako ikastetxeko irakaslea izatea.
  • Programazio ezagutza

Hautaketa irizpideak

Izen-emate kopuruak eskainitako plaza kopurua gainditzen badu, ondoko irizpideak jarraituz aukeraketa egingo da:

  • Ikaskuntza Koordinatzaile programan parte hartzen duten zentroei lehentasuna emango zaie.
  • Izen-emate ordena kontuan hartuko da.

Eman izena ikastaro honetan

FSE
Prestakuntza-ekintza hau Europako Gizarte Funtsak kofinantzatu dezake, Lanbide Heziketako eta Prestakuntzako irakasleak prestatzera bideratutako ekintzen esparruan.