154 lines
2.3 KiB
Plaintext
154 lines
2.3 KiB
Plaintext
Telegram bidezko galdera-erantzun sistema
|
|
\
|
|
Egilea: Iñigo Ortega
|
|
Tutorea: Jon Ander Campos
|
|
|
|
Sarrera
|
|
|
|
Filmen azpitituluak
|
|
↓
|
|
Sare errekurrenteak
|
|
↓
|
|
Telegram-eko elkarrizketa
|
|
|
|
Erlazionatutako lanak
|
|
|
|
seq2seq
|
|
\
|
|
Sutskever et al. (2014)
|
|
|
|
@Screenshot-2020-05-11.png
|
|
|
|
@Screenshot-2020-05-11-2.png
|
|
|
|
Sistema
|
|
|
|
seq2seq
|
|
|
|
Kodetzaile-dekodetzaile: GRU + Atentzioa
|
|
|
|
@Screenshot-2020-05-11-1.png
|
|
|
|
github.com/spro/practical-pytorch
|
|
|
|
Hobekuntzak
|
|
|
|
Erantzun motzen aurkako neurriak
|
|
|
|
Bai/Ez
|
|
|
|
Brevity Penalization (BP)
|
|
|
|
Brevity Penalization (BP) → Emaitza oso luzeak eta zentzugabeak
|
|
|
|
Galdera: Kaixo
|
|
Erantzuna: Hirugarren lehorrak rakubian ofizialik
|
|
urdinari ireki baretu azaleko errautsak adoptatzeko
|
|
|
|
Rayleigh distribuzioa
|
|
|
|
@800px-Rayleigh_distributionPDF.svg.png
|
|
|
|
@Figure_1.png
|
|
|
|
Tokenizatzailea
|
|
|
|
SpaCy
|
|
|
|
Telegram-eko elkarrizketa
|
|
|
|
github.com/python-telegram-bot/python-telegram-bot
|
|
|
|
Datuak
|
|
|
|
OpenSubtitles
|
|
|
|
Zarataz beteta → Garbiketa
|
|
|
|
Hasierako Garbiketa
|
|
|
|
1. Lerroen hasierako "-" karaktereak ezabatu.
|
|
|
|
-Zu ez zaude ezkonduta?
|
|
-Ez.
|
|
-Ama!
|
|
-Izozkia gustatzen zaizu?
|
|
-Bai, asko.
|
|
-Zatoz.
|
|
|
|
# sed -E 's|^- ?||' < eu.txt | paste - -
|
|
|
|
Bukaerako Garbiketa
|
|
|
|
1. Lerroen hasierako "-" karaktereak ezabatu.
|
|
\
|
|
2. " karaktereaz hasten diren lerroak batu
|
|
esaldi berberekoak direla adierazten delako.
|
|
\
|
|
3. Batu komaz bukatzen diren lerroak,
|
|
esaldi berberekoak direlako.
|
|
|
|
"Gaur pergaminoa aurkitu dut Karswellek emandako egitarauaren barruan".
|
|
"Sinbolo errunikoak zeuzkan marraztuta".
|
|
|
|
-Zu ez zaude ezkonduta?
|
|
-Ez.
|
|
-Ama!
|
|
-Izozkia gustatzen zaizu?
|
|
-Bai, asko.
|
|
-Zatoz.
|
|
|
|
Egon pixka batean, mamarroa oraintxe dator eta, bere aiztoa eta guzti,
|
|
zu txiki-txiki egiteko.
|
|
|
|
Konpondu ezin diren arazoak
|
|
|
|
galdera1 erantzuna1
|
|
galdera2 erantzuna2
|
|
galdera3 erantzuna3
|
|
galdera4 erantzuna4
|
|
|
|
-Zu ez zaude ezkonduta?
|
|
-Ez.
|
|
-Ama!
|
|
-Izozkia gustatzen zaizu?
|
|
-Bai, asko.
|
|
-Zatoz.
|
|
|
|
-Zu ez zaude ezkonduta?
|
|
-Ez.
|
|
|
|
-Ama!
|
|
-Izozkia gustatzen zaizu?
|
|
|
|
-Bai, asko.
|
|
-Zatoz.
|
|
|
|
Emaitzak
|
|
|
|
Onak
|
|
|
|
@bot/Screenshot-2020-05-11-4.png
|
|
|
|
@bot/Screenshot-2020-05-11-6.png
|
|
|
|
@bot/Screenshot-2020-05-11-7.png
|
|
|
|
@bot/Screenshot-2020-05-11-8.png
|
|
|
|
@bot/Screenshot-2020-05-11-9.png
|
|
|
|
Txarrak
|
|
|
|
@bot/Screenshot-2020-05-11-5.png
|
|
|
|
@bot/Screenshot-2020-05-11-10.png
|
|
|
|
@bot/Screenshot-2020-05-11-11.png
|
|
|
|
@bot/Screenshot-2020-05-11-12.png
|
|
|
|
Ondorioak
|
|
|
|
Galderarik?
|