3c760d21ff
|
||
|---|---|---|
| .. | ||
| README.md | ||
README.md
Tréning Skip-Gram modelu
Laboratórna úloha z AI for Beginners Curriculum.
Úloha
V tejto úlohe vás vyzývame, aby ste natrénovali Word2Vec model pomocou techniky Skip-Gram. Natrénujte sieť s embeddingom na predpovedanie susedných slov v N-tokenovom širokom Skip-Gram okne. Môžete použiť kód z tejto lekcie a mierne ho upraviť.
Dataset
Môžete použiť akúkoľvek knihu. Na stránke Project Gutenberg nájdete množstvo voľne dostupných textov, napríklad priamy odkaz na Alice's Adventures in Wonderland od Lewisa Carrolla. Alebo môžete použiť Shakespearove hry, ktoré môžete získať pomocou nasledujúceho kódu:
path_to_file = tf.keras.utils.get_file(
'shakespeare.txt',
'https://storage.googleapis.com/download.tensorflow.org/data/shakespeare.txt')
text = open(path_to_file, 'rb').read().decode(encoding='utf-8')
Preskúmajte!
Ak máte čas a chcete sa do témy ponoriť hlbšie, skúste preskúmať niekoľko vecí:
- Ako ovplyvňuje veľkosť embeddingu výsledky?
- Ako ovplyvňujú rôzne štýly textu výsledok?
- Vezmite niekoľko veľmi odlišných typov slov a ich synonymá, získajte ich vektorové reprezentácie, aplikujte PCA na zníženie dimenzií na 2 a zobrazte ich v 2D priestore. Vidíte nejaké vzory?
Zrieknutie sa zodpovednosti:
Tento dokument bol preložený pomocou služby AI prekladu Co-op Translator. Aj keď sa snažíme o presnosť, prosím, berte na vedomie, že automatizované preklady môžu obsahovať chyby alebo nepresnosti. Pôvodný dokument v jeho rodnom jazyku by mal byť považovaný za autoritatívny zdroj. Pre kritické informácie sa odporúča profesionálny ľudský preklad. Nenesieme zodpovednosť za akékoľvek nedorozumenia alebo nesprávne interpretácie vyplývajúce z použitia tohto prekladu.