La presentazione è in caricamento. Aspetta per favore

La presentazione è in caricamento. Aspetta per favore

ELABORAZIONE DEL LINGUAGGIO NATURALE CONOSCENZA LESSICALE WORDNET SEMANTICA DISTRIBUZIONALE.

Presentazioni simili


Presentazione sul tema: "ELABORAZIONE DEL LINGUAGGIO NATURALE CONOSCENZA LESSICALE WORDNET SEMANTICA DISTRIBUZIONALE."— Transcript della presentazione:

1 ELABORAZIONE DEL LINGUAGGIO NATURALE CONOSCENZA LESSICALE WORDNET SEMANTICA DISTRIBUZIONALE

2 CONOSCENZA LESSICALE Conoscenza sulle PAROLE di una lingua Una componente fondamentale della nostra conoscenza linguistica

3 CHE INFORMAZIONI SONO CONTENUTE NEL LESSICO Le FORME di una parola (ortografia e pronuncia) La loro STRUTTURA (da quali MORFEMI sono composti) Informazioni GRAMMATICALI Esempi di USO ETIMOLOGIA Il SIGNIFICATO della parola (compresi sinonimi)

4 UN ESEMPIO DI VOCE IN DIZIONARIO toad /təųd/ n. 1 any froglike amphibian of the family Bufonidae, esp. of the genus Bufo, breeding in water but living chiefly on land. 2 any of various similar tailless amphibians. 3 a repulsive or detestable person. toadish adj. [Old English tadige, tadde, tada, of unknown origin] (COD 9)

5 FORME DI PAROLA PRONUNCIA – Fonemi, oggigiorno solitamente IPA /təųd/ – Prosodia (accento) ORTOGRAFIA – Sillabe – Varianti

6 INFORMAZIONI GRAMMATICALI Morfologia – Verbi: inflessioni – Nomi: forma del plurale dito dita Sintassi – Parte del discorso (con restrizioni: awake predicative (the baby is awake) ma non attributive (*the awake baby) – Verbi: transitivo / intransitivo, quali tipi di preposizioni, etc.

7 COLLOCAZIONI Frasi fatte: Studente lavoratore, padre padrone, governo ombra Preferenze duso: – Il sostantivo vino tipicamente modificato dagli aggettivi bianco e rosso (ma non giallo) (Inglese: Il sostantivo ban tipicamente modificato dagli aggettivi total o complete, associato con il verbo impose, etc.)

8 SIGNIFICATO Una delle funzioni piu importanti di un dizionario e caratterizzare le ACCEZIONI di una parola attraverso DEFINIZIONI Probabilmente laspetto piu difficile della lessicografia

9 SEMANTICA LESSICALE Due tipi di conoscenza semantica sulle parole: – Conoscenza denotazionale – Conoscenza composizionale Quattro tipi di teorie: – Referenziale – Cognitivo / mentalista Teoria dei prototipi – Strutturale / relazionale

10 DUE TIPI DI SIGNIFICATO LESSICALE Significato DENOTAZIONALE: conoscenza sulla parola in se: – Il CAVALLO e un ANIMALE dalla lunga criniera … – (Il tipo di conoscenza tipicamente trovata nelle definizioni) Significato COMPOSIZIONALE: conoscenza sul come la parola si combina con altre parole

11 ESEMPI DI SIGNIFICATO DENOTAZIONALE IN DIZIONARIO contascàtti: Dispositivo installato a richiesta presso lutente per la documentazione del traffico telefonico (Zingarelli 1995) maneggevole: Che si puo maneggiare facilmente || Fig. trattabile, arrendevole || T. mar. del vento, quando permette lesecuzione di qualsiasi manovra (Palazzi-Folena, 1992)

12 TIPI DI TEORIE SEMANTICHE Teorie REFERENZIALI Teorie RELAZIONALI / STRUTTURALI Teorie COGNITIVE – Teoria dei PROTOTIPI VEDREMO CHE OGNUNA DI QUESTE TEORIE SVOLGE UNA FUNZIONE ALLINTERNO DI UN DIZIONARIO

13 QUATTRO MODI PER DEFINIRE IL SIGNIFICATO DENOTAZIONALE RIFERIMENTO – OK: bicicletta / `tromba – Piu difficile: deferenza / ridicolo RELAZIONI SEMANTICHE – Sinonimia – Antonimia – Iponimia CONNOTAZIONE – inspire vs. fundamentalist COLLOCAZIONI

14 TEORIE REFERENZIALI DEL SIGNIFICATO Funzione principale delle parole: RIFERIRSI ad oggetti nel mondo circostante Significato di SEDIA: le proprieta che ci permettono di identificare una sedia quando la vediamo – Ha 4 gambe, uno schienale, una superficie piatta, etc.. Portano a definizioni del tipo GENUS E DIFFERENTIA

15 GENUS E DIFFERENTIA horse noun 1 a solid-hoofed plant-eating domesticated mammal with a flowing mane and tail, used for riding, racing, and to carry and pull loads New Oxford Dictionary of English GENUS DIFFERENTIAE

16 RETI SEMANTICHE

17 RETI SEMANTICHE: RISULTATI DALLA PSICOLOGIA COGNITIVA Collins & Quillian, 1969: tempi per decidere se un oggetto ha una certa proprieta aumentano a seconda della distanza – A canary is yellow – A canary has feathers – A canary eats food

18 LIMITI DELLA DEFINIZIONE VIA GENUS & DIFFERENTIA Putnam: – `faggio / `olmo – `diamante / `zircone Jackson: happen vs occur vs befall vs transpire – Everything is illuminated: `harmonize vs `agree,

19 TEORIE RELAZIONALI DEL SIGNIFICATO LESSICALE Le teorie RELAZIONALI ipotizzano che il significato di una parola e stabilito dalle sue RELAZIONI DI SIGNIFICATO con altre parole Sviluppate in ambito lessicografico

20 RELAZIONI SEMANTICHE Relazioni gia utilizzate in definizioni per Genus e Differentia: – IPERONIMIA: Garofano, rosa, margherita sono tutti iponimi di FIORE – MERONIMIA Altre relazioni: – SINONIMIA: quando due lemmi distinti hanno lo stesso significato Spesso essenziale per definizioni / traduzioni (ETERONIMIA) – ANTONIMIA: quando due lemmi hanno significati CONTRARI Bello / brutto, amore / odio

21 MERONIMIA NELLE DEFINIZIONI horse noun 1 a solid-hoofed plant-eating domesticated mammal with a flowing mane and tail, used for riding, racing, and to carry and pull loads New Oxford Dictionary of English HYPERNYM PARTI

22 DEFINIZIONE PER SINONIMIA miserable 1 very unhappy, wretched 2 causing misery 3 squalid 4 mean unhappy 1 sad or depressed 2 unfortunate or wretched wretched 1 miserable or unhappy 2 worthless Collins Pocket English Dictionary (2000) CIRCOLARITA

23 DEFINIZIONI PER ANTONIMIA artificial not real conventional not spontaneous or sincere or original vacant not occupied Concise Oxford Dictionary 9

24 WORDNET A lexical database created at Princeton – Freely available for research from the Princeton site – Information about a variety of SEMANTICAL RELATIONS Three sub-databases (supported by psychological research as early as (Fillenbaum and Jones, 1965)) – NOUNs – VERBS – ADJECTIVES and ADVERBS Each database organized around SYNSETS

25 SYNSETS Senses (or `lexicalized concepts) are represented in WordNet by the set of words that can be used in AT LEAST ONE CONTEXT to express that sense / lexicalized concept: the SYNSET E.g., {chump, fish, fool, gull, mark, patsy, fall guy, sucker, shlemiel, soft touch, mug} (gloss: person who is gullible and easy to take advantage of)

26 IL DATABASE DEI NOMI About 90,000 forms, 116,000 senses Relations: hypernymbreakfast -> meal hyponymmeal -> lunch has-memberfaculty -> professor member-ofcopilot -> crew has-Parttable -> leg part-ofcourse -> meal antonymleader -> follower

27 IPERNIMIA IN WORDNET 2 senses of robin Sense 1 robin, redbreast, robin redbreast, Old World robin, Erithacus rubecola -- (small Old World songbird with a reddish breast) => thrush -- (songbirds characteristically having brownish upper plumage with a spotted breast) => oscine, oscine bird -- (passerine bird having specialized vocal apparatus) => passerine, passeriform bird -- (perching birds mostly small and living near the ground with feet having 4 toes arranged to allow for gripping th e perch; most are songbirds; hatchlings are helpless) => bird -- (warm-blooded egg- laying vertebrates characterized by feathers and forelimbs modified as wings) => vertebrate, craniate -- (animals having a bony or cartilaginous skeleton with a segmented spinal column and a large brain enclosed in a skull or cranium) => chordate -- (any animal of the phylum Chordata having a notochord or spinal column) => animal, animate being, beast, brute, creature, fauna -- (a living organism characterized by voluntary movement) => organism, being -- (a living thing that has (or can develop) the ability to act or function independently) => living thing, animate thing -- (a living (or once living) entity) => object, physical object -- => entity, physical thing --

28 MERONIMIA IN WORDNET wn beak –holon Holonyms of noun beak 1 of 3 senses of beak Sense 2 beak, bill, neb, nib PART OF: bird

29 VERBI About 10,000 forms, 20,000 senses Relations between verb meanings: Hypernymfly-> travel TroponymWalk -> stroll EntailsSnore -> sleep AntonymIncrease -> decrease

30 RELAZIONI TRA SIGNIFICATI VERBALI V1 ENTAILS V2 when Someone V1 (logically) entails Someone V2 - e.g., snore entails sleep TROPONYMY when To do V1 is To do V2 in some manner - e.g., limp is a troponym of walk

31 AGGETTIVI & AVVERBI About 20,000 adjective forms, 30,000 senses 4,000 adverbs, 5600 senses Relations: Antonym (adjective) Heavy light Antonym (adverb)Quickly slowly

32 WORDNET IN NLTK (Chapter 2.5) >>> from nltk.corpus import wordnet as wn >>> wn.synsets('motorcar') [Synset('car.n.01')]

33 COME USARLO Online: Scaricatevelo, poi da command line: – Get synonyms: wn –synsn bank – Get hypernyms: wn –hypen robin – (also for adjectives and verbs): get antonyms wn –antsa right

34 TEORIE COGNITIVE DEL SIGNIFICATO Il significato delle parole e dato dalla RAPPRESENTAZIONE MENTALE che abbiamo di questi oggetti (CONCETTO) Il significato di SEDIA e il nostro concetto di sedia

35 TEORIA DEI PROTOTIPI La teoria dominante dei concetti e la teoria dei PROTOTIPI proposta da Rosch negli anni 70 Per decidere se un oggetto e una sedia od una poltrona calcoliamo la SOMIGLIANZA tra questo oggetto e la tipica sedia e la tipica poltrona

36 OBIEZIONI ALLAPPROCCIO SEMANTIC NETWORK AL SIGNIFICATO Obiezioni filosofiche – Wittgenstein, Putnam Obiezioni cognitiviste

37 WITTGENSTEIN: GAME What is common to all games? – Are they all amusing? Cfr. chess – Or is there always winning and losing? Counterex: child throwing his ball at the wall – Look at the parts played by skill and luck I can think of no better expression that FAMILY RESEMBLANCE – games form a family

38 PUTNAM the term lemon not definable by simply conjoining its definining characteristics yellow color / tart taste / a certain kind of peel – Abnormal members (green lemon) – Three legged tiger (Also: three-legged chair, see below)

39 PROBLEMI EMPIRICI PER LAPPROCCIO TASSONOMICO / RETI SEMANTICHE Typicality effects – Is a tomato a vegetable or a fruit? – Is this art? Failures of transitivity – If A is a B and B is a C, is A a C?

40 Fuzzy or graded categorization A necessary and sufficient definition should pick up all the category members and none of the non- members But this is not what happens: – Hampton (1979): no clear division between members and non-members of 8 categories Kitchen utensils: SINK? SPONGE? Vegetables: TOMATOES? GOURDS? Agreement on typicality judgments – (think of a fish, any fish) – Rosch (1975): very high correlation (.97) between subjectss typicality rankings for 10 categories

41 Typicality effects The ease with which people judge CATEGORY MEMBERSHIP depends on typicality – Rips, Shoben and Smith (1973): Fast to affirm that a robin is a bird; not so fast to affirm that a chicken is a bird – Posner & Keele: similarity to visual pattern Learning: typical items learned before atypical ones (Rosch Simpson & Miller 1976) – Learning is faster if subjects are taught on typical items Typicality affects speed of inference – Rips 1975: – Garrod & Sanford 1977: faster reading time for The bird came in through the front door when ROBIN than when GOOSE

42 ALTERNATIVA: TEORIA DEI PROTOTIPI La teoria dominante dei concetti in Psicologia e la teoria dei PROTOTIPI proposta da Rosch negli anni 70

43 La teoria in breve Manteniamo rappresentazioni dei concetti sulla base delle loro features (TRATTI) Per ogni classe di oggetti esistono dei rappresentanti piu TIPICI Per decidere se un oggetto e una sedia od una poltrona calcoliamo la SOMIGLIANZA tra questo oggetto e la tipica sedia e la tipica poltrona

44 FEATURE NORMS Psychologists have been collecting concept features from subjects at least since Rosch and Mervis (1975) Different methodologies used (from free association to very tightly controlled) Three such databases currently available – Garrard et al (2001) - GA – Vinson and Vigliocco (2004) - VV – McRae et al (2005) – MCRA - the largest, also classified

45 SPEAKER-GENERATED FEATURES (VINSON AND VIGLIOCCO)

46 CONCETTI COME CLUSTER CHICKEN GOOSE ORIOLE ROBIN OSTRICH

47 What makes an item typical? Rosch & Mervis 1975 Items are typical when they have HIGH FAMILY RESEMBLANCE with members of the category: – Typical items have many of the attributes of members – Do not have properties of nonmembers – Irrespective of frequency: ORIOLE vs CHICKEN Evidence 1: checked that subjects agree on typicality for several natural categories 1.Asked subjects to list attributes (actually, check) 2.Weighed each attribute by how many items it occurred with within the category 1.SCORE indicates how many common features 3.Found that score highly predictive of typicality ( ) Five most typical furniture (CHAIR, SOFA, TABLE, DRESSER, DESK) have 13 features in common Five least typical (CLOCK, PICTURE, CLOSET, VASE, TELEPHONE) had 2 attributes in common

48 DEFINIZIONE PER TIPICALITA day of rest a day set aside from normal activity, typically, Sunday on religious grounds measles an infectious viral disease causing fever and a red rash, typically occurring in childhood Concise Oxford Dictionary

49 FEATURE NORMS & DIZIONARI Questi dati sui tratti tipici di concetti raccolti da soggetti potrebbero essere utili per guidare lo sviluppo di definizioni o delle relazioni semantiche in un dizionario tipo WordNet

50 FEATURE NORMS PER ELDIT Un progetto congiunto European Academy Bolzano / UniTN (CIMEC) per raccogliere feature norms su parole in Italiano e Tedesco

51 METODI Dati raccolti da studenti nelle scuole di Bolzano – ~70 studenti di lingua madre Italiana e 70 di lingua madre tedesca Raccolto dati su 50 concetti

52 RISULTATI ~200 paia concetto / attributo in comune tra tutti e 70 i soggetti tedeschi ed altrettante per gli Italiani Tipi di proprieta piu importanti: – Iponimia ( il cane e un animale ) – Parte ( il cane ha le zampe) – Qualita esterna ( le fragole sono rosse) – Comportamento ( il cane abbaia )

53 CONOSCENZA COMPOSIZIONALE Dal punto di vista composizionale si possono fare almeno due distinzioni : – Tra PREDICATI ed ARGOMENTI – Tra parole FUNZIONALI e parole CONTENUTO

54 PREDICATI ED ARGOMENTI Maria ha noleggiato una macchina PREDICATO ARGOMENTI

55 PREDICATI ED ARGOMENTI Numeri diversi di argomenti: – 0 (PIOVERE, NEVICARE) – 1 (CADERE, NUOTARE) – 2 (NOLEGGIARE, CONOSCERE) – 3 (DARE, DEDICARE) Non solo predicati verbali – Sono STANCO / AFFAMATO / CONTENTO / ….

56 PAROLE FUNZIONALI Molte parole (ed affissi!) di una lingua, particolarmente quelle delle classi chiuse (articoli, preposizioni, connettori, verbi ausiliari) fanno parte del sistema della lingua: esprimono aspetti semantici che fanno parte della GRAMMATICA della lingua stessa Maria E Giovanni HANNO noleggiato DUE macchine

57 RIFERIMENTI Fellbaum, C. (1998). WordNet: A Lexical Database. MIT Press.


Scaricare ppt "ELABORAZIONE DEL LINGUAGGIO NATURALE CONOSCENZA LESSICALE WORDNET SEMANTICA DISTRIBUZIONALE."

Presentazioni simili


Annunci Google