Relevanţă

Relevanța (din engleză  relevant  - semnificativ, relevant [1] ) în știința informației și regăsirea informațiilor înseamnă gradul de conformitate a documentului găsit sau a setului de documente cu nevoile de informații ale utilizatorului ( Relevance , Relevance ).

Profesorul Tefko Saracevic notează legătura strânsă a acestui concept cu conceptele de bază ale teoriei cognitive a relevanței dezvoltate de Dan Sperber și Deidra Wilson , și o astfel de ramură a matematicii ca logica relevantă .

Un mare interes practic pentru algoritmii de evaluare automată a relevanței este asociat cu utilizarea lor în clasarea în motoarele de căutare .

Relevanța  este o desemnare a gradului subiectiv de relevanță a ceva la un moment [2] în timp [3] [4] .

Definiția presupune:

  1. Desemnarea gradului - provine din subiectivitatea unui anumit observator sau a unui grup de observatori.
  2. Conceptul implicit [5] de „ceva” este o referire la orice fel de informație sau obiect, subiect sau proces din spațiul online-offline.
  3. Gradul de relevanță este semnificația la un moment dat, de regulă, nivelul maxim de adecvare [6] , conformitate [7] , necesitate [8] , aplicabilitate [9] din punctul de vedere al observatorului.

Conceptul de relevanță [10] [11]  este semnificația subiectivă a relevanței a ceva în măsura percepției observatorului la un moment dat în timp.

Conceptul include relația dintre A (sau cantitatea de A) și B (sau cantitatea de B), precum și proprietatea - C (sau proprietățile - C).

Părțile (A) și (B) pot fi tangibile și intangibile sau combinații ale ambelor.

Exemple de componente materiale sunt documentele , mecanismele , procesele etc.

Exemple de componente intangibile sunt - concepte , informații etc.

Combinații ale ambelor - sarcină , situație , îndatoriri etc.

Proprietățile C precum utilitatea , adecvarea , utilitatea stabilesc contextul sau baza corespondenței dintre A și B.

Relația dintre A și B este considerată a fi relevantă în proprietățile lui C, unde proprietățile lui C sunt subiective și pot fi evidente sau neevidente, afirmate și implicite, raționale sau neraționale la momentul respectiv.

Istorie

Prima mențiune a termenului de relevanță a fost în 1733 [12] [13] .

Prima utilizare a termenului în contextul analizei semnificației corespondenței a ceva a fost dată în 1854 de opera lui James Frederic Ferrier [14] .

În anii 60 ai secolului al XX-lea, termenul a devenit un cuvânt „la modă” folosit în discuțiile pe probleme sociale semnificative pentru electorat [15] .

Primele teorii ale analizei gradelor de corespondență provin din epistemologie  , o ramură a filosofiei care studiază astfel de probleme:

Conceptul de relevanță, relevat în epistemologie, a servit drept fundație pentru dezvoltarea unui număr de domenii științifice, de exemplu: știința cognitivă , logica , științele informației .

În știința informației, conceptul de relevanță a fost introdus oficial în 1958 de Brian Campbell Vickery analiză tematică pentru regăsirea informațiilor [16] și a servit drept ghid pentru studiile ulterioare ale conceptului în domeniul regăsirii informațiilor.

În prezent, fiecare utilizator de internet, după propria sa percepție, indică gradul de relevanță a conținutului informațional în conformitate cu propriile interese. Conceptul de relevanță pe web afectează fiecare utilizator de internet, iar gradul de semnificație al informațiilor este analizat cel mai pe scară largă în timpul dezvoltării tehnologiei informației .

Cercetare

Științele informației

Clusterul Științei Informației include multe domenii diferite, cum ar fi:

Practicienii ( Information scientist ) investighează aspectele relevante în cadrul interacțiunii utilizatorilor și organizațiilor cu sistemele informaționale pentru a determina parametrii utilizați în metodele de desemnare a măsurilor de conformitate a informațiilor .

În știința informației, relevanța se referă la raportul și măsura relevanței [17] . De regulă, conceptul înseamnă o măsură a informațiilor transmise de document cu privire la solicitarea utilizatorului.

Criteriile de relevanță sunt utilizate pentru cuantificarea fenomenelor individuale. De exemplu, atunci când un utilizator evaluează utilitatea, importanța, relevanța unui document sau prezentarea unui document la informațiile solicitate într-o interogare, sarcină, situație etc.

Tehnologia informației a schimbat modul în care majoritatea utilizatorilor primesc, organizează, stochează, acumulează, analizează informații. În orice interacțiune cu IT, conceptul de relevanță joacă un rol fundamental, dar în același timp nu are o definiție lipsită de ambiguitate, întrucât măsura subiectivă a conformității nu are o dimensiune finală [18] .

Orice algoritm de căutare , ca toate sistemele informaționale existente , cu diferite niveluri de succes, încearcă să se apropie de conceptul de relevanță absolută.

Relevanța în regăsirea informațiilor

Diferența cheie dintre domeniul regăsării informațiilor (IR) și teoria informațiilor sau biblioteconomie este implicarea specificațiilor destinate căutării. În domeniul (IR), este considerat fundamental conceptul de relevanță, pe baza căruia se construiesc sisteme de indexare și regăsire a informațiilor [19] (IRS).

Conceptul [20] relevanță în (IRS), este raportul dintre componentele din grupele (A) și (B), conform corespondenței (E) la un anumit moment în timp, unde (A) și (B) înseamnă specii. și (E) valoarea relevanței.

Componenta (A) poate fi i) un document care va fi primit de utilizatorul motorului de căutare (SIS) sau ii) prezentarea documentului , sub formă de cuvinte cheie, fraze sau propoziții, sau iii) informații transmise prin citire documentul primit.

Componenta (B) poate fi i) o sarcină în fața utilizatorului care necesită informații pentru rezolvare, sau ii) informațiile necesare , după înțelegerea utilizatorului care reprezintă sarcina în sine, sau iii) o solicitare , sub formă de cuvinte , fraze sau propoziții pentru a extrage informații.

(E) are în vedere măsura conformității, adică evaluarea uneia sau mai multor persoane și momentul deciziei.

„Indexarea inteligentă a informațiilor este însăși specificul căutării, tehnici de căutare aplicate, mecanisme, formule și sisteme pentru operațiuni de căutare [21]  - Calvin Mooers ”.

Sistemele de recuperare a informațiilor sunt concepute pentru a prelua informații relevante la cererea utilizatorului. În criteriile de căutare, de regulă, sunt utilizați doi indicatori principali de reamintire  - completitudine și precizie  - acuratețe . Colectiv, ele denotă relevanța interogării date, care este conceptul de relevanță [22] .

Criteriul ( pertinența ) eficacității sistemelor de regăsire a informațiilor măsoară probabilitatea unei potriviri între relevanța regăsită de sistem (relevanța formală) și relevanța subiectivă a unui utilizator dat (relevanța conținutului) [23] .

Există mai multe abordări pentru a evalua relevanța. Relevanța conținutului este corespondența răspunsurilor la o solicitare de informații, determinată în mod informal. Relevanța formală este o corespondență determinată prin compararea imaginii interogării de căutare cu imaginea de căutare a răspunsului conform unui anumit algoritm .

Una dintre metodele comune de evaluare a relevanței este metoda TF-IDF . Sensul său se rezumă la faptul că, cu cât este mai mare frecvența locală a termenului (interogare) în document (TF) și mai mare este „raritatea” (adică apare mai rar în alte documente) a termenului în colectare (IDF), cu atât ponderea acestui răspuns este mai mare în raport cu termenul - adică răspunsul va fi dat mai devreme în rezultatele căutării pentru acest termen. Autorul metodei este Gerard Salton , dezvoltat în continuare de Karen Spark Jones .

Știința cognitivă

Conform teoriei relevanței , percepția informației corespunde cu ceva (are relevanță) dacă și numai dacă procesarea acesteia dă efecte cognitive pozitive [24] [25] .

Știința cognitivă studiază efectele și proprietățile cunoașterii și inteligenței umane. În dezvoltarea cunoașterii, căutarea relevanței este principalul proces al gândirii umane [26] .

În 1986, Dan Sperber și Deirdre Wilson , autorii teoriei relevanței , în lucrarea lor „Principles of Relevance” [27] au identificat importanța centrală a relevanței în orice judecăți și comunicări. Autorii au remarcat, de asemenea, că procesele de gândire intuitivă asociate cu raportul dintre obiectele fizice depășesc domeniul de aplicare al studiului teoriei relevanței.

În 1990, cercetările lui Gorayska-Lindsay au arătat că teoria relevanței abordează și problemele relațiilor dintre obiectele fizice. Ideea cheie în soluția lor este că relevanța are scop [28] . Unde (A) este elementul relevant pentru (B) dacă (B) este scopul și (A) este necesar pentru realizarea (B) .

Relevanța în logică

„Luna este făcută din brânză. Deci ori plouă în Ecuador chiar acum, ori nu este . ”

În conformitate cu regulile logicii clasice , concluzia este construită corect, dar din punctul de vedere al logicii relevante , ipoteza participială nu este în niciun fel legată de concluzia [29] .

Relevanța în domeniul logicii este explorată în inferențe deductive [30] , respingând antecedentul , care nu are legătură cu consecința.

Metodele logice relevante se bazează pe principiul eliminării ipotezelor irelevante în studiu și tragerea de concluzii logice [31] .

Cele mai citate [32] lucrări de analiză și critică a logicii relevante sunt Entailment, Vol. 1, 2: Logica relevanței și necesității " [33]

Multe sisteme de relevanță logică acoperă domenii precum:

  • Semantics and Philosophy (" Relevance Logic: A Philosophical Interpretation. 1st Edition " [34] , Edwin David Mares, " Ternary Relations and Relevant Semantics " [35] , Bob Meyer (logician) ),
  • Găsirea informațiilor („ Modele logice în regăsirea informațiilor ” [36] Mounia Lalmas, „Găsirea informațiilor, imagistica și logică probabilistică ” [37] Fabrizio Sebastiani),
  • Inteligența artificială (" The Relevance of Relevance " [38] Devika Subramanian, Russell Greiner , & Judea Pearl ).

Altele

Teoria relevanței este studiată în multe științe diferite și din 2010 a devenit una dintre principalele [39] în domeniile pragmaticii , lingvisticii , inteligenței artificiale , psihologiei cognitive etc.

Exemple

Spațiu informațional IT

Folosind tehnologiile informaționale ale rețelei, utilizatorul, în măsura percepției sale, indică gradul de relevanță a conținutului. Pe de altă parte, relevanța conținutului utilizatorului indică statutul individului în spațiul online-offline.

În procesul de căutare, analiză sau monitorizare a informațiilor ( Motor de căutare , Sistem expert , Curare conținut , etc.) în conformitate cu interesele lor, utilizatorii indică gradul de relevanță a conținutului. Folosind capacitățile sistemelor sub formă de abonamente, „ like -uri ”, vizualizări ale publicațiilor, utilizatorii indică relevanța autorilor de conținut ( Sistem de reputație , software de analiză a rețelelor sociale , etc.).

Pe de altă parte, utilizatorul, prin publicarea de conținut ( Social media ), în procesul de feedback instantaneu sub formă de comentarii relevante ( Instant Messaging , Microblogging , Emoticon , etc.), capătă semnificația abilităților sau abilităților. Utilizarea tehnologiilor ( Social web , Social media marketing , Blog , etc.), ca parte a recunoașterii abilităților dobândite, promovarea sau marketingul conținutului său, formează statutul de relevanță al acesteia ( Individual brand ) în spațiul online-offline.

Legislație

În jurisprudență, în special în domeniul dreptului occidental, „relevanța” conform regulii Fed [40] 401 din Legea federală a probelor din SUA este definită astfel: ar fi fără dovezi”.

Fed Rule 402 [41] permite dovezile atașate numai dacă sunt relevante. Pe de altă parte, conceptul de probabilitate din definiția relevanței are un sens ambiguu [42] .

În sens, există atât principiul calculului logic al probabilității matematice , cât și principiul probabilității [43] .

Existența în legislație a unei reguli neechivoce pentru relevanța probelor și absența unui concept neechivoc de probabilitate indică în mod clar importanța conceptului de relevanță în domeniul jurisprudenței.

Economie

Economistul John Maynard Keynes , ale cărui teorii sunt fundamentale pentru macroeconomia modernă, a considerat importantă definirea conceptului de relevanță în cadrul problemelor legate de calculul riscului economic. Keynes a propus să măsoare relevanța prin principiul schimbărilor pe care le produce informația în analiza probabilității unui eveniment viitor.

Economistul Ludwig von Mises , cunoscut pentru munca sa în praxeologie și analiza alegerii și acțiunii individuale, a aplicat termenul de relevanță în termenii acțiunii economice. În special, el a considerat că „acțiunea necesită o înțelegere a relevanței acțiunilor anterioare pentru adoptarea următoarelor [44] ”. Și a presupus că relevanța este determinată, în primul rând, de gradul de utilitate [45] , unde utilitatea informațiilor este evaluată pe baza judecății subiective [46] .

Din punct de vedere al contabilității, informațiile care sunt relevante în cadrul analizei contabilității financiare, în primul rând, sunt necesare și afectează deciziile utilizatorului [47] .

În domeniul economiei, conceptul de relevanță, de regulă, se referă la informațiile asociate cu luarea celei mai eficiente decizii.

Altele

Conceptul de relevanță are o largă aplicație în diferite domenii, cum ar fi:

precum și în diverse sectoare de servicii:

Vezi și

Note

  1. Dicționar de cuvinte străine. - M .: „ Limba rusă ”, 1989. - 624 p. ISBN 5-200-00408-8
  2. Un moment  este un punct de măsurare pe axa timpului pentru un anumit observator
  3. Timpul denotă spațiu cu o dimensiune temporală egală - continuumul spațiu-timp
  4. Studiile asupra factorilor de timp legați de sistemele de recuperare a informațiilor sunt enumerate în Dynamics p.817, p.823-824. Relevanță: întreaga istorie , Stefano Mizzaro. septembrie-1997.
  5. Cadrul pentru acest concept este stabilit în A Framework for Various Kinds of Relevance p.811-812, Relevance: The Whole History , Stefano Mizzaro. septembrie-1997.
  6. Gradul de „relevanță” desemnat în regăsirea informațiilor (Citiți mai multe, articolul principal Relevanța (recuperarea informațiilor) )
  7. Gradul de „relevanță” desemnat în domeniul legislației, un test pentru conformitatea probelor (Pentru mai multe, secțiunea articolului Legislație)
  8. Gradul notat de „relevanță” în raportul obiectelor fizice, în domeniul științei cognitive (Pentru mai multe detalii, secțiunea articolului Știința cognitivă)
  9. Gradul desemnat de „relevanță” în domeniul economiei (Pentru mai multe detalii, secțiunea articolului Economie)
  10. Saracevic, 2007 , Conceptul de bază al relevanței, sensul relevanței: cum relevanța este universal bine înțeleasă. Dincolo de intuitiv, p. 1918.
  11. Pentru o discuție detaliată a subiectivității unui concept în știința informației și regăsirea informațiilor , a se vedea Concluzia p231, Fundația conceptului de relevanță , Birger Hjørland . februarie-2010.
  12. Merrian Webster . Data accesului: 19 ianuarie 2016. Arhivat din original pe 19 iunie 2020.
  13. Dictionary.com . Data accesului: 19 ianuarie 2016. Arhivat din original pe 6 martie 2016.
  14. ^ Ferrier's Institutes of Metaphysic: Theory of Knowing and Being, p. 46 . Consultat la 19 ianuarie 2016. Arhivat din original la 10 martie 2016.
  15. Subsecțiunea Politică din articolul Relevanță
  16. Cuprinsul lucrărilor trimise Vickery, B. C, Analiza subiectului pentru regăsirea informațiilor (Vol. 2, pp. 855-865) Arhivat la 18 iunie 2020 la Wayback Machine , The structure of information retrieval systems (Vol. 2, pp. 1275) —1290) Arhivat 17 iunie 2020 la Wayback Machine . Proceedings of the International Conference on Scientific Information, (ICSI, 1958). Washington, DC: Academia Națională de Științe
  17. Saracevic, 2007 , Summary: Attributes of Relevance in Information Science, p. 1920.
  18. Saracevic, 2007 , Introducere: Cum IT a făcut ca studiul relevanței să fie tot mai relevant, p. 1916.
  19. ↑ O discuție detaliată a conceptului de relevanță și (RP) în secțiunea „Sistem” sau „Algoritmică” Relevanță p.218-221, Fundația conceptului de relevanță , Birger Hjorland. februarie-2010.
  20. Tipurile de relevanță și tipurile de semnificație sunt subliniate în A Framework for Various Kinds of Relevance pp. 811-812, Relevance: The Whole History , Stefano Mizzaro septembrie-1997.
  21. The Zator-A Proposal: A Machine for Complete Documentation, 1947. Retipărit cu prefață ca Buletinul tehnic Zator nr. 65 (1951) . Calvin N. Mooers, Institutul Charles Babbage, Universitatea din Minnesota Arhivat 18 octombrie 2016 la Wayback Machine
  22. Căutarea literaturii de mașini VIII, Criterii operaționale pentru proiectarea sistemelor de regăsire a informațiilor ,. Allen Kent, Madeline M. Berry, Fred U. Luehrs Jr. și JW Perry Journal of the American Society for Information Science and Technology, V-6, I-2, p.93-101, Apr 1955. Onlinelibrary.wiley.com Arhivat la 10 aprilie 2016 la Wayback Machine
  23. Saracevic, 2007 , Notă istorică de subsol: A reamintire a modului în care a apărut relevanța în recuperarea informațiilor, p. 1917-1918.
  24. „ Conform teoriei relevanței, o intrare este RELEVANTĂ pentru un individ atunci când și numai atunci când procesarea sa produce astfel de efecte cognitive pozitive ” Teoria relevanței Arhivată la 1 octombrie 2020 la Wayback Machine , Sperber & Wilson p.251
  25. Saracevic, 2007 , Model stratificat, pp. 1926-1928.
  26. „ căutarea relevanței este o caracteristică de bază a cunoașterii umane ” Teoria relevanței Arhivată la 1 octombrie 2020 la Wayback Machine , Sperber & Wilson p.251
  27. Principiul cognitiv al relevanței: judecata umană este orientată spre maximizarea relevanței. Principiul de relevanță al comunicării: Ceea ce se spune implică o relevanță optimă. Teoria relevanței Arhivat la 1 octombrie 2020 la Wayback Machine , Sperber & Wilson p.249, p.254, p.256
  28. Roger Lindsay și Barbara Gorayska. Cogniție și tehnologie , relevanță, managementul obiectivelor și tehnologie cognitivă Arhivat 18 iunie 2020 la Wayback Machine p69
  29. Sinopsis din introducerea părții, Relevant Logic Arhivat 13 aprilie 2021 la Wayback Machine , Stanford Encyclopedia of Philosophy , 1998.
  30. În acest context, cuvântul implică identificarea celor implicați din numărul total de ipoteze logice pentru inferențe ulterioare.
  31. Saracevic, 2007 , Relevanța în logică, p. 1920.
  32. Philosophy Research Source, Philpapers.org Arhivat 13 ianuarie 2021 la Wayback Machine , Arhivat sub: Relevance Logic Arhivat 29 octombrie 2020 la Wayback Machine
  33. Entailment , Vol. 1, 2: The Logic of Relevance and Necessity ” Princeton University Press, ian, 1976, aprilie, 1992 . Entailment, Vol. 1 , Entailment, voi. 2 , Alan R Anderson și Nuel D Belnap .
  34. Cambridge University Press , Relevance Logic: A Philosophical Interpretation. Prima ediție Arhivată pe 10 martie 2016 la Wayback Machine .
  35. ^ Annals of Pure and Applied Logic iunie 2004, p195-217 , Ternary Relations and Relevant Semantics Arhivat 17 iunie 2020 la Wayback Machine .
  36. Universitatea din Glasgow, 1998 . Modele logice în recuperarea informațiilor Arhivate pe 16 ianuarie 2021 la Wayback Machine .
  37. Universitatea din Pisa (Italia), 1998 . Recuperarea informațiilor, imagistica și logica probabilistică Arhivată 18 ianuarie 2021 la Wayback Machine .
  38. Artificial Intelligence (97) 1-5 , The Relevance of Relevance Arhivat 17 iunie 2020 la Wayback Machine .
  39. „ Teoria relevanței care din 2010 a devenit mainstream în zonă „ Dan Sperber , Subsecțiunea: Cariere.
  40. Testul de relevanță a probelor  - Articolul IV. Relevanța și limitele ei. Regula 401 Arhivat la 19 august 2010 la Wayback Machine , Test pentru dovezi relevante.
  41. Regula de admisibilitate a probelor relevante  - Articolul IV. Relevanța și limitele ei. Regula 402 Arhivată la 19 august 2010 la Wayback Machine , Admisibilitatea generală a probelor relevante.
  42. John Woods, Universitatea din Columbia Britanică. Relevanța în lege: o perspectivă logică: arhivat la 22 februarie 2016 prin intermediul Wayback Machine Introducere p2 „înțelegerea cu mai multe fațete a relevanței a legii”.
  43. John Woods, Universitatea din Columbia Britanică. Relevanța în lege: o perspectivă logică Arhivată la 22 februarie 2016 la Wayback Machine : Introducere p2, „conceptul pe care îl denotă nu este unul de probabilitate, ci mai degrabă de plauzibilitate”.
  44. Ludwig von Mises . Acțiune umană Arhivată 23 martie 2020 la Wayback Machine 1998, Relevanța judecăților, p55
  45. Ludwig von Mises . Human Action Arhivat 23 martie 2020 la Wayback Machine 1998, Relevance Utility, p120
  46. Ludwig von Mises . Acțiune umană Arhivată 23 martie 2020 la Wayback Machine 1998, Relevanța judecăților, p57
  47. Potrivit, Obaidullah Jan ACA, CFA, Principles Relevance and Reliability, AccountingExplained.com Arhivat 26 septembrie 2017 la Wayback Machine
  48. Publicitate , 3 secțiuni: Funcție. În cadrul conceptului de relevanță . Funcția principală a reclamei este de a forma relevanță pentru produse și mărci.
  49. Consultanță , 1-secțiune: Definiție. În cadrul conceptului de relevanță . Sarcina principală a consultanței este de a oferi soluții relevante , ținând cont de tematica și problemele clientului.

Literatură


Lectură suplimentară

  • Barbara Gorayska, Cogniție și tehnologie: co-existență, convergență și co-evoluție . 2010 Benjamins Publishing Co.
  • Alan R Anderson și Nuel D Belknap, Entailment, Vol. 1, 2: The Logic of Relevance and Necessity , Princeton University Press, ianuarie 1976.
  • Edwin David Mares, Relevance Logic: A Philosophical Interpretation Ediția I . Cambridge University Press.
  • Hjørland, Birger (2000). Cercetare de relevanță: Perspectivele lipsă: „Non-relevanță” și „Relevanță epistemologică”. Journal of the American Society for Information Science, 51 (2), 209-211.
  • Hjørland, Birger (2001). Spre o teorie despre caracter, subiect, actualitate, temă, domeniu, domeniu, conținut. . . și relevanță. Jurnalul Societății Americane pentru Știința și Tehnologia Informației. 52 (9), 774-778.
  • Hjørland, Birger (2002), Epistemologia și perspectiva socio-cognitivă în știința informației. Journal of the American Society for Information Science and Technology, 53 (4), 257-270.
  • Hjørland, B. (2010). Fundamentul conceptului de relevanță. Jurnalul Societății Americane pentru Știința și Tehnologia Informației, 61(2), 217-237.
  • Hjørland, Birger & Sejer Christensen, F. (2002). Sarcini de muncă și relevanță socio-cognitivă. Un exemplu concret. Journal of the American Society for Information Science and Technology, 53 (11), 960-965.
  • Millstone, E. & Crouch, D. (1986). Relevanța socială a educației în știință și tehnologie. Un ghid bibliografic adnotat . UNESCO. (ED.86/WS.24) Link .
  • Gorayska B. & R. O. Lindsay (1993). Rădăcinile relevanței. Jurnalul de pragmatică 19 , 301-323. Los Alamitos: IEEE Computer Society Press.
  • Lindsay, R. & Gorayska, B. (2002) Relevanță, obiective și tehnologie cognitivă. International Journal of Cognitive Technology , 1 , (2), 187-232
  • Sperber, D. & D. Wilson (1986/1995) Relevanță: comunicare și cunoaștere . editia a 2-a. Oxford: Blackwell.
  • Sperber, D. & D. Wilson (1987). Precis de relevanță: comunicare și cunoaștere. Behavioral and Brain Science , 10 , 697-754.
  • Sperber, D. & D. Wilson (2004). Teoria relevanței. În Horn, LR & Ward, G. (eds.) 2004 The Handbook of Pragmatics. Oxford: Blackwell, 607-632. http://www.dan.sperber.fr/?p=93

Publicații de lucrări

Link -uri