- Text Mining and Search
- Summary
Course Syllabus
Obiettivi
L'obiettivo del corso è fornire un'introduzione ai concetti fondamentali relativi a tecniche di Text Mining e rappresentazione di testi; si presenteranno inoltre alcune applicazioni di Text Mining: Classificazione e clustering di Testi, Topic Modeling, Riassunto Automatico di Testi. Si faranno accenni a sistemi quali i Motori di Ricerca e i Sistemi per la Raccomandazione di Informazioni.
Contenuti sintetici
Il corso fornirà inizialmente la definizione di Text Mining e indicherà le principali differenze tra Data Mining e Text Mining.
Il corso introdurrà quindi alcune applicazioni correlate al Text Mining: riassunto automatico di testi, e classificazione di testi. Tecniche di pre-processing di testi verranno presentate e il problema dell'indicizzazione di testi e della loro rappresentazione formale verrà affrontato. Il corso introdurrà quindi le applicazioni precedentemente citate. Si introdurranno alcuni software open source per la definizione di applicazioni di Text Mining.
Programma esteso
- Definizione di Text Mining e delle principali differenze tra Text Mining e Data Mining
- Breve introduzione di alcune applicazioni correlate al Text Mining
- Pre-Processing, indicizzazione e rappresentazione formale di testi
- Classificazione e clustering di testi
- Topic Modelling
- Riassunto automatico di testi
- Introduzione ai Motori di ricerca testuali e ai Sistemi per la Raccomandazione di Informazione
- Software Open Source
Prerequisiti
Conoscenza di base di statistica e di linguaggi di programmazione.
Modalità didattica
Il corso è tenuto in lingua inglese e prevede sia lezioni sia esercitazioni; in laboratorio sarà spiegato e sperimentato l'utilizzo di software “open source”.
Sono previsti seminari tenuti da esperti a livello nazionale ed internazionale.
Materiale didattico
Christopher D. Manning, Prabhakar Raghavan and Hinrich Schütze, Introduction to Information Retrieval, Cambridge University Press. 2008.
Testi specifici su Text Mining accesibili online verranno indicati durante il corso.
Periodo di erogazione dell'insegnamento
Primo semestre
Modalità di verifica del profitto e valutazione
Prova scritta e realizzazione di un progetto di laboratorio (project work) che è possibile svolgere in gruppo (sino a tre studenti)
La prova scritta ha come obiettivo la valutazione del livello di comprensione degli aspetti di base dell'insegnamento erogato, ed è costituita da un insieme di domande a risposta aperta.
L'obiettivo del progetto di gruppo, attraverso l'utilizzo di sofrware open source, è lo sviluppo di soluzioni tecnologiche a problemi affrontati a lezione. In particolare, si considerano ambiti applicativi reali che necessitano della definizione di sistemi i cui fondamenti sono stati presentati a lezione.
Orario di ricevimento
Previo appuntamento con i docenti
Aims
The aim of the course is to provide an introduction to the fundamental concepts related to Text Representation and Text Mining techniques; moreover, in the course some Text Mining applications will be presented: Text Classification and Clustering, Topic Modelling, and Text Summarization. An introduction to Search Engines and Recommender Systems will be provided.
Contents
This course will first provide the definition of Text Mining and will point out the basic differences between Data Mining and Text Mining.
The course will then introduce some tasks involved by Text Mining, which include Text Summarization and Text Classification. The issues of text pre-processing and analysis, and of text indexing and representation will be addressed. Then the course will introduce the previously mentioned tasks. Some open source software for Text Mining will be introduced and practiced.
Detailed program
- Definition of Text Mining and basic differences between Data Mining and Text Mining
- Introduction to some tasks related to Text Mining
- Text pre-processing, indexing and formal representation
- Text Classification and Clustering
- Topic Modelling
- Text Summarization
- Introduction to Text Based Search Engines and to Recommender Systems
- Open Source software for Text Mining and Search
Prerequisites
Basic knowledge of statistics and of programming languages.
Teaching form
The course will be taught in English, and it will be constituted of both lectures introducing the main topics and of sessions in a laboratory where open source tools will be explained and employed.
Seminars held by experts at national and international level will be part of the course.
Textbook and teaching resource
Christopher D. Manning, Prabhakar Raghavan and Hinrich Schütze, Introduction to Information Retrieval, Cambridge University Press. 2008.
Specific books on text mining that are accessible online will be recommended during the course.
Semester
First Semester
Assessment method
Written individual examination, definition of a laboratory project (project work) that can be developed also by groups of students (up to three students).
The written examination is aimed at assessing the level of understanding of the basic aspects taught during the course; it is constituted by a set of open questions.
The goal of the group project is the usage of open source software that will be employed to develop technological solutions to the problems addressed in the course. In particular, real application areas will be considered, which require the definition of systems presented during the course.
Office hours
To be agreed with the teachers