1,720,999 research outputs found
Defining and Assessing Critical Thinking: toward an automatic analysis of HiEd students’ written texts
Full text linkL'obiettivo principale di questa tesi di dottorato è testare, attraverso due studi empirici, l'affidabilità
di un metodo volto a valutare automaticamente le manifestazioni del Pensiero Critico (CT) nei testi
scritti da studenti universitari. Gli studi empirici si sono basati su una review critica della letteratura
volta a proporre una nuova classificazione per sistematizzare le diverse definizioni di CT e i relativi
approcci teorici. La review esamina anche la relazione tra le diverse definizioni di CT e i relativi
metodi di valutazione. Dai risultati emerge la necessità di concentrarsi su misure aperte per la
valutazione del CT e di sviluppare strumenti automatici basati su tecniche di elaborazione del
linguaggio naturale (NLP) per superare i limiti attuali delle misure aperte, come l’attendibilità e i
costi di scoring.
Sulla base di una rubrica sviluppata e implementata dal gruppo di ricerca del Centro di Didattica
Museale – Università di Roma Tre (CDM) per la valutazione e l'analisi dei livelli di CT all'interno di
risposte aperte (Poce, 2017), è stato progettato un prototipo per la misurazione automatica di alcuni
indicatori di CT. Il primo studio empirico condotto su un gruppo di 66 docenti universitari mostra
livelli di affidabilità soddisfacenti della rubrica di valutazione, mentre la valutazione effettuata dal
prototipo non era sufficientemente attendibile. I risultati di questa sperimentazione sono stati utilizzati
per capire come e in quali condizioni il modello funziona meglio. La seconda indagine empirica era
volta a capire quali indicatori del linguaggio naturale sono maggiormente associati a sei sottodimensioni
del CT, valutate da esperti in saggi scritti in lingua italiana. Lo studio ha utilizzato un
corpus di 103 saggi pre-post di studenti universitari di laurea magistrale che hanno frequentato il
corso di "Pedagogia sperimentale e valutazione scolastica". All'interno del corso, sono state proposte
due attività per stimolare il CT degli studenti: la valutazione delle risorse educative aperte (OER)
(obbligatoria e online) e la progettazione delle OER (facoltativa e in modalità blended). I saggi sono
stati valutati sia da valutatori esperti, considerando sei sotto-dimensioni del CT, sia da un algoritmo
che misura automaticamente diversi tipi di indicatori del linguaggio naturale. Abbiamo riscontrato
un'affidabilità interna positiva e un accordo tra valutatori medio-alto. I livelli di CT degli studenti
sono migliorati in modo significativo nel post-test. Tre indicatori del linguaggio naturale sono
5
correlati in modo significativo con il punteggio totale di CT: la lunghezza del corpus, la complessità
della sintassi e la funzione di peso tf-idf (term frequency–inverse document frequency). I risultati
raccolti durante questo dottorato hanno implicazioni sia teoriche che pratiche per la ricerca e la
valutazione del CT. Da un punto di vista teorico, questa tesi mostra sovrapposizioni inesplorate tra
diverse tradizioni, prospettive e metodi di studio del CT. Questi punti di contatto potrebbero costituire
la base per un approccio interdisciplinare e la costruzione di una comprensione condivisa di CT.
I metodi di valutazione automatica possono supportare l’uso di misure aperte per la valutazione del
CT, specialmente nell'insegnamento online. Possono infatti facilitare i docenti e i ricercatori
nell'affrontare la crescente presenza di dati linguistici prodotti all'interno di piattaforme educative (es.
Learning Management Systems). A tal fine, è fondamentale sviluppare metodi automatici per la
valutazione di grandi quantità di dati che sarebbe impossibile analizzare manualmente, fornendo agli
insegnanti e ai valutatori un supporto per il monitoraggio e la valutazione delle competenze
dimostrate online dagli studenti.The main goal of this PhD thesis is to test, through two empirical studies, the reliability of a method
aimed at automatically assessing Critical Thinking (CT) manifestations in Higher Education students’
written texts. The empirical studies were based on a critical review aimed at proposing a new
classification for systematising different CT definitions and their related theoretical approaches. The
review also investigates the relationship between the different adopted CT definitions and CT
assessment methods. The review highlights the need to focus on open-ended measures for CT
assessment and to develop automatic tools based on Natural Language Processing (NLP) technique
to overcome current limitations of open-ended measures, such as reliability and costs. Based on a
rubric developed and implemented by the Center for Museum Studies – Roma Tre University (CDM)
research group for the evaluation and analysis of CT levels within open-ended answers (Poce, 2017),
a NLP prototype for the automatic measurement of CT indicators was designed. The first empirical
study was carried out on a group of 66 university teachers. The study showed satisfactory reliability
levels of the CT evaluation rubric, while the evaluation carried out by the prototype was not yet
sufficiently reliable. The results were used to understand how and under what conditions the model
works better. The second empirical investigation was aimed at understanding which NLP features are
more associated with six CT sub-dimensions as assessed by human raters in essays written in the
Italian language. The study used a corpus of 103 students’ pre-post essays who attended a Master's
Degree module in “Experimental Education and School Assessment” to assess students' CT levels.
Within the module, we proposed two activities to stimulate students' CT: Open Educational
Resources (OERs) assessment (mandatory and online) and OERs design (optional and blended). The
essays were assessed both by expert evaluators, considering six CT sub-dimensions, and by an
algorithm that automatically calculates different kinds of NLP features. The study shows a positive
internal reliability and a medium to high inter-coder agreement in expert evaluation. Students' CT
levels improved significantly in the post-test. Three NLP indicators significantly correlate with CT
total score: the Corpus Length, the Syntax Complexity, and an adapted measure of Term Frequency-
Inverse Document Frequency. The results collected during this PhD have both theoretical and
practical implications for CT research and assessment. From a theoretical perspective, this thesis
shows unexplored similarities among different CT traditions, perspectives, and study methods. These
similarities could be exploited to open up an interdisciplinary dialogue among experts and build up a
shared understanding of CT. Automatic assessment methods can enhance the use of open-ended
measures for CT assessment, especially in online teaching. Indeed, they can support teachers and
researchers to deal with the growing presence of linguistic data produced within educational
4
platforms. To this end, it is pivotal to develop automatic methods for the evaluation of large amounts
of data which would be impossible to analyse manually, providing teachers an
Progettare un corso universitario per supportare la transizione identitaria tra università e mondo del lavoro.
No full textN
OpenVM MOOCs: a design for self-regulated learning. OpenVM MOOC: un diseño para el aprendizaje autorregulado
Full text linkThis paper presents the design of two miniMOOCs(Massive Open Online Courses) developed in the Open Virtual Mobility (VM) MOOC. The OpenVM MOOC is aimed at developing Virtual Mobility skills in higher education students. The design is based on diverse concepts and all the MOOC elements were designed tosupport SRL. From a descriptive and quantitative approach, the research aims to explore participants' satisfaction and their perception on the supporting roles of the miniMOOC for SRL. Data was collected through an online survey through which 375 answers were collected. Results show the general satisfaction of learners with the MOOC design. As for the SRL design gamification and visualization of pathways were more relevant for certain SRL phases such as monitoring learning. OER and related quizzes were useful for all SRL phases. Quizzes especially supported self-reflection. Open Badges supported the forethought phase of SRL. Social elements such as forums and eportfolios obtained the lowest rates in relation to support of SRL. The paper concludes with recommendations for educational research and MOOCs design.Este trabajo presenta el diseño de dos miniMOOCs (Cursos Online Masivos y Abiertos) desarrollados en el MOOC Open Virtual Mobility (VM).Este tiene como objetivo desarrollar las habilidades de Movilidad Virtual en los estudiantes de educación superior. El diseño se basa en varios conceptos y todos los elementos fueron concebidos para apoyar el aprendizaje autorregulado. Desde un enfoque descriptivo y cuantitativo, la investigación pretende explorar la satisfacción de los participantes y su percepción sobre las funciones de apoyo al aprendizaje autorregulado. Los datos se recogieron a través de una encuesta en línea a través de la cual se recogieron 375 respuestas. Los resultados muestran la satisfacción general de los alumnos con el diseño del MOOC. En cuanto al diseño para el aprendizaje autorregulado, la gamificación y la visualización de los itinerarios fueron más relevantes para fases lamonitorización. Los REA y los cuestionarios fueron útiles para todas las fases. Los cuestionarios apoyaron especialmente la autorreflexión. Las Insignias Abiertas apoyaron la fase de planificación. Los elementos sociales como los foros y los portafolios electrónicos obtuvieron los índices más bajos en relación con el apoyo al aprendizaje autorregulado. El artículo concluye con recomendaciones para la investigación educativa y el diseño de MOOCs
Robotica ed economia:linee guida introduttive
No full textLe relazioni tra robotica ed economia costituiscono un affascinante argomento, esso apre un ‘vasto paesaggio scientifico’,
che abbraccia da meccatronica e intelligenza artificiale fino a scienze sociali, arte e cultura. Questa convergenza
è allo stesso tempo un bisogno, una importante sfida per entrambe le aree, e una grande opportunità per migliorare
sistemi sociali e relazioni.Relationships between robotics and economy constitute a fascinating topic, it opens a ‘wide scientific landscape’, that
embrace from mechatronics and artificial intelligence up to social sciences, art and culture. This convergence is, in
the same time, a need, an important challenge for the two areas, and a great opportunity to improve social systems
and relationships
A Prototype for the Automatic Assessment of Critical Thinking
No full textCritical Thinking is a complex construct to define and understand, also due to a variety of definitions in the field. In recent years, different ways to assess Critical Thinking have been developed, based on methods such as natural language processing. The present paper describes a prototype developed for automatic Critical Thinking assessment in the presence of open-ended questions or essays. The prototype is designed to assess four areas related to Critical Thinking in open questions: basic linguistic skills, relevance, importance and novelty. Future development of the prototype will require the inclusion of new indicators, such as argumentation and critical evaluation
Promote social and cultural inclusion through heritage. Innovative experiences at Palazzo Barberini
No full textThis contribution aims at presenting the first results of the educa- tional experiences carried out at Palazzo Barberini as part of the in- terdepartmental project Inclusive Memory, Roma Tre University. The exclusion of many categories of visitors from places of culture, due to economic and social factors, as well as social inequality, affects demo- cratic access to knowledge and skills which are developed through the use of artistic heritage. Gaining access to this cultural treasure increases the levels of well-being in society and therefore should not be an ex- clusive pursuit. The experimental activity we introduce here foresaw the participation of four classes from a Secondary school in the city of Rome. Students were invited to take part in museum teaching modules carried out at the Gallery of Ancient Art - Palazzo Barberini. The edu- cational proposals, developed by the Centre for Museum Studies at the University of Rome Tre, allowed various groups of students to explore cultural heritage instances. Many of the activities were aimed particular- ly at including individuals with physical and mental disabilities and with specific learning difficulties. We encouraged them to visit the selected museum for the first time in order to increase their well-being levels, which we assessed before and after activities, using tools designed for this purpose as outlined in previous research (Thomson & Chatterjee, 2016; Poce & Re, 2019)
Rethinking high-tech tools for cultural heritage education. In-training teachers’ reflections on Musetech web app Ripensare la tecnologia nell’educazione al patrimonio culturale. Riflessioni di futuri insegnanti sulla web app MuseTech
Full text linkMuseTech è un’applicazione web realizzata nell’ambito del Progetto DICHE Erasmus +, che permette agli insegnanti di essere formati sui nuovi metodi per sviluppare capacità comunicative, di collaborazione, di creatività e di pensiero critico (4Cs) attraverso l’educazione al patrimonio culturale e l’uso delle tecnologie. Abbiamo indagato quanto gli insegnanti in formazione siano interessati alle tecnologie web 3.0 proposte nell’app MuseTech, e che tipo di opinioni e aspettative abbiano circa l’uso di tali tecnologie per l’educazione al patrimonio culturale. Gli insegnanti hanno mostrato un grande interesse specialmente per le caratteristiche di: ubiquità, multi-sensorialità e immersività. Autovalutando le proprie competenze, hanno inoltre dichiarato di aver sviluppato le proprie capacità di ricerca e progettazione stimolando al tempo stesso quelle di IT, creatività e pensiero critico. MuseTech ha inoltre fornito agli insegnanti l’opportunità di discutere le proprie idee con i pari e di utilizzare strumenti tecnologici
Promuovere l’inclusione sociale e culturale tramite la fruizione del patrimonio. Percorsi innovativi presso Palazzo Barberini
No full textIl contributo si propone di presentare i primi risultati dei percorsi edu- cativi innovativi realizzati presso Palazzo Barberini all’interno del progetto interdipartimentale dell’Ateneo Roma Tre Inclusive Memory. L’esclusione di numerose categorie di visitatori, a causa di fattori economici e sociali, dai luoghi della cultura, oltre che elemento di disuguaglianza sociale, condiziona l’accesso democratico alle conoscenze e alle competenze facilitate dalla frui- zione del patrimonio artistico e, di conseguenza, l’incremento del benessere comune. L’attività sperimentale qui presentata ha visto la partecipazione di quattro classi di un Istituto Secondario Superiore della città di Roma a per- corsi di didattica museale realizzati presso la Galleria di Arte Antica - Pa- lazzo Barberini. Le proposte educative, realizzate dal Centro di Didattica Museale dell’Università Roma Tre, hanno consentito a gruppi di allievi, ca- ratterizzati da un alto numero di soggetti affetti da disabilità fisica e psi- chica, Disturbi Specifici di Apprendimento e Bisogni Educativi Speciali, di visitare per la prima volta il museo selezionato e di incrementare i propri livelli di benessere misurati, prima e dopo le attività, mediante strumenti predisposti allo scopo in ricerche precedenti (Thomson, Chatterjee, 2016; Poce, Re, 2019)
Collecting information about museum users to provide personalised and inclusive visits: the Inclusive Memory questionnaire and the web app
No full textApplications for customising the experience within museums are becom- ing increasingly popular. Providing visitors with tools to access personalised educational visits could be one of the key strategies to make museums more accessible and inclusive. For these reasons, within the Inclusive Memory proj- ect a user profiling questionnaire has been developed to be delivered through the use of a multifunctional Web App. Before adopting the methodology developed with subjects at risk of social exclusion, we decided to carry out a preliminary validation involving 15 museum educators in training with the dual purpose of verifying the hypothesis that there are associations between the artistic preferences and personal characteristics of museum visitors and to collect feedback from museum education specialists on the use of a Web App for social inclusion purposes. Data were collected through the integrated use of the questionnaire and focus group discussion. Preliminary results revealed a relation among levels of extroversion, artistic preferences and ways of using the museum. Participants evaluated the visit experience and the multimedia supports provided by the Web App in an apparently incostistent way. The reasons for this disagreement and the importance of collecting users’ data in order to provide an effective experience at the museum are discussed below
Raccogliere informazioni sui visitatori per fornire percorsi personalizzati e inclusivi all’interno dei musei: il questionario e la web app Inclusive Memory
No full textLe applicazioni per la personalizzazione dell’esperienza all’interno dei musei diventano sempre più diffuse. Fornire ai visitatori strumenti per ac- cedere a percorsi educativi personalizzati potrebbe rappresentare una delle strategie chiave al fine di rendere i musei dei luoghi accessibili e inclusivi. Per tali ragioni, all’interno del progetto Inclusive Memory si è realizzato un questionario per la profilazione degli utenti da erogare attraverso l’utilizzo di una Web App multifunzionale. Prima di adottare la metodologia svilup- pata con soggetti a rischio di emarginazione sociale, si è deciso di svolgere una validazione preliminare coinvolgendo 15 educatori museali in forma- zione con la duplice finalità di verificare l’ipotesi secondo cui esistono delle associazioni tra preferenze artistiche e caratteristiche personali dei visitatori dei musei e di raccogliere feedback di specialisti dell’educazione museale in merito all’utilizzo della Web App a scopi di inclusione sociale. I dati sono stati raccolti attraverso l’uso integrato del questionario e Focus Group Discussion. Dai preliminari risultati è emersa un’associazione tra livelli di estro- versione, preferenze artistiche e modalità di fruizione del museo. I parteci- panti hanno valutato in maniera contrastante l’esperienza di visita e i sup- porti multimediali forniti della Web App. Si discutono di seguito le ragioni di tale discordanza e l’importanza di raccogliere dati sugli utenti ai fini di fornire la migliore esperienza all’interno del museo
- …
