1,720,952 research outputs found

    Interactive Learning with Corrective Feedback for Policies Based on Deep Neural Networks

    No full text
    Deep Reinforcement Learning (DRL) has become a powerful strategy to solve complex decision making problems based on Deep Neural Networks (DNNs). However, it is highly data demanding, so unfeasible in physical systems for most applications. In this work, we approach an alternative Interactive Machine Learning (IML) strategy for training DNN policies based on human corrective feedback, with a method called Deep COACH (D-COACH). This approach not only takes advantage of the knowledge and insights of human teachers as well as the power of DNNs, but also has no need of a reward function (which sometimes implies the need of external perception for computing rewards). We combine Deep Learning with the COrrective Advice Communicated by Humans (COACH) framework, in which non-expert humans shape policies by correcting the agent’s actions during execution. The D-COACH framework has the potential to solve complex problems without much data or time required. Experimental results validated the efficiency of the framework in three different problems (two simulated, one with a real robot), with state spaces of low and high dimensions, showing the capacity to successfully learn policies for continuous action spaces like in the Car Racing and Cart-Pole problems faster than with DRL.Green Open Access added to TU Delft Institutional Repository 'You share, we take care!' - Taverne project https://www.openaccess.nl/en/you-share-we-take-care Otherwise as indicated in the copyright section: the publisher is the copyright holder of this work and the author uses the Dutch legislation to make this work public.Learning & Autonomous Contro

    Decentralized Reinforcement Learning of robot behaviors

    Full text link
    A multi-agent methodology is proposed for Decentralized Reinforcement Learning (DRL) of individual behaviors in problems where multi-dimensional action spaces are involved. When using this methodology, sub-tasks are learned in parallel by individual agents working toward a common goal. In addition to proposing this methodology, three specific multi agent DRL approaches are considered: DRL-Independent, DRL Cooperative-Adaptive (CA), and DRL-Lenient. These approaches are validated and analyzed with an extensive empirical study using four different problems: 3D Mountain Car, SCARA Real-Time Trajectory Generation, Ball-Dribbling in humanoid soccer robotics, and Ball-Pushing using differential drive robots. The experimental validation provides evidence that DRL implementations show better performances and faster learning times than their centralized counterparts, while using less computational resources. DRL-Lenient and DRL-CA algorithms achieve the best final performances for the four tested problems, outperforming their DRL-Independent counterparts. Furthermore, the benefits of the DRL-Lenient and DRL-CA are more noticeable when the problem complexity increases and the centralized scheme becomes intractable given the available computational resources and training time.Accepted Author ManuscriptLearning & Autonomous Contro

    Continuous control for high-dimensional state spaces: An interactive learning approach

    No full text
    Deep Reinforcement Learning (DRL) has become a powerful methodology to solve complex decision-making problems. However, DRL has several limitations when used in real-world problems (e.g., robotics applications). For instance, long training times are required and cannot be accelerated in contrast to simulated environments, and reward functions may be hard to specify/model and/or to compute. Moreover, the transfer of policies learned in a simulator to the real-world has limitations (reality gap). On the other hand, machine learning methods that rely on the transfer of human knowledge to an agent have shown to be time efficient for obtaining well performing policies and do not require a reward function. In this context, we analyze the use of human corrective feedback during task execution to learn policies with high-dimensional state spaces, by using the D-COACH framework, and we propose new variants of this framework. D-COACH is a Deep Learning based extension of COACH (COrrective Advice Communicated by Humans), where humans are able to shape policies through corrective advice. The enhanced version of DCOACH, which is proposed in this paper, largely reduces the time and effort of a human for training a policy. Experimental results validate the efficiency of the D-COACH framework in three different problems (simulated and with real robots), and show that its enhanced version reduces the human training effort considerably, and makes it feasible to learn policies within periods of time in which a DRL agent do not reach any improvement.Green Open Access added to TU Delft Institutional Repository 'You share, we take care!' - Taverne project https://www.openaccess.nl/en/you-share-we-take-care Otherwise as indicated in the copyright section: the publisher is the copyright holder of this work and the author uses the Dutch legislation to make this work public.Learning & Autonomous Contro

    The construction of opinion in Javier Marías: rhetorical-argumentative analysis of the columns published by the author between 2009 and 2013

    Full text link
    El presente artículo tiene como objeto de estudio las columnas escritas por Javier Marías, entre los años 2009 y 2013, en el espacio semanal La Zona Fantasma, ubicado en la última página de El País Semanal, suplemento dominical del diario El País. Para el estudio se ha recurrido a un análisis de contenido, a partir de la retórica aristotélica y su posterior renovación por Charles Perelman y Lucie Olbrechts Tyteca, expuesta en su Tratado de la argumentación. La metodología seguida ha permitido identificar las particularidades y características en cuanto a temas, enfoque, estructura y lenguaje que el autor utiliza. Cuantitativamente, se identificaron los temas, los argumentos, el léxico y las figuras literarias de cada columna, y cualitativamente, las temáticas, la construcción del Ethos del autor y la interpretación de los resultados, a la luz del contexto que enmarca los años en los que se escriben las columnasThis article has as object of study the columns written by Javier Marías between the years 2009 and 2013 in the weekly space “La Zona Fantasma”, located in the last page of El País Semanal, a Sunday supplement in the News Paper El País. For study purposes we have used an analysis of content based on the Aristotelian Rhetoric and its posterior renovation by Charles Perelman and Lucie Olbrechts-Tyteca, exposed in their Treaty of Argumentation. The methodology followed allowed to identify the particularities and characteristics in relation to topics, approach, structure and language the author uses. The qualitative contribution consisted of the conclusions about the data obtained. This analysis focuses on the reflection around the topics, the construction of the author´s Ethos and the interpretation of the results due to the context that frames eventually, the years the column is writte

    Museo Nacional del Virreinato: Estado de México

    No full text
    La información de esta miniguía se basa en las obra s Tepotzotlán, la vida y obra en la Nueva España y Pintura novohispana, Museo Nacional del Virreinato, Tepotzotlán. Los planos fueron realizados por lvonne Arámbula.Abierto al público en 1 964, el museo se aloja en el edificio de la época virreinal qué albergó los colegios jesuitas de San Martín y San Francisco Javier. Se levanta en un terreno de más de 60 OOO m2, conserva de aquella época las dependencias que usó la comunidad, construidas y decoradas entre 1604 y 1767. Asimismo, exhibe obras novohispanas de gran valor artístico e histórico procedentes en su mayor parte del que fuera el Museo de Arte Religioso de la Catedral de México. El museo cumple así un doble objetivo: mostrar la historia de su importante sede e ilustrar los tres siglos del México virreinal</p

    Trabajo de Campo: Experiencias para entretejer la antropología. 4 Segunda época, Año 2 (2018) julio-diciembre. Rutas de Campo

    No full text
    - Introducción. Trabajo de campo: experiencias para entretejer la antropología por Francisco Javier Guerrero y Cristina V. Masferrer León. - Trabajo de campo etnográfico en la tradición nacional: población y territorio por Eduardo González Muñiz. - Los antropólogos aprendices de brujos por Francisco Javier Guerrero. - Compartiendo la diferencia. Una vida en el campo por Elio Masferrer Kan. - Mi experiencia en el trabajo de campo. Una retrospectiva biográfica por Milton Gabriel Hernández García. - Apuntes reflexivos de una etnografía multisituada en México, Perú y Japón por Dahil Mariana Melgar Tísoc. - ¿Cómo se vive el trabajo de campo en una comunidad indígena siendo mujer? por Verónica Ruiz Lagier. - Cuando la antropología hace enfermar de susto y otras experiencias de trabajo de campo en la Costa Chica: violencia, ser mujer antropóloga y racismo por Cristina V. Masferrer León. - Notas etnográficas sobre el racismo: una perspectiva reflexiva por Citlali Quecha Reyna. - La conmemoración de Ashura en Teherán. Apuntes sobre una etnografía exprés por Alejandra Gómez Colorado. - Los nahuas de La Resurrección, Puebla. Notas y vivencias etnográficas acerca del despojo de sus tierras por Eliana Acosta Márquez. - Primera experiencia de campo México-Canadá por Rosa María Vanegas García. - El trabajo de campo en arqueología: una reflexión personal desde la filosofía de la ciencia por Manuel Gándara Vázquez

    La Tumba 5 del Cerro de La Campana, Suchilquitongo, Oaxaca, México: un análisis epigráfico. 8. Arqueología

    No full text
    Balsalobre, Gonzalo de 1892 Relación auténtica de las idolatrías, supersticiones, vanas observaciones los Indios del Obispado de Oaxaca. Reimpresión de la edición de 1656, Anales del Museo Nacional. Primera parte, tomo VI, México. Caso, Alfonso 1928 Las estelas zapotecas. Monografías del Museo Nacional de Arqueología, Historia y Etnografía. Talleres Gráficos de la Nación, México. 1965 "Zapotec Writing and Calendar". En: Handbook of Middle American Indians, vol. 3: 931-947 University of Texas Press, Austin. Caso, Alfonso e Ignacio Bernal 1952 Umas de Oaxaca. (Memorias del Instituto Nacional de Antropología e Historia no. Il.) México. Romero, Javier 1970 "Mutilation, Cranial Deformation, and Trephination". Handbook of Middle American Indians, vol IV: University of Texas Press, Austin. Smith, Mary Elizabeth 1973 Picture Writing from Ancient Southern Mexico. Mixtepec Place Signs and Maps. University of Oklahoma Press, Norman. Urcid, Javier 1983 The Tombs and Burials from Lambityeco: A Prehispanic Community in the Valley of Oaxaca, Mexico. Tesis de maestría inédita. Universidad de las Américas, Cholula, México. 1987 "La Tumba 172 de Monte Albán. Un caso-estudio de las prácticas mortuorias zapotecas durante las épocas Monte Albán llla y llb." Manuscrito inédito. 1989 Notas sobre Epigrafía e Iconografía en el Templo 7 Venado de Monte Albán, Oaxaca, México, Informe inédito de las temporadas de investigación epigráfica en Oaxaca (1987-89) presentado al consejo de Arqueología del INAH, México. s.f. Zapotec Hieroglyphic Writing. Tesis doctoral en preparación Whitecotton, Joseph 1982 "Towards a Zapotec Ethnohistory". Papers in Anthropology, vol. 23 (2): 285-343. University of Oklahoma Press, Norman

    . 48 Tomo XIX (1966) Sexta Época (1939-1966). Anales del Instituto Nacional de Antropología e Historia

    No full text
    Publicación que recopila y difunde cien años de trabajo de la antropología en México (1877-1977), integrada por documentos y manuscritos arqueológicos, antropológicos, históricos, geológicos, botánicos y lingüísticos.- Información general de las actividades del Instituto Nacional de Antropología e Historia durante el año 1966 por Javier Romero. - La cerámica Posclásica de Tuxtla Gutiérrez, Chiapas por Carlos Navarrete. - El Chichán Chob y la Casa del Venado, Chichén Itzá, Yucatán por William J. Folan. - El material osteológico de Chiapa de Corzo, Chis. por María Teresa Jaén Esquivel. - De la biotipología a la psicobiología por Javier Romero. - Algunas cuestiones acerca de la edad biológica del esqueleto humano por Boris A. Nikityuk. - Posibles relaciones externas del grupo lingüístico maya por Evangelina Arana Osnaya. - Los intensivos en Tarahumar por Andrés Lionnet. - Términos de parentesco entre los tzeltales por Carlos Robles Uribe. - Términos de parentesco entre los lacandones por Roberto D. Bruce S. - La adopción de voces españolas en aymará por M. Roudny y V. Solc. - El dios Huitzilopochtli en la peregrinación mexica. De Aztlán a Tula por Yólotl González de Lesur. - From parallel-nominal to patrinominal: changing Cuicatec personal names por Robert J. Weitlaner, Robert Hunt y Eva Hunt. - La asistencia hospitalaria para indios en la Nueva España por Carmen Venegas Ramírez. - Le retención por deudas y los traslados de trabajadores tlaquehuales o alquilados en las haciendas, como sustitución de los repartimentos de indios durante el siglo XVIII por Isabel González Sánchez. - El caudillo insurgente Albino García por Josefina González de Arellano. - Índice bibliográfico de libros norteamericanos sobre la Revolución Mexicana por Eugenia W. Meyer

    . 11 Año 4 (1997) septiembre-diciembre. Dimensión Antropológica

    No full text
    - Minería y población, Real del Monte, 1791-1865 por Eduardo Flores Clair. - Presencia de tres extranjeros en la hacienda mexicana del siglo XIX por María del Carmen Reyna. - Intercambios festivos entre los huicholes de San Andrés Cohamiata por Ingrid Geist. - Términos de colores en el náhuatl de Cuetzalan: un enfoque etnocientífico por Mario Alberto Castillo Hernández. - Procesos de flexibilización en dos industrias mexicanas por Carmen Bueno Castellanos. - ¿Constituye la oración un dato original, o es el origen de una clase de datos? por Celia María Zamudio Mesa. - Pilar Máynez Vidal, Fray Diego Durán, una interpretación de la cosmovisión mexica México, UNAM- Escuela Nacional de Estudios Profesionales-Acatlán, 1997, 363 pp. por Ascención Hernández de León Portilla. - Juan Javier Pescador, De bautizados a fieles difuntos, Familia y mentalidades en una parroquia urbana: Santa Catarina de México, 1568-1820, México, El Colegio de México, Centro de Estudios Demográficos y de Desarrollo Urbano, 1992, 400 pp. por Gilda Cubillo Moreno. - Blas Román Castellón Huerta, Análisis estructural del ciclo de Quetzalcóatl. Una aproximación a la lógica del mito en el México antiguo México, INAH (Biblioteca del INAH), 1997, 269 pp., ils. y cuadros por Jesús Monjarás-Ruiz

    Radar Sensing in Healthcare: Challenges and Achievements in Human Activity Classification &amp; Vital Signs Monitoring

    No full text
    Driven by its contactless sensing capabilities and the lack of optical images being recorded, radar technology has been recently investigated in the context of human healthcare. This includes a broad range of applications, such as human activity classification, fall detection, gait and mobility analysis, and monitoring of vital signs such as respiration and heartbeat. In this paper, a review of notable achievements in these areas and open research challenges is provided, showing the potential of radar sensing for human healthcare and assisted living.Green Open Access added to TU Delft Institutional Repository ‘You share, we take care!’ – Taverne project https://www.openaccess.nl/en/you-share-we-take-care Otherwise as indicated in the copyright section: the publisher is the copyright holder of this work and the author uses the Dutch legislation to make this work public.Microwave Sensing, Signals & System
    corecore