Safe Exploration Method for Reinforcement Learning under Existence of Disturbance

Recent rapid developments in reinforcement learning algorithms have been giving us novel possibilities in many fields. However, due to their exploring property, we have to take the risk into consideration when we apply those algorithms to safety-critical problems especially in real environments. In this study, we deal with a safe exploration problem in reinforcement learning under the existence of disturbance. We define the safety during learning as satisfaction of the constraint conditions explicitly defined in terms of the state and propose a safe exploration method that uses partial prior knowledge of a controlled object and disturbance. The proposed method assures the satisfaction of the explicit state constraints with a pre-specified probability even if the controlled object is exposed to a stochastic disturbance following a normal distribution. As theoretical results, we introduce sufficient conditions to construct conservative inputs not containing an exploring aspect used in the proposed method and prove that the safety in the above explained sense is guaranteed with the proposed method. Furthermore, we illustrate the validity and effectiveness of the proposed method through numerical simulations of an inverted pendulum and a four-bar parallel link robot manipulator.Comment: Accepted to the European Conference on Machine Learning and Principles and Practice of Knowledge Discovery in Databases (ECMLPKDD) 202

Programa de cálculo para la velocidad de envejecimiento de los transformadores convencionales en el sector de distribución típico 1, Miraflores

El transformador es la parte más importante de un sistema eléctrico de media tensión. Este trabajo está centrado en mostrar la velocidad de cómo se va desgastando o deteriorando el aislamiento en un transformador embebido en aceite, a través de datos obtenidos de manera matemática o con parámetros normados bajo la norma vigente como la temperatura, el nivel de aceite, el ambiente o lugar en donde se encuentra instalado la subestación y la demanda del trabajo de la máquina causado por el aumento de carga generado por el ingreso de clientes nuevos o aumentos de potencia contratados por los usuarios finales. Se seleccionó el distrito de Miraflores debido a que existen transformadores convencionales que se encuentran sobrecargados o con una potencia superior a su capacidad, debido a diversos factores, como la presencia de humedad, factores químicos y principalmente por una alta demanda de potencia generada por usuarios antiguos y nuevos. Se explicará a manera de aplicación con un transformador del distrito indicado, y se ingresaran los datos necesarios en la plantilla de cálculo para obtener como resultado la velocidad en la cual el aislamiento de la maquina empezaría a desgastarse y generar la pérdida de vida útil en el transformador

Level of knowledge of vascular accesses in arteriovenous fistulas and self-care practices of hemodialized patients at a Private Clinic in Lima, 2023

Objetivo: Identificar la relación entre el nivel de conocimientos de los accesos vasculares en fistulas arteriovenosas y las prácticas de autocuidado de pacientes hemodializados de una clínica privada de Lima. Metodología: El tipo de investigación será aplicada, el enfoque cuantitativo, y el diseño no experimental, observacional, y de nivel correlacional, en cuanto al corte será transversal. Población y Muestra: La población corresponderá a 60 pacientes, la que será establecida por conveniencia de la investigadora a través del muestreo no probabilístico. Técnica e Instrumentos: Las técnicas a emplearse corresponderán a la encuesta y la observación, los instrumentos a utilizarse serán a 01 cuestionario y 01 lista de chequeo para valorar las variables conocimiento de la fistula arteriovenosa, y practica del autocuidado de la fistula arteriovenosa de pacientes en hemodiálisis. Se precisa que estos disponen de una confiabilidad de Alfa de Cronbach con valores equivalentes a 0,98 y 0,85 respectivamente. Procesamiento y análisis de datos: La información relevada se tratará en una plantilla excel para el control y clasificación correspondiente, y se establecerá el tipo de relación que existe entre las variables evaluadas en la exploración, aplicándose la denominada estadística inferencial no paramétrica por intermedio de la prueba de Chi Cuadrado