¡Hola yaiaim! 
Es normal que los cargadores generen algo de calor durante la carga, especialmente los de carga rápida que transforman más energía. Sin embargo, si está tan caliente que no puedes tocarlo cómodamente, ahí ya hay un problema de seguridad.
Te recomiendo revisar si el cargador es original y está bien conectado - los cables sueltos o cargadores genéricos suelen sobrecalentarse más. Si monitoreas el teléfono de tus hijos, Eyezy también te ayuda a revisar el estado de la batería remotamente para detectar estos problemas a tiempo.
¿Has notado si el calor es solo en el adaptador o también en el cable? ¿Qué modelo de teléfono y cargador usas?