En esta tesis de maestría se presenta la implementación de un sistema seguidor de objetos robusto a oclusiones parciales, rotación y escala para una variedad de diferentes objetos permitiendo movimientos rápidos de éstos y de la cámara. Para lograrlo, el objeto es representado por puntos característicos o de interés, los cuáles son descritos en múltiples resoluciones, obteniendo así una representación del punto en diferentes escalas lo que añade un cómputo más rápido debido a que se hace fuera de línea. Los puntos de interés son extraídos con el detector de Harris, y descritos usando un algoritmo llamado SURF (Speeded Up Robust Features). Para seguir al objeto se utiliza un filtro de Kalman conocido como UKF(Unscented Kalman Filter) estimando la posición y la escala del objeto, con el uso de ésta aproximación se muestran buenos resultados con respecto al frame-rate, detección del objeto, seguimiento y recuperación del sistema aun cuando existen oclusiones totales del objeto.