Como obtener la fecha de días atras

En un programa que estoy haciendo, necesito que el datetimepicker tenga una
fecha limite de X días atras, entonces escribi el siguiente codigo,

DateTimePicker1.MinDate = (CInt(Now.Day) - 5).ToString & "/" &
Now.Month.ToString & "/" & Now.Year.ToString

y funciona, excepto los primeros días del mes, y justo ahora detecte el
problema, alguna idea de como obtener el mismo resultado sin importar la
fecha,?? Lo que ahora estoy haciendo es hacer una clase que me detecte eso,
pero... estoy un poco atorado, porque es hay meses de 30 31 y por si fuera
poco, hay de 28 y a veces 29. Primero lo intente con datediff, pero se
necesitan dos fechas como referencia y no encontre la forma.