Jan Adriaan Joost Sloet, Heer van Diepenbroeck, Kerssenberg, Oye