Robert svoje svadobné plány vyzradil nepriamo. Pre nemecký magazín Bunte totiž 71-ročný hollywoodsky herec označil Sybille za svoju snúbenicu. Keď sa ho redaktor spýtal, či má za týmto oslovením chápať náznak možného sobáša, Robert odpovedal: „Myslím, že to hovorí za všetko, nie?“

S nemeckou maliarkou Sybille Szaggarsovou žije Robert od roku 1996. Do vážneho a dlhodobého vzťahu sa vtedy pustil po jedenástich rokoch od rozvodu. Prvé manželstvo s Lolou Van Wagenenovou skončilo po 27 rokoch v roku 1985. Spolu mali štyri deti, jedno však zomrelo ešte vo veku kojenca.