trzykrotnie żonaty: 1. Mary Adelaide Barron (07.09.1925 - 11.06.1934, rozwód), 3 synów: Conrad Jr. (ur. 06.07.1926), Barron (ur. 23.10.1927) i Eric Michael (ur. 1932); 2. Zsa Zsa Gabor (10.04.1942 - 28.10.1947, rozwód), córka Francesca (ur. 10.03.1947); 3. Frances Hilton (od 21.12.1976 do jego śmierci)