Первый брак и подозрительные отношения
Вскоре после своего большого прорыва Грант впервые женился. В 1934 году он тайно обвенчался с актрисой Вирджинией Черрил. Пара прожила в браке всего семь месяцев. С начала 1930-х до конца 1940-х годов Грант открыто жил с актёром Рэндольфом Скоттом в доме на набережной который они прозвали «Холостяцким залом». На протяжении многих лет такой образ жизни вызывал у многих вопросы о сексуальной ориентации Гранта.
Это был не единственный случай, когда образ жизни Гранта вызывал вопросы. В течение многих лет после переезда в Нью-Йорк он жил с дизайнером костюмов, который открыто заявлял о своей гомосексуальности Орри-Келли, пока они не поссорились.