In 1966 trouwde Harrison met een model, Pattie Boyd, maar zij scheidden in 1971, en kregen geen kinderen. Boyd verliet Harrison om bij zijn vriend, gitarist Eric Clapton, te gaan wonen, maar alle drie bleven vrienden. Harrison trouwde opnieuw in 1978, met de in Amerika geboren Olivia Trinidad Arias, die voor zijn platenmaatschappij had gewerkt. Arias werd de moeder van Harrison's zoon Dhani, wiens naam is samengesteld uit de namen van twee noten in de Indiase muziekschaal. Dhani groeide op als muzikant, net als zijn vader, en was voorman van de band Thenewno2. Hij ging naar Brown University in de Verenigde Staten.
Eind jaren 1970 richtte Harrison een filmproductiemaatschappij op, Handmade Films, die films produceerde waaronder Monty Python's Life of Brian en Terry Gilliam's Time Bandits.
Het terrein van Harrison's huis, Friar Park, was min of meer opengesteld voor het publiek, tot de moord op zijn vroegere bandmaat John Lennon eind 1980. Harrison was erg gekwetst en geschokt door Lennons dood, en was bang dat iemand zou proberen hem of zijn familie iets aan te doen. Nadien werden de poorten vergrendeld en werden er verboden toegang-berichten geplaatst. In december 1999 brak een indringer in zijn huis in en stak hem met een mes. Harrison en zijn vrouw Olivia hielden de indringer tegen en belden de politie. Harrison herstelde. De man die hem aanviel is schizofreen en werd in november 2000 in Oxford Crown Court vrijgesproken van poging tot moord wegens krankzinnigheid. Hij werd naar een psychiatrisch ziekenhuis gestuurd en in 2002 vrijgelaten.