Manolić je u javnosti smatran kontroverznom ličnošću s obzirom na to da mu se predbacuje njegovo djelovanje u Udbi, među kojima se ponajviše ističu optužbe za smrt nadbiskupa Alojzija Stepinca.
Manolić je bio među ključnim akterima u razdoblju kad se stvarala hrvatska država, a u kasnijim godinama života postao je dio meme kulture mlađih generacija.
Njegov život promijenio je trenutak kad je pratio kardinala Alojzija Stepinca prilikom njegova odlaska u zatvor u Lepoglavi, zbog čega su mnogi vjerovali da je on taj koji je kriv za njegovu smrt.
Jedan od odnosa koji će obilježiti Manolićev život je s prvim predsjednikom Republike Hrvatske Franjom Tuđmanom.Manolić će biti jedan od suosnivača HDZ-a
Manolić se tijekom života dva puta ženio i obje svoje supruge je nadživio. Njegovo vjenčanje s drugom suprugom Mirjanom kad je imao 97 godina izazvalo je veliku pozornost javnost. Imao je tri kćeri iz prvog braka.
