Kaj Norrby växte upp i en stor prästfamilj som hade sommarställe på Blidö. Han utbildade sig till läkare och var under många år distriktsläkare i Svenstavik i Jämtland. Under alla år var han Blidö trogen sommartid, och resorna dit företog han helst med s/s Blidösund.

Kaj gav ut en bok på förlaget Tyngdpunkten. Boken heter ”Gigan, En läkares väg till sig själv”, och skildrar Kajs liv från barndomen i efterkrigstidens Sverige fram till vuxenlivet. I denna bok finns även fin skildring av en resa med s/s Blidösund.