Ida Harms er født Lawaetz Arhnung og voksede op på Fuglsang på Lolland. Hun har gået på Niels Brocks Handelsskole og blev uddannet socialrådgiver. I 1962 blev hun gift med Claus Harms, senere Holmens provst. I familiens første år i præstegården i Lille Heddinge på Stevns engagerede Ida Harms sig i kommunalpolitik og folkeoplysningsarbejde. Efter at familien flyttede til København, var hun blandt andet leder af kredsen, der afholdt de månedlige møder i Holmens Kirke, og hun var en drivende kraft i at genetablere og forestå den årlige basar i Helligåndshuset til fordel for Dansk Sømandskirke, et arbejde, der blev støttet af dronning Ingrid. Fra før skoletiden har kunst og litteratur haft Ida Harms’ store interesse, og hun har udfoldet sit eget talent i maleri, blomsterbinding og stilfuld indretning af familiens skiftende hjem. Først i de senere år er hun begyndt at indskrænke den store blomster- og køkkenhave på familieejendommen Fuglekvidder ved Fuglsang på Lolland.