Viņa piedzima Liepājā Jāņa un Kristīnes Šleseru ģimenē, kurā bija 4 meitas un dēls. Agrās bemības dienas pavada Rīgā. Tēvs ir nodarbināts Krievijas flotē. Darbs ģimeni noved Arhangeļskā, Krievijas tālajos ziemeļos. Bērniem tā ir reta iespēja iepazīties ar to, ko šī vide piedāvā un viņi visi to izmanto un ir laimīgi. Nākamā tēva komandējuma vieta ir Kopenhāgena, Dānijā, kur Irma sāk savu pirmo izglītību St. Petri meiteņu skolā. I pasaules kara beigās Šleseru ģimene atgriežas Liepājā, jo tur piestāj tēva kuģi (Baltic-American Lines) . Irma un māsas tiek dēvētas par "dānietēm".

Viņa beidz Liepājas 4. pamatskolu, tad 1. ģimnāziju latiņu valodas klasē. Studijas Latvijas Universitātē uzsāk dabas zinību un matemātikas fakultātē. 1932. gadā iegūst maģistres grādu matemātikā. Studijas beidzot, Irma saderinājās un apprecas ar klases biedru Alfrēdu Valdmani, kuru Valsts prezidents Kārlis Ulmanis iecēla par Latvijas finansu ministru. Tā Irmai sākas gan krāšņa, gan arī vētraina dzīve. Gadiem paejot, piedzimst meita un divi dēli. Viņa audzināja arī dēlu, ko saņēma no vecākās māsas, ko izsūtīja uz Sibīriju.

II pasaules kara laikā Irma ar ģimeni nonāk bēgļu nometnē Hessenes apgabalā. No turienes pārceļas uz Otavu, Kanādā, kur vīram ir darbs. Kad viru Alfrēdu ieceļ par Ņufaundlendas premjera Smolvuda (Smallwood) padomdevēju, ģimene pārceļas uz dzīvi Montrealā, kur iegādājas plašu māju Vestmontā (Westmount). Tā kļūst par Montrealas latviešu sabiedrības pieturas punktu piecdesmito gadu sākumā. Viņa darbojas ev.-lut. draudzē un Montrealas latviešu biedrībā. Tad apstākļi mainās un Irma pārceļas uz Notre Dame de Gras (NDG) rajonu, kur nākamos vairākus desmit gadus galvenokārt nodarbojas ar augošo lielģimeni, to pulcinot un palīdzot mazbērniem ar latīņvalodu un matemātiku.

Pēdējos 5 dzīves gadus pavada aprūpes namā, kur viņa bija iemīļota iemītniece. Pēc ilgstošas slimošanas Irma Valdmane aiziet mūžībā 1999. gada 10. augustā. Irmu Valdmani raksturoja viņas mīlestība un nodošanās ģimenei, īpaši bērniem. Savā ticībā viņa atrada dzīvē pozitīvas lietas. Viņa bija apdāvināta ar pacietību un īpašām dotībām matemātikā. Pēdējā gaitā Annu Irmu Valdmani izvadīja māc. R. Caune no Mount Royal krematorijas. Viņu guldīja kapsētā, kur jau atdusas viņas nelaiķis vīrs. Pavadītāju saimē bija ģimenes pulks un draugi, kas atceras agrākos laikus Montrealā. Atvadu vārdus teica viņas dēli un mazdēls Dags.