Die ungarische Gräfin Irma wurde als Tochter von Graf Viktor Stáray de Sztára et Nagymihály (1823-1879) und Gräfin Mária Török de Szendrõ (1835-1916) geboren. Sie heiratete nie, da sie ihr ganzes Leben der Kaiserin und dem Hof widmete. Sie begleitete Elisabeth während ihrer letzten vier Jahre, von 1894 bis 1898, auf ihren Reisen nach Ungarn, Italien, der Schweiz, Algerien und Griechenland. Ihre Memoiren "Aus den letzten Jahren der Kaiserin Elisabeth", die sie viele Jahre nach dem Tod von Kaiserin Elisabeth schrieb, und die auf Briefen beruhen, die sie während ihrer Reisen an ihre Mutter schrieb, sind eine wertvolle Quelle, die detaillierte Einblicke in Sissis letzte Jahre gibt. Für ihre Verdienste erhielt Irma Sztáray gleich nach der Ermordung Elisabeths von Kaiser Franz Joseph I. die Ehrenmedaille.