Родилась в семье учителя-католика, её мать, работавшая врачом, была еврейкой. Так как семья матери была ассимилированной, дети первоначально воспитывались католиками. Родители вскоре развелись, и Ильзе с сестрой-близнецом остались с матерью. Детство провела в Линце и Вене, где её семья подвергалась преследованиям с 1933 года.
В 1945 году начала изучать медицину, одновременно занявшись писательской деятельностью; в 1948 году завершила обучение, опубликовав в том же году свой второй роман.
В 1953 году вышла замуж за поэта Гюнтера Айха. Её сестра-близнец Хельга — также стала литератором (её дочь — британская художница Рут Рикс, род. 1942).