Statt Dir eine Anleitung selbst zu schreiben,
verlinke ich Dich mal auf
winfaq und
windowspage.
Es gibt aber, soweit ich mich erinnere,
in den Einstellungen des IE auch ein einfaches Hakerl,
das sich auf Offline-Ordner bezieht,
wenn Du nicht in die Registry willst.