Brauchst Du auch einen DHCP oder ist alles statisch?
Normalerweise sollte bei staischer Konfiguration alles ohne irgendwelche Zusätze funktionieren, auf allen Rechnern muss nur der Browserdienst laufen.
Wenn das dann doch nicht funktionieren sollte, kannst du bei wenigen Computern bei jedem das Pärchen aus IP-Adresse und Namen in die "hosts"-Datei unter "C:\WINXP\system32\drivers\etc" (da merkt man wieder ein wenig von den Unix-Wurzeln von NT) eintragen.
Wenn Du dann wirklich einen lokalen DNS betreiben willst, dann kannst du z.B. einen Windows-DNS wie
http://www.simpledns.com/ aufsetzen.
Du musst dann allerdings auf allen Rechnern diesen DNS und den DNS des Internetproviders angeben, damit diese Adressen im iNet finden. Halte ich aber in einem kleinen Hemnetzwerk für keine gute Idee.