Wahrscheinlich ist der sächsische Siedler Woltimar von Liestmunde, der sich laut einer Urkunde von 1083 auf dem Werder links der Weser angesiedelt hat, der Namensgeber von Woltmershausen. Im Volksmund wird Woltmershausen auch Pusdorf genannt, evtl. eine Anspielung auf den Wind, der hier immer weht. Zum Stadtteil Woltmershausen gehören die Ortsteile Rablinghausen und Woltmershausen.