Enligt vittnen på plats ska någon vid 14-tiden ha sett hur en kropp flöt i vallgraven vid slottet.
Vadstena deltidsbrandkår var på plats cirka fem minuter senare och ytlivräddare kunde bärga den livlösa kroppen upp på land.
Polis och ambulans larmades också till platsen.
Enligt polisen är det en man i 70-årsåldern som avlidit. Mannens anhöriga är underrättade. Det är oklart hur länge kroppen legat i vattnet, men polisen misstänker inget brott.