След войната му беше трудно да се приспособи към мирновременния живот. Както се казва в песента „Той не можеше да понася да бъде сред хора, така че се премести сам в Кентъки. Той прекарваше почти всеки буден час в малка лодка на езеро. През лятото лови риба цяла нощ, когато можеше да види собствената си стръв "
В крайна сметка, след като прекара години в скитане от щат на щат, синът на Уилсън го проследи и го върна у дома в Алабама.