W 1903 r. żeni się z Aleksandrą Salą, w 1906 r. rodzi mu się syn Eryk. W roku 1922 wraz z żoną Aleksandrą i synem osiedlił się w majątku Gorzuchowo gdzie mieszkał do wybuchu II wojny światowej.
Zawsze cieszył się opinią patrioty i dobrego sąsiada. Często przebywali tu członkowie Związku Hallerczyków. Organizował dożynki, patriotyczne spotkania.
Polityk prawicowy, legionista. Generał broni Wojska Polskiego. Studiował w Wojskowej Akademii Technicznej w Wiedniu. Służył w armii austriackiej. Dowódca II Brygady Legionów podczas I wojny światowej. Po wojnie utworzył we Francji tzw. Błękitną Armię, na czele której objął w imieniu Polski Pomorze Gdańskie w 1920 r. Dowodził armią ochotniczą w czasie wojny polsko-bolszewickiej. Brał udział w walkach, w „Cudzie nad Wisłą”, gdzie odegrał znaczącą rolę w pokonaniu wroga. Poseł na sejm w latach 1920-27. Krytykował Józefa Piłsudskiego, a także Narutowicza po objęciu przez niego urzędu prezydenta. Został przeniesiony w stan spoczynku po przewrocie majowym w 1926 r. Współtwórca powstałego w 1937 Stronnictwa Pracy. Minister oświaty w rządzie Władysława Sikorskiego w latach 1940-43.
Miejscowości na trasie
Sarnowo
Wieś została założona przez Krzyżaków na początku XIII w. pod nazwą Szarno. Miejscowość należała do komturii starogrodzkiej. Po wojnie trzynastoletniej stała się królewszczyzną, a na początku XVI w. przeszła w ręce biskupów chełmińskich.
We wsi gotycki kościół z przełomu XIII/XIV w. Świątynia jest zbudowana z granitowych kamieni i w górnych partiach z cegły. Podczas wojen szwedzkich w XVII w. została uszkodzona, a jej naprawę zakończono około 1881 r. W końcu XIX w. od południowej strony do nawy dobudowano grobową kaplicę rodziny Działowskich w stylu neogotyckim, a od strony północnej po pożarze w 1938 r. dostawiono kaplicę p.w. św. Ojca Pio i zakrystię. Obecnie kościół funkcjonuje p.w. św. Marcina Biskupa z Tours. We wnętrzu wisi wotywna lampa ozdobiona trzema srebrnymi orłami podarowana przez gen. Józefa Hallera (wspomógł również fundusz budowy marmurowych ołtarzy bocznych). W kruchcie tablica poświęcona generałowi, który tu właśnie na placu przykościelnym co roku 3 maja odbierał wartę honorową.
Góra św. Jana
Przy drodze polnej z Gorzuchowa do kościoła parafialnego w Sarnowie, na tzw. „Górze św. Jana” generał ufundował w 1933 r. kamienną grotę z figurą Matki Bożej, z dużym dębowym krzyżem. Jak twierdzą starsi mieszkańcy tych okolic, gdy tylko J. Haller przebywał w swojej posiadłości, zawsze uczestniczył w nabożeństwie majowym odprawianym w grocie. Zniszczona w czasie II wojny światowej - zrekonstruowana w 2002 roku.
Gorzuchowo
Z wsią w okresie międzywojennym bardzo silnie związany był gen. Józef Haller, który po przejęciu w 1920 r. na mocy Traktatu Wersalskiego obszaru województwa pomorskiego (w tym Gorzuchowa) na czele dowodzonej przez siebie tzw. Błękitnej Armii zdecydował się na zakup dworu i ziemi na terenie wsi. Generał nabył resztówkę po parcelacji majątku Karola Reichela o powierzchni 394 ha (Po części zakup i prezent hallerczyków amerykańskich). Gen. Haller mieszkał w dworku po zakończeniu triumfalnego pochodu przez Pomorze od 1922 r. aż do wybuchu wojny. Kilka lat temu mieścił się tam magazyn nawozów sztucznych, a obecnie mieszkania komunalne.
We wsi zachowały się pamiątki po mieszkającym tu gen. Hallerze. Oprócz dworu i resztek parku zachowała się także kapliczka św. Andrzeja Boboli ufundowana przez generała w 1936 r. stojąca na skrzyżowaniu szosy i polnej drogi do Sarnowa.
2 IX 1939 r. samoloty Luftwaffe zbombardowały stojący na stacji pociąg ewakuacyjny z Grudziądza do Torunia. Zginęło 39 osób. Ich szczątki spoczywają na cmentarzu w Sarnowie, a w głębokim parowie na zachód od stacji kolejowej znajduje się pomnik, upamiętniający to zdarzenie.