Ungherese di seconda generazione. I suoi genitori erano Márton Horváth e Rozália (Tóth). Suo fratello, József P. Horváth, era anch’egli sacerdote. Si diplomò alla Catholic Central High School di Hammond, poi completò gli studi teologici presso il St. Lawrence Seminary a Mt. Calvary, nel Wisconsin, e presso il seminario di St. Meinrad. È stato ordinato sacerdote il 6 giugno 1943. Giudice diocesano. Riposa nel cimitero Hungarian Sacred Heart Cemetery a South Bend, IN.