Fils de Louis Jules Alphonse Goguet, négociant à Tonnay-Charente, et de Jeanne Clémence Delafargue, son épouse.
A dix-neuf ans, le jeune Goguet s’engage comme simple soldat volontaire dans l’armée le 8 novembre 1864. Il est adjudant au 88e régiment d’infanterie de ligne lorsque la guerre éclate ; il participe à la bataille de Sedan où il est blessé par un éclat d’obus qui lui brise le bras gauche le 1er septembre 1870. Sa conduite lui vaut d’être fait chevalier de la Légion d’honneur le 8 août 1871. Il avait également reçu par erreur la médaille militaire par arrêté du même jour ; la décision est annulée par décision présidentielle du 8 janvier 1872.
Il quitte alors l’armée, rejoint Tonnay-Charente, exerce les fonctions de percepteur puis reprend la succession de son frère à la tête de l’entreprise familiale de transit maritime et d’armement. Cette dernière devient l’une des principales de la ville. Il est élu maire de Tonnay-Charente le 8 septembre 1892 et le restera pendant quatorze ans.
Il avait épousé en 1873 Françoise Marie Suzanne de Juglard de Lardinie.