Gulpen begon zijn carrière bij de plaatselijke amateurvereniging, SV Nyswiller. Hij stapte uiteindelijk over naar de jeugdopleiding van Fortuna Sittard. Bij deze club debuteerde de middenvelder uiteindelijk op 27 augustus 2010, toen er met 3–0 werd verloren in de uitwedstrijd tegen FC Eindhoven. Hij verving dat duel Soufiane Dadda. In dat seizoen speelde hij uiteindelijk zeven duels, waarin hij twee keer het net vond, namelijk tegen FC Dordrecht en RKC Waalwijk. In 2015 ging hij naar EHC.[1] EHC trok het eerste elftal begin 2022 terug, waardoor Gulpen en zijn teamgenoten een paar manden zonder club zaten.[2] Vanaf de zomer van dat jaar ging hij spelen bij Zwart-Wit '19.