Baggerman speelde tot 2016 in de jeugd van ADO Den Haag. Na een stage bij West Bromwich Albion[2] vertrok hij naar RKC Waalwijk. Hiervoor debuteerde hij op 20 september 2016, in de met 0-3 gewonnen wedstrijd in het toernooi om de KNVB beker uit tegen EVV. Hij kwam in de 75e minuut in het veld voor Philippe van Arnhem. In 2019 promoveerde Baggerman met RKC naar de Eredivisie. Omdat hij in de Eredivisie niet in actie kwam, werd hij de tweede helft van het seizoen 2019/20 verhuurd aan SV TEC, waarmee hij vijf wedstrijden in de Tweede divisie speelde. In 2020 werd het contract van Baggerman bij RKC in goed overleg ontbonden, en sloot hij bij FC Dordrecht aan.