Sem Westerveld speelde in de jeugd van Ajax Cape Town, waar zijn vader Sander keeper en keeperstrainer was, en AZ. Hij debuteerde in het betaald voetbal voor Jong AZ op 4 januari 2021, in de met 0-1 verloren thuiswedstrijd in de Eerste divisie tegen Roda JC Kerkrade.[3]