Gontse est une militante des droits de l'homme qui a une longue expérience de l'action contre le VIH et le sida, de l'organisation de mouvements sociaux, de l'action en faveur de l'égalité des sexes et de la rédaction d'ouvrages féministes. Depuis 2005, elle a travaillé pour diverses ONG nationales et internationales dans le secteur du développement, notamment Hivos, SAIIA, Khanya College et The AIDS Consortium. Gontse est diplômée en sciences sociales et en sciences de l'information et a une expérience en gestion de l'information. Elle poursuit actuellement des études de sociologie à l'UNISA. Au WoMin, Gontse détient le portefeuille important de la formation à l'information et à la connaissance, où elle est la gardienne des systèmes et processus d'information de l'organisation.
