In 1967 besloten enkele dames uit het Antwerpse om met hun kinderen regelmatig culturele uitstapjes te doen om zo de jeugd op een kindvriendelijke manier in contact te brengen met het rijke Antwerpse cultuurpatrimonium.
Het eerste museum dat ze bezochten was Plantin-Moretus. Het passer-embleem in het wapenschild van Plantin inspireerde hen tot de naam Gulden Passer.
In 1970 besloten deze dames om datzelfde regelmatig ook eens zonder de kinderen te doen en ze richtten voor zichzelf Zilveren Passer op. Zilveren Passer is ondertussen uitgegroeid tot honderden clubs in heel Vlaanderen.
In 1985 namen enkele echtgenoten van Zilveren Passer-leden het initiatief om voor de heren met Koperen Passer te starten. Ook Koperen Passer werd een groot succes en is uitgegroeid tot een vereniging met een tachtigtal clubs en ongeveer 4000 leden.