Ajayi est né vers 1807 à Osogun, dans l’actuel sud-ouest du Nigeria. Vers 1821, encore enfant, il a été capturé par des assaillants, vendu à plusieurs reprises et finalement livré à des trafiquants portugais. Sa famille a également été capturée.
La marine britannique a intercepté le navire et l’a conduit en Sierra Leone, où il a été libéré. Il a été baptisé en 1825 sous le nom de Samuel Crowther et a été l’un des premiers élèves de l’école de Fourah Bay, fondée par la Société missionnaire de l’Église (CMS).
En 1841, il a participé à l’expédition sur le fleuve Niger. Il a étudié à Londres et a été ordonné diacre (auxiliaire du ministère) le 11 juin 1843, puis prêtre le 1er octobre de la même année. Il a ensuite travaillé à Abeokuta, en pays yoruba, où il a retrouvé des membres de sa famille : sa mère et sa sœur se sont converties par son intermédiaire.
Il s’est consacré aux langues : il a joué un rôle central dans la traduction de la Bible en yoruba et rédigé un vocabulaire de cette langue, ainsi que des documents de base en nupe et en igbo. En 1857, il a ouvert la mission du Niger avec une équipe africaine, et le 29 juin 1864, il a été consacré évêque dans la cathédrale de Canterbury.
Dans les années 1880, alors qu’il était déjà âgé et que Henry Venn, le secrétaire de la CMS qui le soutenait, était mort, il a vu de plus jeunes missionnaires européens mettre en cause la conduite et les compétences de ses collaborateurs africains. La mission a été démantelée par le contrôle des fonds, le remplacement des responsables et le licenciement d’Africains, ce qui l’a profondément affecté. Certains dénonçaient des défaillances administratives, mais les historiens voient aussi des préjugés raciaux dans ces pressions.
Il est mort d’un accident vasculaire cérébral (AVC) à Lagos le 31 décembre 1891. Sa vie montre que Dieu peut se servir d’une personne ayant connu la souffrance de l’esclavage pour porter l’Évangile à son propre peuple. Elle montre aussi le prix à payer pour être pionnier.