Avec la Durance, la colline Saint-Jacques est le deuxième grand pôle naturel de Cavaillon. La chapelle qui la surplombe lui a donné son nom.
Elle date du XIIe siècle et de style roman provençal. L’ermitage qui lui est accolé a abrité César de Bus, prêtre cavaillonais au XVIe siècle. Le panorama embrasse la ville de Cavaillon et la Durance.