Najdawniejsze dzieje Bielczy sięgają wczesnego średniowiecza i wiążą się z przynależnością do biskupiego klucza dóbr radłowskich. Udokumentowana wzmianka na ten temat pochodzi z 1236 roku. Do parafii w Radłowie bielczanie przypisani byli do 1364 roku. Wtedy to biskup krakowski Jan Bodzanta założył nieopodal wieś Borzęcin, wybudował tam kościół i przyłączył Bielczę do tamtejszej parafii.