وقام المعلمون بتعليم جيمس مع شقيقه الأكبر تشارلز الثاني الملك القادم لإنجلترا، بالإضافة إلى اثنين من أبناء دوق باكنغهام فيلير جورج، وفرنسيس فيلير.
James was educated by tutors, along with his brother, the future King Charles II, and the two sons of the Duke of Buckingham, George and Francis Villiers.