斎藤一
父・山口右助、母・ますの三子として生まれたとされる。姉に勝（ひさ）、兄に廣明。出身地は江戸。播磨国ともいわれるが、父が明石出身であったことから明石浪人を名乗ったようである。父・右助は播磨国明石藩の足軽であったが、江戸へ下り石高1,000石の旗本・鈴木家に仕えたと言う。後年、御家人株を買って御家人になったというが、実際は鈴木家の公用人（家来）だった。
佐藤一斎
安永元年10月20日（1772年11月14日）に佐藤信由の次男として、江戸浜町（中央区日本橋浜町）の岩村藩邸下屋敷内で生まれた。生家は佐藤方政の子孫の系と伝えられ代々藩の家老を務める家柄だった。一斎も寛政2年（1790年） より岩村藩に仕え、12・3歳の頃に井上四明に入門し長じて大坂に遊学、中井竹山に学んだ。