川村清雄
江戸麹町表二番町法眼坂上において、御庭番の家系で御徒頭を勤める川村帰元修正の長男として生まれる。川村家は、初期の御庭番の17名の1人・川村新六を祖とし、曽祖父・修富の代から別れた分家であるが、曽祖父・祖父と奉行職を務め御庭番家筋の中でも名門の一つであった。祖父川村修就（ながたか）は初代新潟奉行、大坂町奉行、長崎奉行などを歴任した優秀な幕臣で、後に勝海舟は三河武士の美風を残した侍の一人として挙げている。祖父の活躍が長かったため、父帰元はあまり出世していないが、後の明治25年（1892年）『旧事諮問録』（岩波文庫）にて自身の体験を詳細に語り、御庭番に関する貴重な記録を残した。
小中村清矩
文政4年（1821年）年末、江戸麹町（現在の東京都千代田区）に生まれる。父は原田次郎八、母は美代。父母に早世されたため、母の妹に養われ小中村家を継ぐ。小中村家の出自は石清水八幡宮の神職で、江戸に下って商業を営んでいた。天保5年（1834年）、名を清矩に改めた。養父の歿後家業を継ぐ一方、学問を堀越開山・置賜晰斎・西島蘭渓・中村六右衛門・亀田鶯谷・伊能穎則らより受ける。嘉永5年（1852年）、家業を次子文次郎に譲って学業に専念した。