首要说明一点，河上彦斋的画像我看过，长得很标致的一个人，而且身材矮小，不过1米50，且皮肤很白，这点跟漫画中还是比较相似的。
他出生在今天日本的熊本县内，本名小森彦治郎。不久作为河上源兵卫家的养子，改姓河上，名玄明，小名彦次郎，后来改名为彦斋。
河上彦斋在他大概十岁左右的时候便受推荐，成为了大名（诸侯）身边的茶童，因为倒茶的服务态度好，所以很快就变成了茶坊主，即高级茶童。
除了业务精钻之外，在学问方面彦斋也丝毫没有放松，从十四五岁起，他就开始跟着各类人学习各类知识，比如那位池田屋事件的主谋宫部鼎藏，便是河上彦斋的兵法老师，从那个时候起，他的思想便是尊王攘夷，而且还是极端派。
文久元年（1861），彦斋随熊本藩藩主名代长冈护美入京。后来便住在京都。30岁时，熊本藩选拔新兵，彦斋作为熊本藩攘夷监军使去往长州。文久三年（1863）8月18日，由朝廷中公武合体派对尊攘派发起的“八月十八日政变”爆发，彦斋于此时出长州，于池田屋事件（元治元年六月五日）后不久抵达京都，并结识了同在京都的桂小五郎等人，然后成为了一名尊攘派下的杀手。
