源义仲年轻时为了避祸，由信浓木曾谷豪族中原兼远领养，所以后人将他又称为木曾义仲。

现在信浓木曾谷的木曾氏，通说是木曾义仲四子木曾基宗一系，其母亲据说就是当时弓马无双的姬武士巴御前。

而木曾氏这一脉，就在这当年木曾义仲避祸之地日益壮大。

到了永正元年，木曾家十六代当主木曾义元，与飞驒国三木重赖（姊小路良赖老爹）交战时阵亡。

木曾义元战死后，木曾家虽一度衰败，但却在木曾义元之子木曾义在手上再度中兴。

木曾义在重建木曾福岛城作为居城，并控制了中山道商路，在妻笼到新洗马间设宿驿，将木曾的木材商品化。在他手上木曾家家业达到了巅峰。

当时筑摩郡木曾家与埴科郡村上家、安昙郡小笠原家、诹访郡诹访家，并称为信浓四大将。

后来武田信玄进行信浓侵攻，即使是中兴之主木曾义在，亦不敌武田家的军势。木曾家于弘治元年即一五五五年降服，木曾义在并于三年后病死。

而木曾家的家业由义在之子现任当主木曾义康继承。

当时武田信玄，将木曾家与武田家视作同为源氏一门，所以战后并没有进行处罚，没收领地等等，反而将自己的三女真理姬嫁给木曾义康嫡子木曾义昌。

所以木曾家也因此被武田家视作半个一门众。

在第四次川中岛合战中，有这样的传闻，因为武田家奇袭妻女山失败，最后导致本阵被攻，是因为妻女山别动队的信浓先方众中，有人故意将消息泄露给上杉谦信的缘故，目的是避免自己攻打妻女山时的损失，同时也可以将武田信玄的本阵陷入绝境之中。

而当时妻女山别动队中，非甲斐系出身的将领，只有木曾义康，真田幸隆，小幡宪重这三人。

不管怎么说，李晓想要出兵飞驒国，最好的方法只有让木曾义康出兵。

武田信玄组建飞驒方面军时，就曾将木曾义康划入马场信房麾下，所以他也有出兵飞驒的责任。

当时木曾家是南信浓第一豪族，加上其手下小豪族的兵力，可调动军势可以超过两千，加上木曾义康的祖父木曾义元死在姊小路良赖老爹三木重赖手上。