另外一个分家，就是得到藤堂虎高原来家领的那个亲族，这个分家再确切点说出自鲶江氏，三井家前两代家督三井乘定生有一女，嫁给了近江另外一个大豪族佐佐木鲶江氏的鲶江高久，鲶江高久是近江国爱智郡鲶江城城主，当时娶三井乘定的女儿时，三井家还是挺阔的。
所以鲶江高久就让他和三井家女儿生的次子鲶江实忠别出，前往三井家宗家的滋贺郡三井乡与宗家一起生活，并把苗字也改成了三井作为三井家的支族，这一支又名佐佐木三井家，家纹是宇多源氏的四目结。
结果随着宗家三井家的衰落，三井虎高跑路到外近十年，回来以后又做了藤堂家的婿养子，三井家的家纹也舍弃换成了藤堂家的家纹藤堂茑，这样一来佐佐木三井家反而成了一门惣领家，在这一家的苦心经营下，三井乡的日子虽然艰苦但好歹还能活下去。
佐佐木三井家获得一门惣领之后，就和爱智郡的鲶江家宗家关系越来越远，尤其当鲶江家上代断嗣，由鲶江家上代家督的女婿，公卿三条为季的儿子继承鲶江家的家业之后，就和佐佐木三井家更加生分。
所以后来才有了三井家的三井高安，三井高俊两代因为近江战乱而长期放浪，直到三井高利时代依靠亲族藤堂高虎的支持，在江户站稳脚跟并发展起了三井家族这个庞然大物。
吉良义时虽然对这里面的弯弯绕绕了解不多，但是他知dào
一点那就是三井家是他滋贺郡的国人，领地就在大津附近，而三井家现任家督是三井越后守安隆，正在他所掌握的滋贺郡小脇城做城主，还曾几次来到坂本城拜谒吉良义时，就这么个家族在他眼皮子底下安稳的渡过一年多，他竟然毫无所觉的真是失败。
既然是在吉良家配下豪族，那么吉良义时也不在客气，直接把三井安隆招来问道：“越后守的嫡子年纪不小了吧？”
三井安隆被突如其来的问题给问愣住，过半晌回过神说道：“呃……臣下的嫡子胜八郎今年才十岁。”
“十岁已经不小了！本家不就是十岁元服的吗？即可回去为你的嫡子元服吧！”几句话把一头雾水的三井安隆打发回去，过几天三井安隆就带着元服的嫡子赶到坂本城谢恩，吉良义时大量这个比他还小一岁的男孩，长相普通唯有一双眼睛明亮透彻，看起来很聪明的样子。
“这就是越后守的嫡子吗？是个好苗子啊……你叫什么名字？”
“三井胜八郎高安！拜见馆主大人！”三井高安恭敬的躬身行礼，动作很标准一点也不像十岁的孩子。
“三井高安是吗？不错！如果本家招你入侧近众，你会怎么想？”
“真的吗？”三井高安眼前一亮，兴奋的抬起头。
“咳！胜八郎！”三井安隆连忙提醒道。