高丽族的祖先主要有两个来源：

东北夫余人

高丽族的前身是东北地区的夫余人。公元前37年，夫余王族的成员朱蒙因内部争权斗争而南奔，在今新宾县永陵镇南建立高句丽国。高句丽是古代东北地区夫余人所建立的，其领土主要部分处于汉朝的辽东、玄菟、乐浪、带方四郡。因此，东北夫余人是高丽族的主要祖先。

朝鲜半岛移民

19世纪末20世纪初，由于朝鲜半岛的动荡和衰落，许多贫困的农民和劳工为了寻求更好的生活条件和自由空间，开始向北方迁移。一部分朝鲜人迁移到了中国东北地区，另一部分则越过图们江，进入了俄罗斯帝国的滨海边疆区。这些朝鲜人及其后代逐渐形成了高丽族。

综上所述，高丽族的祖先可以追溯到古代的东北夫余人和19世纪末20世纪初从朝鲜半岛迁移到俄罗斯远东地区的朝鲜人。