高力士出身高贵，鼎盛时期越南都是他家的
圣历初年，岭南讨击使李千里送入宫两个阉童，一个名金刚，一个叫力士。武则天因为力士强壮聪明，让他任给事，侍候左右。一次为小事惹怒则天皇帝，被逐出宫，武三思家的中人高延福收为养子，所以承用养父之姓，叫高力士。受到武三思的赏识，过了一年多，又进入内宫，任职司宫台做君主的传达。
李隆基还是在做藩王的时候，高力士就倾心讨好巴结。诛平韦氏以后，调高力士到内坊，提拔为内给事。先天年间，因诛杀萧至忠、岑羲等人有功，升任右监门卫将军，主管内侍省的事。于是四方有所奏请均先呈高力士，然后进呈皇帝，若是小事，高力士就决断处理了。
这个高力士，其实出身十分高贵。他是冼夫人的后代。
在中国民间传说里面，有很多的女英雄，比如穆桂英、花木兰等等。但是在历史上，女英雄其实并不多，冼夫人可以算得上一个。
冼夫人名英，幼名百合，是南北朝时期南越地区的一个首领，人称岭南圣母。
《资治通鉴》记载：“宋朝（南北朝时期的宋国）命冯业世世作罗州（今化州境内）刺史，至齐，冯代继为罗州刺史。至梁冯融续为罗州刺史。………高凉有大姓冼氏，世为俚族首领，部落十余万家。冼氏有女冼英，少有谋略，善于抚循部众，信义著于溪同，冯融闻其贤，于梁大同初为其子高凉大守冯宝聘以为妻……”
梁大宝元年（公元550年），高州刺史李迁仕暗通侯景谋反，冼太夫人洞察其奸变，并突出奇兵大败李迁仕。于平叛中，她结识梁都督陈霸先，她认为陈霸先是个能平息世乱的人，大为赞赏。公元551年，冼太夫人协助陈霸先擒杀李迁仕。梁朝论平叛功，册封冼太夫人为“保护侯夫人”。公元557年，陈霸先称帝，陈朝立。
陈永定二年（公元558年），冯宝卒，岭南大乱。冼太夫人凭着自己的威望，劝服、团结百越，使社会安定了下来。太建二年（公元570年）广州刺史欧阳纥反，将冼太夫人儿子冯仆骗去，欲诱迫他同反。冼太夫人不以儿子之安危为念而肯负国家，立即布兵拒境，并与陈朝遣讨军队全力击溃叛军。陈朝嘉其功，册封她为“石龙郡（今化州境内）太夫人”。公元589年，隋灭陈，岭南数郡共举冼太夫人为主，尊为“圣母”，并力劝独立，以保境安民。隋大军到了岭南边境，因畏惧冼太夫人，逡巡遥望，不敢进犯，于是遣使者示以陈后主降书和她所赠陈后主信物“扶南犀杖”。冼太夫人在确知陈亡后，召集首领数千人“尽日恸哭”，然后才归顺了隋朝。朝廷感其顾全局、识大义，册封她为“宋康郡夫人”。
周恩来总理曾称颂洗夫人为“中国巾帼英雄第一人”。目前全世界有两千多座洗夫人庙，主要遍布粤西、桂东、海南、马来西亚、新加坡、越南、泰国。
（南梁疆域图）
冼夫人的孙子名叫冯盎，少有谋略，英勇善战，初以门荫，授宋康县令。后平定五州獠人叛乱，随隋炀帝出征辽东，迁左武卫大将军。隋朝灭亡以后，冯盎回到岭南，聚众数万，自任首领，依附割据岭南军阀林士弘，先后击败广州和新州的贼帅高法澄、冼宝彻等人，占据广州、苍梧、朱崖之地，自领岭南总管，治理有方，稳定岭南局势，使得社会安宁。武德五年(622年)，归顺唐朝，授上柱国、高州总管、耿国公。平定罗窦各洞獠民反叛，受到唐太宗的夸赞。勤勉清明，深受百姓和部下的爱戴。
冯盎有三十个儿子，其中一个儿子名叫冯智玳，任职恩州刺史。高力士就是冯智玳的孙子，原名冯元一。
那么，冯元一为什么做了太监呢？
冯元一的父亲名叫冯君衡，世袭了祖上的军功担任番州刺史，但是后来冯君衡因为牵扯到谋反案所以被抄家了。
冯元一被阉割做了太监，而他的母亲麦氏也在动荡中失散了。
后来岭南节度使在泷州找到麦氏，将她迎送到长安。彼此都不能认识了，麦氏说“：我儿胸前有七颗黑痣，还在吗？”高力士袒开胸衣，果然有七颗痣。母亲拿出一个金环，说：“这是你小时戴的。”母子相抱大哭。皇帝封麦氏为越国夫人，又追赠高力士的父亲冯君衡为广州大都督。
养父高延福及其妻当高力士显贵时还在世，对他们的侍养与对麦氏的相同。金吾大将军程伯献与高力士结拜为兄弟，后来麦氏去世，程伯献穿重孝服守灵接受祭吊。河间男子吕玄晤在京师为吏，他的女儿极有姿色，高力士娶为妻子，吕玄晤就提拔为刀笔史直至少卿，其子弟也都任王傅。吕玄晤的妻子去世，宫内外争致奠仪，从他家直到墓地，车马连绵不断。