高力士原本馮元一，是嶺南人，他的父親馮君衡在武則天時期任潘州刺史。高力士10歲時，流放嶺南的犯人造反叛，武則天派監察史萬國俊去調查。萬國俊是武則天時期的酷吏之一，在那次調查嶺南流放犯人造反的過程中，幾百名犯人被冤判斬刑。高力士的父親馮君衡，嶺南犯人造反案牽連，被罷抄家並問斬。高力士的母親為了讓小高力士不被死，將他賣給了收買養子的人，殊不知買小高力士的人，是人販子，小高力士被那人閹割後高價賣出。公元六九八年，高力士與有同樣遭遇的金剛二人，被嶺南討擊使李千里帶宮中，時年十五歲的高力士為了武則天邊的小太監。
沒過多久，高力士因小過錯，被鞭打後趕出宮，宦高延福將他收養為養子。高延福曾在武三思府上侍候武三思，高力士自那時起常往來於武三思家的宅子。大約一年後，高力士又被召進宮中，得到武則天喜，並授宮闈丞。
高力士在“神龍政變”後，逐漸與臨淄王李隆基往切起來，在誅韋后，除太平公主的兩次政變中，支援李隆基，時至今日，他終於走上了權力的高峰。
公元七三一年正月二十一日，高力士站在侍省大門口，與金吾大將軍程伯獻正在談話。
高力士說：“程兄，又到春季了，聖上自去年開始，每月都要組織兩三次朝臣的春遊活，我怕有不法分子趁機擾治安。皇城外，乃至整個長安城的治安，就有賴於你的管理了。”
程伯獻向高力士行抱拳禮：“力士兄弟，我一直以來都是兢兢業業地維護皇城外，乃至整個長安城的治安，請力士兄弟和皇上放心，只要有我程伯獻負責治安，絕對不會出現什麼問題。”
程伯獻已經年逾花甲，披盔戴甲，看上去仍然一副老當益壯的樣子。他是大唐開國將領程咬金的孫子。
高力士微笑著說：“有程兄這句話，我就放心了。”
”？啊何如下意你知不，弟兄姓異為結你和我與想說，客做上府我到天昨他，好甚人兩們我與正紹馮監府，弟兄士力“：說獻伯程
”。了弟兄姓異為結是算就，杯幾酌小們我，菜道幾炒監太小令住的宮在我間夜，日六十二月本是就也後天五，吧下一說他與你。人的作工地實踏腳結歡喜就我。條有井井的理管都，業行等業造鑄，業造製業工手，技業農，來以監府任他，在實很人為正紹馮。好很，好“：說著笑微士力高
”？啊們我報舉裡那下陛到會不會，飲聚城皇在人三們我到看人被果如是只，是只，好甚的說兄士力“：說地慮憂帶面獻伯程
”。他厭討此因下陛讓會不會，用作有沒有會做樣那他，下一量掂得，人的們我報舉是而反。的們我罪怪會不也，了道知是使即上皇，杯幾酌小，菜個幾吃單簡裡夜在，住的中宮在我到，起一正紹馮和你與，由為作工量商以我。中家的城安長於位回城皇出很都裡夜，守值中城皇在都日每乎幾，危安的下陛了為我。事此心擔必不你“：說笑微士力高
”。啊們我報舉事小等此以易輕會人有沒，護擁誠忠的下陛對弟兄士力以，位地的中目心上皇在弟兄士力以，了慮多我是才剛“：說著笑微獻伯程
