洪團樟在嘉義竹崎長大，青春期因因交友不慎，常跟著竹崎黑道幫派打架鬧事，母親為了讓他脫離壞朋友，湊了500元要他離開家鄉北上工作。當時才15歲的洪團樟跑到台北車站後站介紹所，花50元仲介了一份送米小弟差事，他笑說：「做了3個月，我常常照鏡子，總想說『我這麼帥，應該不只是送米的料！』
之後洪團樟轉到名模白歆惠父親白國嘉開的傳播公司當小弟，在片場幫忙掃地、倒茶、送片，間接看了不少偶像明星，也在心中種下星夢種子。無奈，1969年中視開播，白國嘉受雇到中視導演，結束傳播公司，為照顧從南部北上的小弟，輾轉把洪團樟介紹到松山機場的國泰航空，擔任地勤員。
「16歲到機場工作，還要被警備總部身家調查。」當時機場還沒有行李推車，洪團樟負責幫旅客搬行李，薪水加小費，1個月有近3,000元收入，是公務員的3倍薪資，一做就是5年，直到當兵。洪團樟笑憶，當時空姐、空少下班後，都會拜託他介紹好吃好玩的景點，「一票空姐很愛黏著我，要我帶她們去逛夜市、泡溫泉，走在路上，路人都會對我投以羨慕眼光。」
國泰地勤為做1休1，放假時，白國嘉找洪團樟參加中視演藝班，原本報名歌唱班，但洪團樟被老師評為五音不全，之後轉去演藝班才總算找到方向，「我長得還算帥，可以當個配角。」讓他最得意的代表作，是替三馬軟膏當廣告男主角，演出騎摩托摔倒劇情。
若說人生就像一場戲，洪團樟有本事演什麼像什麼，他笑說：「多虧演藝班的訓練，讓我發掘自己的多重性格，可按劇情需要配合演出。」退伍後，擔任神父的大哥洪山川建議弟弟學一技之長，才介紹他到教友開的鋁門窗工廠當學徒，4個月後創業，成立一太鋁門窗。
洪團樟年紀輕輕24歲就創業當老闆，所謂虎父無犬子，他的2個兒子也不遑多讓，長子洪宇成20歲就創業開設印刷公司，今年又成為一太的經銷商；次子洪宇均則是27歲開律師事務所。
2個兒子遺傳了洪團樟的能言善道，洪宇成高中讀了5年、換過3間學校，曾被老師告狀他勒索同學，洪團樟斥責，大兒子反說：「我是集資不是勒索」；律師小兒子更是辯才無礙，回到家，洪團樟只有乖乖聽訓的份，他自嘲：「孩子用3年學講話，我們用30年學閉嘴。」
