家中務農,老一輩捨不得孩子辛苦,潘彥升像大多數的農家子弟,選擇北漂到大城市尋求出頭機會,他憶起當時北上的回憶,「我在台北百貨公司的超市逛著,意外發現父親辛苦種植的水果出現在眼前,但價格卻差近6倍之多,那是就連種植者也捨不得買的價錢。」當時的震撼深埋心中,也種下日後成立「挽菓子」的契機。