香榧的黑顏色還是可以吃的，因為它的果皮不僅營養豐富，還能止咳化痰清肺，預防感冒，驅蛔蟲。還聽說有防癌作用，所以營養價值也很高，吃的時候不用小心翼翼的加衣服。
如果想吃到香榧最純正的味道，剝去外殼後，可以把黑色的果實外殼連同外殼壹起刮下來，吃到幹凈的堅果。當然，在吃香榧的時候，也可以選擇不刮去黑色的果衣，因為據說黑色的果衣可以起到壹定的作用，比如黑色可以打蛔蟲。蘇東坡曾說:“趕走三彭仇，是我的心病。”所以可見香榧的黑色也是有益的。
吃香榧籽，會散發出壹種獨特的香味。據說，楊貴妃經常將香榧籽磨成粉末服用，以獲得體香，並試圖與費翔競爭。但也有人覺得有點藥用的味道，有嚼木頭的味道。其實香榧含有大量的脂肪和油脂，比花生和芝麻還多；但是吃到嘴裏只覺得又香又脆，卻感覺不到多少油。