因為雜糧富含植酸和膳食纖維，阻止人體對這種礦物質的消化、吸收和利用，會進壹步加重缺乏；患有消化道疾病的人。比如肝硬化、食管靜脈曲張或胃潰瘍引起的腹水患者，吃大量雜糧容易引起靜脈血管裂開出血和潰瘍出血；免疫力下降的群體。如果長期攝入過多的膳食纖維，調節免疫力的維生素和營養素攝入不足，會加重人體免疫力的下降；體力活動量大的群體。
粗糧對於從事重體力勞動的人來說，沒有給予足夠的營養；成長期的中學生。因為生長發育期對營養素和能量的要求比較高，過多攝入雜糧會阻礙營養素的吸收和利用。老人和孩子。老年人消化吸收功能下降，而兒童消化吸收功能不健全。消化吸收大量的膳食纖維對腸胃的負擔很重，營養物質的吸收利用率也很低，不利於老人和兒童的營養吸收，會影響人體機能。
吃粗糧壹定要科學合理，要有所區別，而不是片面強調粗糧帶來的好處，忽視特殊家庭的生理需求，否則得不償失。有大量蔬菜和少量魚、蛋和牛奶的粗糧米飯。這種組合既能完成膳食纖維、各種維生素、碳酸鹽等微量元素的攝入，又能改善餐後血糖，而且不會產生過多的粗或漂白。雜糧吃多了會影響消化吸收。過多的纖維會導致胃腸梗阻、脫水等感染期。