体寒者
红豆薏米茶性质寒凉，而体寒者体内寒气本身就比较重，过量饮用容易诱发或者加重其病情，从而可能会导致人体出现腹痛、腹泻以及便溏等不适症状的发生，对人体的健康造成伤害，所以体寒者是不建议饮用红豆薏米茶的。
孕妇
红豆薏米茶中薏仁对子宫平滑肌有兴奋作用，可促使子宫收缩，食用过量很有可能会导致人体流产，因此孕妇要适量食用红豆薏米茶。
肠胃功能差者
红豆薏米茶中含有大量的维生素、纤维素等成分物质。适量食用可以帮助促进人体的胃肠道蠕动，而肠胃功能较差者饮用过量，那么是很有可能会加重其胃肠道负担，从而不利于他们的健康。