但最讨厌的一点是，他总是能惹我发火！（但最后他总是能让我生气！）
俚语：He knows how to push my buttons.（他懂得如何按下让我生气的开关）。
downside:不利的；最后阶段
看你语境中哪个合适吧