右耳タブ腫れが耳全体大きく腫れ、首も腫れています。

50代/男性 - 2017/10/12

一昨日、耳たぶが腫れて、39.1度の熱があり、耳鼻科に行き、タリビット錠と解熱剤を処方されました。2日目の夜(現在）熱は37.5度まで下がりましたが、右耳全体が大きく腫れ、首右側も腫れています。さらに状況が悪化していると思うのですが、もうしばらく様子を見るべきでしょうか。それとも病院へ行くべきでしょうか。