Различаются значением.
Ре́чушка. Ласковое к «река».
Речу́шка. Разг. Маленькая река. «Там и сям, особенно под лучами заходящего солнца, сверкают широкие озера, между которыми змеятся узенькие, пересыхающие на лето речу́шки». (В. Г. Короленко).
Розенталь Д. Э. Теленкова М. А. Словарь трудностей русского языка. М.: Айрис-Пресс, 2003. С. 617 – 618.