Нажимаете на нужных ячейках п.к.м. выбираете команду Формат ячеек.
Во вкладке Число выбираете в окошке Числовые форматы формат Дробный.
В правом окне выбираете Простыми дробями. И жмете ОК.
P.S.
Еще можно выбрать формат Текстовый. Только в этом случае, в ячейке будет храниться строка, а не число.
Именно вводить - следующим образом:
Целую часть вводите как обычно
Дробную часть отделяете от целой пробелом и вводите через символ "/".
Например, 3,8 нужно вводить вот так: 3 4/5.
При таком вводе Excel сам применит к ячейкам формат "Дробный"