Если это нужно при распечатке файла - то можно использовать колонтитулы для вставки изображения (вот тут показано как).
Если надо просто вставить картинку на лист, то "под ячейки" никак не получится. Только поверх ячеек.