В старые времена дома строили с учетом, что красный угол (место, куда помещают иконы) будет на восток.
Тело умершего помещали головой к иконам.
Читается панихида.
Поэтому получается, что выносим гроб ногами вперед - почивший уходит в иной мир.