Primero sería interesante conocer el tamaño de tu belén y si es abierto o cerrado.
Si es pequeño, lo puedes hacer con cartulina, bién azul o blanca si tienes sitio para poner luces de color azul por la parte posterior del belén.
Si es grande y cerrado, te recomiendo la cartulina blanca con luces( como en el pequeño) o bién tela blanca (cuidado con las arrugas) iluminadas también con tubos fluorescentes azules.
En fín, cuentanos cómo es tu belén.