Відповісти однозначно складно, обидва варіанти (штукатурити, не штукатурити) робітники.
Погріб це заглиблена в грунт будову, тобто гідроізоляція і якісна вентиляція потрібні.
Якщо Ви зробили якісну зовнішню гідроізоляцію, немає проблем з вентиляцією льоху, то цегла всередині погреба можна і не штукатурити.
Якщо зовнішньої гідроізоляції не було приділено належної уваги, то я б порадив заштукатурити цегла.
Але цегла в погребі не штукатурять "класичними" штукатурками (цемент, пісок, вода).
Тут потрібна гідроізоляційна штукатурка.
От не погана, "Consolit 540" (Консоль),