霞石村建村于明代（1368年）以前，原由霞村、叠石等自然村合并而成，故各取一字命名为“霞石”，民国及共和国初期曾与荔村合称为荔霞乡，历来是具有桑基鱼塘特色的鱼米之乡。