谷乐军生于1898年11月14日（清光绪二十四年十月初一）。湖南耒阳人，字自维。中国国民党陆军军官学校第一期、中央陆军军官学校高等教育班第五期毕业。