是的，研究生毕业时的第一学历是研究生。根据中国教育系统的规定，研究生是指已取得本科学位并顺利毕业后进入研究生阶段深造的学生，研究生期间所获得的学历为研究生学位。因此，研究生毕业时的第一学历应当是研究生，而非本科生。
