خواجه شمس الدین محمدبن بهاءالدین محمد حافظ شیرازی متخلص به حافظ، یکی از محبوبترین شعرای فارسی زبان قرن هشتم هجری قمری است. حافظ در سال ۷۹۲ قمری فوت نمود سنگ قبر حافظ همان سنگ قبر نصب شده در دوره کریم خان زند است. پس از کریم خان زند در سال ۱۲۳۵ و بعد از فوت حافظ، حاکم فارس امارتی به شگل گنبد بر بالای و حوض بزرگی نیز در جلوی آن بنا کرد. علی اکبر فعال اسیری به دلیل رزتشتی بودن اردشیر، کسی که در سال ۱۲۷۸ بارگاه را مرمت کرد و بر بالای آن کوشکی قرار داد، بنای مرمت شده را ویران کرد و تا سال ۱۱۲۸۰ نیز به همین شکل ویران شده باقی ماند تا اینکه در همین سال شاهزاده ملک منصور حاکم فارس کوشکی آهنی به جای چوبی قرار داد. در سال ۱۳۱۰ بر روی دیوار جنوبی این مکان سر در سنگی بزرگی نصب شد. ۶ سال بعد ینی در سال ۱۳۱۶ به دستور شاه به شکل امروزی مرمت و بازسازی شد.