ห้องสมุดประชาชน “เฉลิมราชกุมารี” จัดสร้างขึ้นเพื่อ เป็นการเฉลิมพระเกียรติ สมเด็จพระเทพรัตนราชสุดาฯ สยามบรมราชกุมารี ในวโรกาสที่ทรงพระเจริญพระชนมายุครบ ๓๖ พรรษา ในวันที่ ๒ เมษายน พ.ศ. ๒๕๓๔ ตามที่ทรงมีพระราชดำริในการส่งเสริมการศึกษาสำหรับประชาชน “ห้องสมุดในทรรศนะของข้าพเจ้า” กระทรวงศึกษาธิการได้สนองพระราชปณิธานของพระองค์ โดยจัดสร้างห้องสมุดประชาชน เฉลิมพระเกียรติ สมเด็จพระเทพรัตนราชสุดาฯ สยามบรมราชกุมารี และขอพระราชทานใช้ชื่อห้องสมุด “เฉลิมราชกุมารี”
สืบเนื่อง ปี พ.ศ. ๒๕๔๘ ซึ่งเป็นปีที่สมเด็จพระเทพรัตนราชสุดาฯ สยามบรมราชกุมารี ทรงเจริญพระชนมายุครบ ๕๐ พรรษา จังหวัดมุกดาหารด้วยความจงรักภักดีและสำนึกในพระมหากรุณาธิคุณของ สมเด็จพระเทพรัตนราชสุดาฯ สยามบรมราชกุมารี ที่ทรงตระหนักในการส่งเสริมการศึกษาสำหรับประชาชนเพื่อสนองแนวพระราชดำริและเป็นตัวอย่างของห้องสมุดในอนาคต ที่เป็นแหล่งเรียนรู้และศูนย์กลาง สนับสนุนเครือข่ายการเรียนรู้อย่างต่อเนื่อง ส่งเสริมคุณภาพการเรียนการสอนทั้งในและนอกโรงเรียน สร้างสังคมการเรียนรู้ และลักษณะนิสัยการแสวงหาความรู้ จึงได้ริเริ่มดำเนินโครงการจัดตั้งห้องสมุดประชาชน “เฉลิมราชกุมารี” อำเภอคำชะอี จังหวัดมุกดาหาร ขึ้นและได้รับพระราชทานพระราชานุญาตเข้าร่วมโครงการห้องสมุดประชาชน “เฉลิมราชกุมารี” เป็นลำดับที่ ๘๙ ของประเทศไทย