บ้านเขาดิน ตั้งอยู่หมู่ที่ 6 ตำบลหนองกระทุ่ม อำเภอปากท่อ จังหวัดราชบุรี ภูมิประเทศส่วนใหญ่ มีสภาพพื้นที่เป็นที่ราบเชิงเขา มีความอุดมสมบูรณ์ มีลำห้วยธรรมชาติไหลผ่าน เรียกว่า “ห้วยผาก”สภาพโดยรวมคล้ายท้องกระทะ เหมาะแก่การทำการเกษตร ปลูกพืชผัก และเลี้ยงสัตว์ ทิศเหนือ จรดหมู่ 7 ตำบลหทุ่งหลวง ทิศใต้ จรดหมู่ 6 ตำบลดอนทราย ทิศตะวันออก จรดหมู่ 8 ตำบลหนองกระทุ่ม ทิศตะวันตก จรดหมู่ 5 ตำบลดอนทราย และหมู่ 7 ตำบลทุ่งหลวง มีพื้นที่ทั้งหมด 3.65 ตารางกิโลเมตร
บ้านเขาดิน ก่อตั้งมาประมาณ 65 ปี โดยชาวบ้านย้ายถิ่นฐานมาจากตำบลป่าไก่ ตำบลดอนทราย เริ่มก่อตั้งเป็นชุมชน พื้นที่มีสภาพเป็นป่าที่อุดมสมบุรณ์ เดิมตั้งชื่อหมู่บ้านว่า “บ้านห้วยผาก”ต่อมาเป็นเป็น “บ้านเขาดิน”ตามสภาพพื้นที่ซึ่งมีภูเขาที่มีสภาพเป็นภูเขาดิน มาจนถึงปัจจุบัน