เมื่อก่อนนี้ชาวบ้านทำอาชีพประมงและทำนาไปด้วย เมื่อราว ๆ ปี 2540 ชาวเนินฆ้อประสบปัญหาจากนายทุนเข้ามาทำนากุ้ง ทำให้น้ำเสีย ดินเค็ม พอหันมาทำทำประมงเต็มตัว ก็มีเรือประมงพาณิชย์เข้ามาจับสัตว์น้ำในพื้นที่ ทำให้เครื่องมือของชาวบ้านสูญหาย อวนที่ลอยทิ้งไว้ เรือใหญ่ก็มาลากเอาไปหมด สัตว์น้ำก็ลดน้อยลง ทำให้ชาวประมงประสบปัญหากันถ้วนหน้า จากปัญหาดังกล่าว นายสำออย รัตนวิจิตร ประธานกลุ่มประมงพื้นบ้านตำบลเนินฆ้อ ได้รวมกลุ่มชาวบ้านลุกขึ้นมาพูดคุยถึงปัญหา เพื่อหาแนวทางการบริหารจัดการทางทรัพยากรบริเวณของชุมชนของเขา ปี 2545 จึงได้จัดตั้งกลุ่มประมงขึ้นมาเพื่อพูดคุยกันถึงการแก้ปัญหาในวันที่ 14 บ่ายโมงตรงของทุกๆเดือน แต่ลุงออยเองก็บอกว่าถ้าคุยเฉพาะแต่ชาวบ้านคงไม่เกิดประโยชน์อะไร จึงทำหนังสือเชิญหน่วยงานราชการที่เกี่ยวข้องเข้ามาร่วมรับฟังปัญหาในแต่ละครั้งด้วย จนกระทั่งปี 2549 เทศบาลตำบลเนินฆ้อ มองเห็นความสำคัญของกลุ่ม เลยคิดว่าควรมีการจัดการทำให้เป็นรูปธรรมชัดเจน จึงมีการจัดตั้ง “กลุ่มประมงพื้นบ้านเนินฆ้อ โครงการฟื้นฟูทรัพยากรทางทะเลและชายฝั่ง”