Ngày 18 tháng 10 năm 1963, trong trận đánh bốt Cây Trường ở khu Dinh Điền Văn Hữu (Hiếu Văn 1; Hiếu Văn 2), huyện Bến Cát, tỉnh Bình Dương. Bốt Cây Trường có địa thế rất lợi hại, án ngữ quốc lộ số 13 và khu tam giác Dinh Điền Văn Hữu - Căm Xe. Địch bố trí một đại đội phòng thủ rất kiên cố cẩn mật, kiểm soát từng người dân ra vào. Từ căn cứ này, bọn biệt kích ác ôn tung đi đánh phá chiến khu của ta.
Cả tháng ròng, đồng chí Trừ Văn Thố len lỏi vào vị trí địch ở Cây Trường nắm tình hình, báo cáo cho chỉ huy đơn vị xây dựng phương án tác chiến chính xác. Ngày nổ súng, đồng chí được giao nhiệm vụ cùng một tổ đánh khu cố thủ của địch ở hướng chủ yếu. Lô cốt cố thủ (lô cốt chính) có pháo đài cao 7 mét. Do giữ được bí mật bất ngờ, nên loạt bộc phá mở đầu ta đã giành thắng lợi. Bộ đội ta đã đánh sập được lô cốt cố thủ, mở xong hàng rào tiền tuyến và bắn vỡ pháo đài. Nhưng từ lô cốt A hoả lực địch vẫn quét mạnh cản đường quân ta xung phong. Nhiều chiến sĩ ở hướng chủ yếu, trong đó có 2 tổ viên của tổ đồng chí Thố đã hy sinh. Không do dự, Trừ Văn Thố ôm bộc phá bò lên. Một loạt trung liên từ lỗ châu mai bắn ra, đồng chí bị thương rất nặng, đồng chí vẫn ôm bộc phá cố trườn lên và đặt sát vào lô cốt. Một cột lửa bừng sáng, tiếp theo là một tiếng nổ dậy đất, long trời. Lô cốt im lặng vài giây rồi hoả lực địch cũng từ lỗ châu mai ấy tiếp tục phụt ra. Đồng chí Trừ Văn Thố rút thủ pháo ném vào, nhưng hoả lực địch vẫn chưa tắt. Đội hình tiến quân của ta bị chùn lại, thêm nhiều chiến sĩ hy sinh. Trước tình huống gay go tưởng chừng không vượt qua nổi, đồng chí Thố gắng sức trườn lên, rồi bất ngờ bật dậy, lao người vào lỗ châu mai, dùng thân mình bịt kín họng súng trung liên của địch, tạo thời cơ cho đồng đội xung phong giành thắng lợi hoàn toàn.
Để tưởng nhớ công ơn anh hùng liệt sĩ Trừ Văn Thố, ngày 01 tháng 6 năm 1976 Ủy ban nhân dân tỉnh Sông Bé ra quyết định lấy khu Dinh Điền Văn Hữu trước đây thành lập xã kinh tế mới, đặt tên là xã Trừ Văn Thố thuộc huyện Bình Long, tỉnh Sông Bé. Từ ngày 01 tháng 01 năm 1997 thực hiện việc chia tách tỉnh Sông Bé thành hai tỉnh Bình Dương và Bình Phước, xã Trừ Văn Thố thuộc huyện Bến Cát (Nay là huyện Bàu Bàng) tỉnh Bình Dương
Đầu những năm 1960, thực hiện ý đồ lập các ấp chiến lược, các khu trù mật để dễ bề kìm kẹp nhân dân, tách rời quần chúng nhân dân với lực lượng cách mạng, hòng cô lập và tiêu diệt lực lượng kháng chiến của ta, chính quyền Ngô Đình Diệm đã xúc tiến “Kế hoạch di dân”. Chúng tiếp tục dồn hàng vạn bà con ở các tỉnh miền Trung vào miền Đông Nam Bộ trong đó có vùng đất huyện Chơn Thành, tỉnh Bình Long.
Nằm trong hoàn cảnh lịch sử đó xã Trừ Văn Thố trước đây thuộc khu Dinh điền Hiếu Văn 1, Hiếu Văn 2, đầu thập niên 1960 tại đây có 1 xóm đạo. Sau khi chế độ Ngô Đình Diệm bị lật đổ năm 1963, xóm đạo không còn được tài trợ nên người dân tự bỏ đi nơi khác.
Vào những năm 1965 - 1967, sau các chiến thắng Đồng Xoài, Bàu Bàng của quân và dân ta, những chiến dịch khủng bố trắng của địch ở các khu Long nguyên, huyện Bến Cát, huyện Chơn Thành trong đó vùng Cây Trường (Trừ Văn Thố) là vùng tự do oanh tạc của chính quyền Sài Gòn, buộc đồng bào phải tản cư đến nơi khác sinh sống.
Năm 2018, Ủy ban nhân dân huyện Bàu Bàng xây dựng Nhà tưởng niệm khu Di tích Dinh Điền Trừ Văn Thố để tưởng nhớ công ơn anh hùng liệt sĩ Trừ Văn Thố, từ đó góp phần gìn giữ giá trị lịch sử của địa phương.