בניין יד לבנים אוצר את זכרם של בני אשקלון, חללי צה"ל, שהקריבו חייהם על מזבח תקומת ישראל ועל הגנת העם והמדינה.
ברחבה שבחזית הבניין ניצבת אנדרטה ולמרגלותיה מנהרה שעל קירותיה חקוקים שמות החללים.
מדי שנה, בערב יום הזיכרון לחללי צה"ל, מתכנסות משפחות החללים עם תושבי אשקלון לעצרת זיכרון והתייחדות עם זכר הנופלים.
במקום מתקיימות פעולות תרבות, טקסים וקונצרטים, חידון התנ"ך וימי עיון.
בית יד לבנים הוקם על ידי עיריית אשקלון והוא מנוהל על ידי עמותה ציבורית מקרב ההורים השכולים.