Объясните выражение: "Время собирать камни"

Выражение время собирать камни, значит что пришло время отвечать за свои совершенные дела и поступки.