Theo lời kể của những nông dân thành phố này, tỏi du nhập vào địa phương này theo những người Nhật Bản sang định cư Mỹ sau Thế chiến thứ nhất. Tất nhiên người dân Gilroy không sống nhờ việc buôn bán thứ gia vị đó mà thành phố này nổi tiếng với lễ hội thường niên lấy cảm hứng từ tỏi: Gilroy Garlic Festival. Thậm chí tên logo tên Gilroy cũng được hình tượng hóa từ của tỏi.