Ilzenbergo dvaras buvo įkurtas XVI amžiaus pradžioje vieno pirklio, užsiemusio prekybos grūdais, sviestu, prieskoniais bei derva. Po to kai vokiečiai bei rusai pasikeisdami užiminėdavo šį kraštą, galiausiai nusistovėjo sovietų valdžia, o šis dvaras tapo visiškai apleistas. Kitų Lietuvos dvarų laukė dar niūresnis likimas - kai kurie taip ir liko neatstatyti. Tačiau plačiame ažuolų, klevų ir pušų glėbyje įsikūrę dvaro laukai bei ištekliais turtinga žemė suteikė dabartiniam dvaro šeimininkui vilties. Skirtingai nei kiti dirvožemiai Europoje, šio krašto žemė ilgai nebuvo kultivuojama, taigi neužteršta ji ir cheminiais mišiniais bei trąšomis.