В семье Г.В. Осорьина и праведной Иулиании было 13 детей, из которых семь дожили до совершеннолетия. Известны имена пятерых сыновей: Григорий (родился раньше 1574 г.), Каллистрат (Дружина; родился в 1578 г.), Иван (родился в 1580 г.), Георгий (родился в 1587 г.) и Дмитрий (родился в 1588 г.), последним ребёнком была дочь, впоследствии принявшая схиму (родилась в 1590 г.). Вместе с супругами жили родители Г.В. Осорьина. Согласно муромской десятне, в 1578 г. Г.В. Осорьин был боярским сыном первой статьи. «На государевы службы» он обязан был являться «на коне в пансыре, в шеломе, в саадаке, в сабле, да три человека на конех, в пансырех, в шапках в железных, в саадацех, один с копьем, человек на мерине с юком». При царе Фёдоре Ивановиче, между 1584 и 1588 гг., Г.В. Осорьин «за старость и за увечье» был отставлен от службы, его поместье перешло к старшему сыну, который в конце 1588 г. был убит холопом на охоте. 11 марта 1589 г. следующему сыну Г.В. Осорьина, Григорию, в Москве была выдана ввозная грамота на поместье отца в Нижегородском уезде – деревня Ярцово-Чирьево, селище Олисеевское с пустошами Вордогино, Веретея и Вочнева. За это пожалование Григорий был обязан помимо службы царю «отца своего и мать кормит до их живота, а братью кормит до тех мест, как поспеют в нашу службу». Однако в 1589/1590 г. Григорий был убит. В соответствии с ввозной грамотой, выданной Осорьиным в Москве 4 сентября 1590 г., поместье погибшего на царской службе Григория было возвращено Г.В. Осорьину, до того времени пока кто-либо из оставшихся его сыновей на царскую службу «поспеет и будет в пятнатцать лет, и он с того отца своего поместья учнет… службу служити и его, Юрья, и меньшую братью, и сестру кормить, и, вскормив, сестру замуж выдать». После смерти двух старших сыновей праведная Иулиания просила у супруга разрешение принять монашеский постриг, Г.В. Осорьин не согласился, но они дали обет воздерживаться от супружеской жизни. По свидетельству «Повести…», после кончины Г.В. Осорьина, похороненного в Лазаревской церкви «честно», праведная Иулиания почтила его память «пением, и молитвами, и сорокоусты, и милостынею», впоследствии посвятила свою жизнь служению Богу. Согласно «Повести…», праведная Иулиания прожила во вдовстве девять лет, до эпидемии, случившейся в царствование Бориса Фёдоровича Годунова, очевидно в 1601–1603 гг. Следовательно, Г.В. Осорьин скончался около 1592–1593 гг. Правда, в «Повести…» говорится о том, что Г.В. Осорьин и праведная Иулиания «по разлучении плотьне» прожили десять лет, но это известие исследователям представляется хронологически неправдоподобным. Праведная Иулиания скончалась 2 января 1604 г., 10 января она была погребена рядом с могилой Г.В. Осорьина. После окончания Смутного времени, как полагают исследователи, между 1613 и 1615 гг., над могилами супругов была возведена тёплая церковь во имя архангела Михаила. Рядом с родителями похоронили схимницу Феодосию (Осорьину). 10 августа 1614 (или 1615) г., во время похорон сына Г.В. Осорьина и праведной Иулиании Георгия, был обретён гроб с нетленными мощами святой, полный «мира благовонна». После помазания миром многие больные исцелились. В связи с этим событием Каллистрат (Дружина) Осорьин написал «Повесть о праведной Иулиании» («Месяца генваря в 2 день успение святыя праведныя Улиянеи, Муромскиа чюдотворицы» или «Житие и преставление святыя, и преподобныя, и праведныя матере нашея Иулиании Лазаревския»), в которой биографии Г.В. Осорьина уделяется большое внимание.