Заработал новый АИС

На сайте ВГД собираются люди, увлеченные генеалогией, историей, геральдикой и т.д. Здесь вы найдете собеседников, экспертов, умелых помощников в поисках предков и родственников. Вам подскажут где искать документы о павших в боях и пропавших без вести, в какой архив обратиться при исследовании родословной своей семьи, помогут определить по старой фотографии принадлежность к воинским частям, ведомствам и чину. ВГД - поиск людей в прошлом, настоящем и будущем!

Москвичи могут узнать о рождении, браке и смерти своих родственников с 1772 до 1917 года.
В столичном Главархиве появился онлайн-сервис «Моя семья», благодаря которому все желающие смогут посмотреть метрические книги и узнать из них о своих родственниках, которые когда-то жили в Москве и Московской губернии.

«В преддверии новогодних праздников мы открыли новый онлайн-сервис “Моя семья”. Здесь можно узнать о рождении, браке и смерти своих предков с 1772 до 1917 года. Раньше для этого необходимо было приезжать в архив, сейчас найти информацию можно не выходя из дома. Сервис включит в себя сведения из всех метрических книг, которые хранятся в московском архиве. Это метрические книги более 1400 храмов. Именно церкви до 1917 года выполняли функции современных отделов ЗАГС — вели записи актов гражданского состояния. В первую очередь размещены сведения, которые вызывают наибольший интерес у горожан. В следующем году мы планируем расширить онлайн-сервис материалами о составе семей горожан до 1917 года», — рассказала Анастасия Ракова, заместитель Мэра Москвы по вопросам социального развития.
Метрические книги предлагают много интересного. Например, в актовых записях о рождении, кроме имен, как правило, указывали место приписки ребенка (откуда родом), его сословие или род занятий родителей, а также имена крестных. В роли последних чаще всего выступали родственники — это значит, что отследить другие семейные линии можно и по ним.

В актовых записях о браке указывался возраст жениха и невесты, их сословие, а также то, какой это брак по счету, могли указать родителей молодоженов и отметить род занятий жениха. Еще сюда вписывали имена поручителей с местом их приписки.

1234567
По актовым записям о смерти можно узнать возраст умершего, причину кончины и место захоронения.

Уже в следующем году сервис дополнят единственными в своем роде документами, которые отражают полный состав семьи. Речь идет о ревизских сказках (своеобразных переписях населения того времени, которые вели госучреждения) и исповедных ведомостях (их составляли священники по каждому церковному приходу).

С января этого года архивное ведомство приняло на хранение свыше 2500 документов личного происхождения. Всего же в Главном архивном управлении хранится более 100 тысяч писем, дневников, открыток, рисунков, альбомов, заметок и других материалов, которые передали горожане.

https://cgamos.ru/metric-books/

ОБНОВЛЕННЫЙ ФАЙЛ В ФОРМАТЕ EXCEL с полной информацией
ПО МЕТРИЧЕСКИМ КНИГАМ, выложенным на сайте ЦГА Москвы,
с учетом изменений на сайте с 28/11/2021 по 18/12/2021.

См. вложение.

В ДЕКАБРЕ ДОБАВЛЕНО 255 НОВЫХ МЕТРИЧЕСКИХ КНИГ:

ДОБАВЛЕНЫ НОВЫЕ ДЕЛА:

Фонд 203 опись 780: 2470, 2471, 2472, 2474, 2475, 2476, 2477, 2480, 2481, 2482, 2483, 2485, 2487, 2492, 2493, 2494, 2495, 2496, 2498, 2499, 2500, 2503, 2504, 2505, 2507, 2508, 2509, 2510, 2511, 2512, 2514, 2515, 2516, 2517, 2518, 2520, 2524, 2525, 2526, 2527, 2528, 2530, 2531, 2532, 2533, 2534, 2535, 2538, 2539, 2540, 2541, 2542, 2543, 2544, 2546, 2548, 2549, 2551, 2555, 2559, 2561, 2562, 2563, 2564, 2566, 2567, 2568, 2569, 2570, 2572, 2574, 2575, 2578, 2582, 2585, 2586, 2587, 2589, 2590, 2591, 2593, 2598, 2605, 2606, 2610, 2611, 2612, 2614, 2615, 2617, 2618, 2619, 2620, 2621, 2623, 2625, 2626, 2628, 2629, 2630, 2632, 2634, 2638, 2640, 2642, 2643, 2645, 2646, 2647, 2648, 2654, 2655, 2659, 2662, 2664, 2665, 2666, 2667, 2668, 2670, 2674, 2675, 2677, 2678, 2680, 2682, 2684, 2685, 2686, 2687, 2688, 2689, 2690, 2691, 2693, 2694, 2695, 2697, 2698, 2700. (Всего 140шт)

Фонд 1607 опись 1: 4, 5, 128, 260. (Всего 4шт)

Фонд 1813 опись 1: 3, 9, 10, 11, 18, 19, 20, 21, 22, 23, 26, 30, 32, 33, 34, 37, 38, 41, 42, 44, 48, 50, 53, 54, 55, 56, 57, 58, 60. (Всего 29шт)

Фонд 2192 опись 1: 1, 4, 5, 6, 7, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 38А, 41, 42, 43, 44, 45, 48, 49, 52, 53, 54, 56, 57, 58, 59, 60, 61, 62, 63, 64, 65, 67, 68, 69, 70, 71, 72, 73, 74, 75, 76, 77, 78, 79, 80, 81, 82, 83, 84, 85, 86, 89, 91, 92, 93, 95, 96, 97, 98, 99, 100, 101, 102, 103, 104. (Всего 82шт)

Изменений в описаниях по ранее выложенным книгам нет.

Всего на текущий момент: 6753 книги, 2 582 705 страниц.

Старый сайт количество страниц считает правильно, новый сайт показывает на 279 страниц меньше.
Скорее всего новый сайт из-за какой-то ошибки не учитывает количество страниц одной из книг.

Сканирование проводилось через старую версию сайта. По какой-то причине названия недавно добавленных фондов (2192) и описей (2192-1, 520-1) там пустые, в то время как на новой версии сайта они заполненные. Т.е. изменения заголовков фондов / описей в новой версии сайта не всегда отображаются в старой. Надеюсь, описания дел одинаковые в двух версиях сайта.

Среди новых выложенных книг описания заполнены у всех. По старым делам описания отсутствуют у 136 книг.

Дела с незаполненными описаниями легко выбираются в экселе.
Для этого в фильтре по колонке "Название", нужно снять все галочки и оставить только одну "пустые".

Список всех дел с незаполненными описаниями указан ниже в скрытом блоке.

xbox, Спасибо!

доброго дня, возможно уже обсуждали, я не могу просмотреть дела во вкладке фонды (ОХД до 1917)..ни на старой версии , ни на новой...хочу понять, проблема у всех или только у меня такие трудности
то, что было в ПДФ ...сейчас "сквозной поиск" сразу выкидывает на страницу МК в Моя Семья...а я ищу описи ф. 203 , где они указаны в каком виде дело в архиве ( на бум носителе или СФ)...

camy написал:

[q]
было в ПДФ
[/q]

В новой ПДФ загружается, в старой - ошибка.

xbox написал:

[q]
Открыл на просмотр произвольную книгу в браузере Firefox (браузер скорее всего любой подойдет). Развернул скан на весь экран. Далее мышкой нажал на иконку "следующая картинка". Повторил переход на следующую картинку сто раз подряд за несколько секунд. С какой скоростью успеваете жать на иконку "следующая" с такой и можно жать. Дожидаться загрузки каждой картинки не требуется. После того, как счетчик изменился с 1 на 100, открыл в соседней вкладке новостной сайт и почитал, что сейчас в мире твориться. В мире, скажу я вам, никакой стабильности... Пока я несколько минут читал новости, картинки с 1 по 100 в фоновом режиме в соседней вкладке продолжали загружаться.

После этого открываем опять вкладку архива. В меню браузера в правом верхнем углу выбираем "Сохранить [страницу] как" (или жмем Ctrl+S), в меню сохранения в списке "тип файлов" выбираем "веб-страница полностью" и указываем папку, куда сохранить страницу и имя с каким сохранить. Если, к примеру, указать название для сохранение страницы - page555, то в папке сохранения создается вложенная папка с названием page555_files. Заходим в эту вложенную папку и видим там немного "мусора" и сто наших файлов со сканами с названиями 000001.jpg и далее. Выделяем 100 файлов и переносим, куда нужно. При этом способ сработает даже в тех случаях, когда в именах исходных файлов чередуется регистр (jpg/JPG) и когда нарушена сортировка.

Я тестировал на быстром компьютере и быстром интернет канале. Проблем не возникло. Теоретически, если так попробовать не 100 картинок за раз "поставить в очередь", а в несколько раз больше, и/или если интернет канал медленный или сервер архива перегружен, то может так получиться, что какие-нибудь файлы не загрузятся из-за того, что не уложатся в тайм аут на скачивание. Форсировать загрузку более 100 файлов я не пробовал. Может и не будет проблем.

Для загрузки одной картинки есть способы более удобные и для загрузки множества картинок есть другие способы более удобные.
Но здесь примечательно то, что фактически не используется никакое "читерство" в виде качалок и других инструментов.

"Элла Петровна, это же чистый спирт, достаточно и половины дозы!"
[/q]

Небольшое дополнение к лайф-хаку.
Можно не нажимать на иконку "следующая картинка", а нажать сразу на среднюю кнопку типа "воспроизведения" в магнитофоне, проигрывателе. Программа перейдет в режим автоматического просмотра. После этого жмете "Esc" для выхода из полноэкранного режима, а затем Ctrl+S и далее все как в предыдущей инструкции. В результате сохраняется полностью вся книга. Но в конце лучше провести проверку, потому что иногда несколько файлов (1-3) могут выпасть.

НОВЫЕ МЕГАТАБЛИЦЫ В ЭКСЕЛЕ - 203 И 51 ФОНД

Попрошу Вас перед новым годом собрать все остатки вашего внимания, потому что дальше будет описана чистая магия.

Представляю новые экселевкие таблицы, которые могут быть еще более полезные, чем старые.
Эти таблицы будут полезны всем, и исследователям, и сотрудникам архива.
Это не замена старых таблиц, а дополнение к дальнейшее развитие.

Для того, чтобы их получить, собираются данные из НСА (Научно справочный аппарат), затем объединяются с данными по метрикам, исповедкам, и ревизским сказкам, собранным на основном сайте ЦГА Москвы в разделе "Моя семья". Данные в этих источниках не связанны и для того, чтобы найти соответствие строк в разных источниках формируются "ключи", которые позволяют однозначно идентифицировать каждую запись и далее их сопоставлять друг с другом. После объединения, выбрасывается лишнее, проводится сравнение данных из двух источников, выделение ошибок, несоответствий, а также строк, содержащих "волшебный порошок".

В данной таблице представлен:

203 фонд - записи по всем метрическим книгам (описи 745,750,764,768,771,776,777,780,782) - 9797 записей
203 фонд - записи по исповедным ведомостям (опись 747) - 2112 записей
51 фонд - записи по ревизскими сказкам (опись 8) - 981 запись

По указанным разделам данные в НСА представлены довольно полно. Таким образом, первое, что мы получаем:
Полную опись в табличном виде по всем метрикам, исповедкам и ревизским сказкам 203 и 51 фонда.

До этого в трех отдельных таблицах был только список дел, выложенных на сайте в разделе Моя семья (а это далеко не все, что есть) и многостраничные сканы описей в PDF формате.
Описи в PDF формате точные, но они разбросаны по разным томам, отметки там стоят по состоянию на дату сканирования, несколько лет назад, а главное в них очень непросто и очень не быстро искать даже при наличии опыта.

Поскольку данные объединяются, теперь у нас в файле сразу два описания.
Первое есть всегда - из базы НСА, второе есть в случае, если дело выложено на основном сайте.
Можно отфильтровать дела, выложенные на сайте без описания и сразу посмотреть описание из базы НСА.
Или можно Если есть какие-то сомнения в описании на сайте, можно сравнить его с данными из НСА.

Для всех выложенных на сайте дел, есть ссылка для просмотра в разделе "Моя семья".

Объединение данных открывает нам новые возможности.

Можно посмотреть отметки ОФП в базе НСА и сравнить их с сайтом.

1. Таким образом, в базе НСА можно найти записи, в которых забыли поставить отметку ОФП. Если дело выложено на сайте, то оно точно отсканировано и отметка в НСА должна быть. Но в представленном куске НСА есть 104 дела, где забыли поставить эту отметку.

2. А можно найти записи с тем самым "волшебным порошком". Если в базе НСА стоит отметка ЭФП, а дело не выложено на сайт. Это, как минимум, означает, что такое дело можно посмотреть без заказа в читальном зале. А еще это может означать, что, скорее всего, в последующих выгрузках при обновлении раздела сайта "Моя семья" уже отсканированные дела будут первоочередными кандидатами.

Всего найдено 385 оцифрованных дел, которых пока нет на сайте. Среди них 151 метрическая книга 203 фонда 745 описи, 191 метрическая книга 203 фонда 780 описи, две исповедные ведомости и два частично отсканированных дела с ревизскими сказками.

Публикую список оцифрованных, но не выложенных дел с метрическими книгами по 780 описи 203 фонда.

535, 891, 892, 893, 894, 895, 896, 897, 898, 927, 928, 929, 930, 931, 932, 933, 935, 937, 938, 939, 941, 942, 946, 947, 948, 949, 950, 951, 953, 954, 955, 957, 958, 959, 960, 961, 962, 963, 964, 965, 966, 967, 968, 969, 970, 971, 972, 973, 974, 975, 976, 978, 981, 982, 983, 984, 985, 986, 987, 988, 990, 991, 993, 994, 995, 996, 997, 998, 1000, 1001, 1002, 1003, 1004, 1005, 1006, 1007, 1008, 1009, 1010, 1011, 1012, 1013, 1014, 1015, 1016, 1017, 1018, 1020, 1021, 1022, 1023, 1024, 1025, 1027, 1031, 1041, 1043, 1045, 1047, 1110, 1131, 1330, 1343, 1352, 1660, 1727, 1763, 1857, 1902, 1904, 1908, 1911, 1919, 1920, 1922, 1923, 1924, 1925, 1927, 1933, 1942, 1944, 1947, 1949, 1950, 1955, 1958, 1961, 1965, 1972, 1973, 1974, 1975, 1979, 1983, 1987, 1988, 1989, 1992, 1993, 1994, 2000, 2002, 2004, 2006, 2007, 2009, 2012, 2013, 2015, 2019, 2020, 2021, 2023, 2027, 2028, 2029, 2053, 2111, 2556, 2703, 2705, 2706, 2707, 2708, 2710, 2712, 2713, 2714, 2715, 2716, 2717, 2719, 2720, 2724, 2727, 2729, 2730, 2731, 2732, 2733, 2734, 2735, 2736, 2737, 2738, 2740, 2741, 2742, 2743, 2744, 2745, 2747, 2890, 4038, 4298, 4379, 4390, 5023 (Всего 199 шт)

И да, здесь есть Можайск с номерами после 2720++. Причем появился он недавно. Еще две недели назад не было.

Полный список таких дел по всем описям с подписанными приходами можете посмотреть самостоятельно в экселе.

Для более удобной фильтрации дел по признаку ЭФП, я добавил столбец "ЭФП-diff".
В этом столбце может быть три значения:

"НСА, Сайт" - это норма, дело имеет пометку ЭФП в базе НСА и оно выложено на сайт
"Сайт" - дело выложено на сайт, но у него нет пометки ЭФП в базе НСА. Такие записи помечены красным. Всего таких дел 103шт. Это "флаг" для работников архива, чтобы внесли пометку в НСА.
"НСА" - а это те самые дела с "волшебным порошком". То, что отсканировано, но не выложено. Они помечены "золотым" цветом.

Кроме этого появилась возможность сверить год и количество страниц в двух источниках. Если есть расхождение, то значит высокая вероятность ошибки.
Год сравнивается даже при условии вольного написания. Например, запись "(1912,1913-1918) и " 1912-" будут считаться совпадающими.
По году дополнительно проверяется слишком низкое значение. Разница и ошибки в записях по году отмечаются красной заливкой.

При сравнении количества страниц, обычно по данным с основного сайта получается примерно на 5 больше, чем по данным в НСА. Скорее всего, это получается из-за скана обложки и последних листов. Это нормально и такую разницу я не отмечал. Но очень много дел, где разница в количестве страниц может быть 100/200/300 и более. К примеру, в одном деле по базе НСА 89 страниц, а на сайте 296 страниц. И поскольку на сайте есть скан каждой страницы, явно в базе НСА значение неправильное.

Ячейки с расхождением количества страниц, я не стал заливать цветом, чтобы не сильно перегружать визуальное восприятие. Для таких ячеек с расхождением установлен только шрифт - красный и полужирный. Кроме того, таким образом, помечены строки только с расхождением количества больше чем на 50 страниц. Но даже при этом, таких записей получилось 311шт.

Вообще все типы ошибок не стал раскрашивать цветом. Применений прилагаемого файла для контроля ошибок может быть гораздо больше. Например, можно отобрать записи в НСА, у которых вообще не указан год, но при этом год указан в записях на сайте. Или наоборот. И после этого можно год быстро скопировать из одной базы в другую.

При наличии расхождений в двух версиях можно перейти прямо из таблицы на сайт и посмотреть сканы. В 99% случаев в разделе Моя семья будет более точная информация.

И еще одна "киллер-фича" - это столбец "Чистый год".
В записях НСА в столбце "год начала" год может записываться, как угодно. Может быть один год, может быть несколько через запятую, может диапазон с дефисом, может полная дата c месяцем прописью итп. Иногда туда попадают даже комментарии. В результате фильтровать и тем более сортировать по этой колонке нельзя. Чтобы по ней отфильтровать, в фильтре в экселе для одного года придется устанавливать десятки галочек и все равно можно что-то пропустить.

В колонке "Чистый год" я оставил только одно значение - один четырёхзначный год. После этого по этой колонке можно фильтровать и сортировать. И если, например, выбрать в этой колонке "1871", то в результатах фильтра будут показаны и "1871-1874", и "19 сентября 1871-1898" итп.
Поскольку в этом столбце только числа, их фильтровать можно не только по отдельному значению, а по диапазону. Для этого в экселе выбирается "числовые фильтры" -> "между" -> 1860 и 1870.

Обращаю внимание, особенно сотрудников архива, что эксель позволяет фильтровать и сортировать колонки не только по значению, но и по цвету.
Это может пригодиться для выбора всех строк с каким-нибудь типом ошибки.
Например, чтобы выбрать все строки с расхождением и ошибками в годе, ставим фильтр по цвету - красная заливка.
А для того, чтобы выбрать все записи с большим расхождением по количеству страниц, ставим фильтр по цвету - красный шрифт.

Около трех недель назад, вот здесь https://forum.vgd.ru/post/481/116535/p3997056.htm#pp3997056 я написал, что в базе НСА содержится более 2195 записей дубликатов. С тех пор их базы удалили более 2тыс дубликатов. На текущий момент дубликатов осталось около 50шт. Когда-нибудь позже я выложу список.

Радует, что к замечаниям прислушиваются. Я надеюсь, сотрудники архива и в этот раз обратят внимание на возможные ошибки в наполнении НСА и сайта и все поправят. Полный список ошибок можно с помощью фильтров выбрать в файле, а отдельные ошибки я перечислю в скрытом блоке ниже.

Поскольку на форуме к одному сообщению нельзя одновременно прикладывать картинки и не-картинки, несколько скриншотов для иллюстрации присоединю к следующему сообщению

P.S. Прилагаемый файл обновлен 22.12.2021, 11:30

Иллюстрации к предыдущему сообщению.

xbox написал:

[q]
НОВЫЕ МЕГАТАБЛИЦЫ В ЭКСЕЛЕ - 203 И 51 ФОНД
[/q]

Спасибо! очень полезная табличка!

xbox написал:

[q]
203 фонд - записи по всем метрическим книгам (описи 745,750,764,768,771,776,777,780,782) - 9797 записей
[/q]

По всем, которые есть в НСА? Это ожидаемо, что некоторых дел нет в НСА, хотя они существуют в описи в бумажном виде? Например, по моему селу Горячкино нет метрик на 1823-40 гг, это дела в диапазоне ф.203 о. 745 д. 1228-1525.

xbox написал:

[q]
В этом столбце может быть три значения:

"НСА, Сайт" - это норма, дело имеет пометку ЭФП в базе НСА и оно выложено на сайт
"Сайт" - дело выложено на сайт, но у него нет пометки ЭФП в базе НСА. Такие записи помечены красным. Всего таких дел 103шт. Это "флаг" для работников архива, чтобы внесли пометку в НСА.
"НСА" - а это те самые дела с "волшебным порошком". То, что отсканировано, но не выложено. Они помечены "золотым" цветом.
[/q]

Есть еще вариант - дело выложено на сайт, но его вообще нет в НСА. Например, ф. 203 о. 745 д. 2148. Его в табличке у вас тоже нет.

Krolia написал:

[q]
По всем, которые есть в НСА? Это ожидаемо, что некоторых дел нет в НСА, хотя они существуют в описи в бумажном виде? Например, по моему селу Горячкино нет метрик на 1823-40 гг, это дела в диапазоне ф.203 о. 745 д. 1228-1525.
[/q]

Если информации о деле нет в НСА и на сайте, то можно попробовать в архив написать, чтобы добавили. Чем более полная будет информация, тем всем будет удобнее.

Krolia написал:

[q]
Есть еще вариант - дело выложено на сайт, но его вообще нет в НСА. Например, ф. 203 о. 745 д. 2148. Его в табличке у вас тоже нет.
[/q]

Спасибо за комментарий. Я сразу такой вариант не учел. Изначально исходил из того, что в НСА есть пусть и не полностью оформленные, но всё же все записи по делам, которые выложены на сайт. Оказалось, что это не так. Проверил, таких "потерянных" дел оказалось примерно 170.

Программу переделал. Теперь в таблицу объединяются вообще все записи из двух источников.
Общий список дел увеличился примерно на те самые 170 записей. И ранее упомянутое Вами дело 203-745-2148 теперь в общем списке тоже присутствует.

В новой версии файла, если дело есть на сайте, но нет в НСА, то в таблицу оно копируется с комментарием "В НСА ДЕЛА НЕТ!!! Все данные с сайта!" и помечается красным цветом. При этом дела будут в отсортированном порядке, поиск и фильтрация по названию, году итп по нему будет работать.

Для иллюстрации прилагаю пару скриншотов, где показано, как дела выглядят в общем списке.

Полагаю, что сотрудникам архива нужно в первую очередь обратить на такие дела и добавить их в базу НСА.
Фильтруются в таблице они по тому же принципу, как было описано выше.

С одним-двумя делами выделение красным работает некорректно. Например, 51-8-292. Это связано с тем, что на сайте дела имеют сразу несколько уникальных номеров 292т.1, 292т.2, 292т.3. А в базе НСА, номера томов не отображаются, все такие дела представлены под одним номером, различить их по номеру и программно сопоставить со вторым источником невозможно.

Экселевский файл обновил в первоначальном сообщении:
https://forum.vgd.ru/post/481/116535/p4022786.htm#pp4022786

«Моя семья»: метрические книги из Главархива Москвы стали доступны