 Просьба в разделе новые темы на несколько сообщений по отдельным кладбищам – НЕ СОЗДАВАТЬ! Пишите в существующих областных (общих темах). Тему можно создавать только если Вы планируете ее продолжать вести и пополнять материалом.
Фотографии ОБЯЗАТЕЛЬНО!!! максимально подписываем из имеющейся информации (ФИО, надписи на обратной стороне, полный адрес и т.п.), и к сообщению прикрепляем через функцию «ВЫБРАТЬ файл» или «МЕНЕДЖЕР загрузки». Просьба через сторонние сервисы не прикреплять, если Вы хотите сохранить свое фото на нашем форуме. |
🌐 Epoisk.ru - ПОИСК захоронений на территории города Москва
| xbox
Сообщений: 1033
На сайте с 2020 г.
Рейтинг: 2133
| Приветствую всех. Хотел бы здесь открыть отдельную тему, относящуюся к сайту epoisk.ru в части возможности поиска по базе захоронений на территории г. Москва. Я потратил на разработку сайта epoisk.ru много времени и сил и мне есть, что рассказать, есть что обсудить с пользователями. Изначально на разработку нового раздела, который был запущен в начале мая 2024г, у меня ушло три месяца. На момент, когда я начинал делать раздел с поиском по захоронениям, разработчики Ритуала обещали запустить свой поиск через год. Еще раньше были обещания запустить другой поиск на портале mos.ru и на разработку закладывали полтора года, которые тоже прошли. Пока команды, обладающие значительными ресурсами, раздают обещания, сайт epoisk.ru в открытом доступе уже 14 месяцев позволяет всем желающим искать захоронения в г. Москве. На момент запуска это был единственный подобный сайт. На текущий момент, если я ничего не пропустил, аналоги пока тоже отсутствуют. Но даже, когда аналоги запустятся, они вряд ли предоставят функционал, который уже сейчас появился на epoisk.ru. (Об этом будет отдельное сообщение ниже). Многие с сайтом уже знакомы. Историю создания и некоторые другие моменты я уже описывал здесь https://epoisk.ru/let-it-be/. Не буду повторяться. В базе пока около 1.8млн человек. Будем надеяться, что со временем станет больше. На этом форуме есть уже несколько смеженных тем, но они не совсем подходят. Не хотелось бы потеряться в многостраничной теме с обсуждением вопросов из разных областей и в теме, подразумевающей размещение по одной ссылке на один ресурс итп. Есть еще такая тема: E-POISK Продвинутый онлайн поиск и просмотр дел в ЦГА Москвы (https://forum.vgd.ru/462/139318/) - Эта тема относится к изначальному и основному направлению сайта epoisk.ru - поиску метрических книг и других дел в ЦГА Москвы (архиве). Тема расположена в соответствующем разделе форума и не хотелось бы злоупотреблять доверием и там обсуждать захоронения. Если появятся вопросы по сайту epoisk.ru, связанные с ЦГА Москвы, то пишите в тему по указанной ссылке. Начальная страница Поиска захоронений на территории г. Москва:
https://epoisk.ru/burmsk/ Обсуждение ниже.
   ---
epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (31) |
| NatashaK65 Новичок
Москва
Сообщений: 6
На сайте с 2024 г.
Рейтинг: 1 | Наверх ##
30 сентября 15:49 А у меня при выборе "Экспорт"-"json", загружается файл data-64023-2024-03-26.json
И вчера и сегодня загружается эта дата! ?? | | |
| xbox
Сообщений: 1033
На сайте с 2020 г.
Рейтинг: 2133
| Наверх ##
30 сентября 17:05 yante написал: [q] https://data.mos.ru/opendata/6...ageIndex=0 - тут выбираю "Экспорт" потом "json: и получаю архив с файлом data-64023-2025-04-03.json
Получается, апрельский?
Что я делаю не так?[/q]
NatashaK65 написал: [q]
yante написал:[q] А у меня при выборе "Экспорт"-"json", загружается файл data-64023-2024-03-26.json
И вчера и сегодня загружается эта дата! ??[/q]
[/q]
См. скриншот выше. Там есть этот файл с названием. Для меня показатель свежести - открываем архив и смотрим дату вложенного файла. Эта дата будет реальной датой актуализации файла. Эта дата не будет означать, что в тот день что-то добавилось, но, если дата древняя, то значит актуализация не происходит. Какая-то ошибка на портале. А что там не так, может сказать только тот, у кого есть доступ к внутренней инфраструктуре. Например, как вариант может быть такой сценарий - файлы генерируются каждый день, а какая-нибудь неправильная сортировка подсовывает нам не последний. Или может быть какое-то вечное кэширование, которое подсовывает старый файл. А может быть запускается процедура экспорта, которая на сервере из-за нехватки выделенной памяти завершается с ошибкой, а нам отдается последний файл, который был без ошибки экспорта. А еще очень вероятный сценарий - место на диске закончилось, с учетом того, что каждый день по 400МБ только на этом наборе данных в виде отдельной копии должно создаваться. итп. Вариантов, почему не работает может быть очень много. ---
epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (6) |
| xbox
Сообщений: 1033
На сайте с 2020 г.
Рейтинг: 2133
| У меня для Вас две новости. Хорошая и вторая.
1. Кроме тех ~200 тысяч человек, про добавление которых я писал несколько дней назад, буквально вчера добавили еще 900 тысяч человек. Итого за последние пару недель в базу на портале открытых данных добавлено примерно 1,1 млн человек. Число записей в базе за короткое время выросло примерно на 61%. Эти записи я успешно импортировал на тестовую копию сайта epoisk, развернутую на домашнем компьютере.
2. Вторая новость заключается в том, что я уже приступил к выгрузке данных в Интернет, но столкнулся с нехваткой ресурсов на хостинге. 12 ГБ оперативной памяти на сервере не хватает для процедуры импорта и подготовки данных. Поэтому мне нужно еще время, чтобы переписать процедуру импорта. Предварительно думаю, что нужно будет на домашнем компьютере большой файл с источником нарезать на несколько более мелких, а на сервере их обрабатывать при импорте по отдельности и обратно собирать все данные уже в БД. Поэтому мне нужно еще время на переделки.
P.S. В прилагаемых файлах итоговые цифры до обновления и после. Можете посмотреть, какие кладбища добавились. Пока это данные с тестовой машины.
   ---
epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (36) |
| xbox
Сообщений: 1033
На сайте с 2020 г.
Рейтинг: 2133
| Наверх ##
2 октября 13:34 2 октября 14:22 Ну, друзья, и дела происходят чуть ли не каждые пару дней. Буквально сегодня в исходной базе на портале открытых данных отображаемое количество участков увеличилось на ~126тыс, а это, еще около 342 тыс человек. Это кроме того числа новых записей, про которое писал ранее. По технической части я пока не успел исправления сделать для импорта данных на сайт. В рабочие дни на это не хватает времени. Может с такой скоростью обновления источника и не стоит торопиться, чтобы потом два раза в магазин не бегать?  P.S. Обновленная статистика (пока с тестового контура) в прилагаемом файле.
 ---
epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (24) |
tirael Подмосковье Сообщений: 824 На сайте с 2023 г. Рейтинг: 2597 | Наверх ##
2 октября 13:44 2 октября 13:44 xbox написал: [q] Может с такой скоростью обновления источника и не стоит торопиться, чтобы потом два раза в магазин не бегать? a_003.gif[/q]
Возможно лучше пока понаблюдать. От того, что мы сможем получить выгрузку в epoisk на 1-2 недели, да даже месяц позже, никто ничего не потеряет. Главное чтобы Вы свое время потратили меньше и не пришлось переделывать, если у них что-то снова поменяется. ---
Ищу сведения: Хижниковы,Хижняковы,Хижинковы (ст.Новочеркасская), Бродские (Одесса, Туркестанский край), Коломойцевы,Зоновы (Никополь,СПб,Мск) Погореловы (Воронеж. губ до1925, Крым/Кубань с1925, Ленинград с 60х), Саватеевы/Савватеевы (Владимирская губ, Москва и обл. Кулебякино), Моисеевы (Рязанская г | | Лайк (12) |
| kazokin Новичок
Москва
Сообщений: 10
На сайте с 2022 г.
Рейтинг: 10 | Наверх ##
2 октября 23:15 2 октября 23:25 Московский Ритуал называет 127 кладбищ.... Если исполнитель портала открытых данных действительно намерен выполнить задание до конца года, то нас ждёт в ближайшее время ещё много добавлений к текущим цифрам... | | Лайк (2) |
| DariaSh
Сообщений: 258
На сайте с 2023 г.
Рейтинг: 1148
| Наверх ##
3 октября 13:43 3 октября 14:31 xbox, скажите, пожалуйста, правильно ли я понимаю, что самые актуальные данные хранятся в geojson? В json у меня нет недавно появившихся кладбищ (Николо-Архангельское, Преображенское и др., которые так нужны). Смогла json сконвертировать только через командную строку, всего получилось 656293 строк (захоронений), как я понимаю, а в excel только ограниченное количество строк, к великому сожалению...  В любом случае, то, что уже появилось - такой подарок и шок одновременно! Очень жду базу! Спасибо! P.s. Похоже, в excel все есть. Осталось его полностью открыть  | | Лайк (1) |
guenther Понемногу отовсюду Сообщений: 789 На сайте с 2019 г. Рейтинг: 1876 | Наверх ##
3 октября 15:21 DariaSh, надо загружать актуальный набор данных, выставляя последнию версию набора в параметрах запроса | | Лайк (1) |
| xbox
Сообщений: 1033
На сайте с 2020 г.
Рейтинг: 2133
| Наверх ##
5 октября 21:08 5 октября 21:23 В базу захоронений в г. Москве добавлено 2,1млн человек! Общее текущее количество в базе - без малого 4млн человек!https://epoisk.ru/burmsk/Как обычно, посетители сайта epoisk.ru первыми могут получить доступ к удобному поиску по этим данным. Если я ничего не пропустил, то в открытом доступе пока аналогов нет. Выходные провел с пользой. Переписал конвертацию и импорт исходных данных, добавил немного магии и ускорил поиск в несколько раз. Но нужно понимать, что с таким количеством записей при некоторых вариантах поиска не все запросы будут быстро выполняться. Самый быстрый поиск - это по одной Фамилии без лишних параметров. Если вы ищите по не самой распространенной фамилии, то всегда рекомендую так начинать, а потом глазами отфильтровать. И быстрее и ничего не пропустите. Попробовал поискать по своим фамилиям - количество найденных результатов выросло более чем в два раза относительно поиска по базе до обновления. Пополнения идут практически ежедневно. По мелочи (100-200тыс новых записей) я уже писать не буду. Теперь с применением обновлений проблем быть не должно вне зависимости от объема. Если на портал открытых данных выложат 10 млн записей, то это уже не будет проблемой. Статистику уже загруженных на епоиск данных можно отслеживать здесь: https://epoisk.ru/burmsk/stat/Текущие показатели в прилагаемых файлах.
  ---
epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (46) |
FCLMНовичок  Москва Сообщений: 13 На сайте с 2025 г. Рейтинг: 4 | Наверх ##
6 октября 0:36 6 октября 11:54 Большое спасибо! Действительно, многое добавилось. По своему списку нашли пятерых. Работает на космической скорости. Обычные запросы мгновенно, почти двадцать тысяч Ивановых выдает секунды за 2-3.
Правда, многих кладбищ еще нет в списках. Хованских и Митинского, например. Но добавление Домодеовского и Николо-Архангельского внушает оптимизм. Ждем.
Еще заметил, что на Николо-Архангельском намного больше захоронений (194 614 захоронений и 487 362 людей), чем на Домодедовском (139 462 захоронений и 271 784 людей), хотя по площади они примерно одинаковые. Первое обгоняет за счет колумбариев? Или Домодедовское не полностью добавили? При этом на НА намного больше "плотность" людей на одно захоронение.
Upd: нет. колумбарии на Николо-Архангельском вообще не добавились. ---
Некрополь «Локомотив»
t.me/necropol_lokomotiv
vk.com/necropol_lokomotiv | | Лайк (7) |
|
Для тех кто ищет на английском языке https://forum.vgd.ru/post/342/171467/p5456259.htm#pp5456259