Epoisk.ru - Поиск захоронений на территории г. Москва
| xbox Сообщений: 1024 На сайте с 2020 г. Рейтинг: 2074
| Наверх ##
30 сентября 17:05 yante написал: [q] https://data.mos.ru/opendata/6...ageIndex=0 - тут выбираю "Экспорт" потом "json: и получаю архив с файлом data-64023-2025-04-03.json Получается, апрельский? Что я делаю не так?[/q]
NatashaK65 написал: [q] yante написал:[q] А у меня при выборе "Экспорт"-"json", загружается файл data-64023-2024-03-26.json И вчера и сегодня загружается эта дата! ??[/q]
[/q]
См. скриншот выше. Там есть этот файл с названием. Для меня показатель свежести - открываем архив и смотрим дату вложенного файла. Эта дата будет реальной датой актуализации файла. Эта дата не будет означать, что в тот день что-то добавилось, но, если дата древняя, то значит актуализация не происходит. Какая-то ошибка на портале. А что там не так, может сказать только тот, у кого есть доступ к внутренней инфраструктуре. Например, как вариант может быть такой сценарий - файлы генерируются каждый день, а какая-нибудь неправильная сортировка подсовывает нам не последний. Или может быть какое-то вечное кэширование, которое подсовывает старый файл. А может быть запускается процедура экспорта, которая на сервере из-за нехватки выделенной памяти завершается с ошибкой, а нам отдается последний файл, который был без ошибки экспорта. А еще очень вероятный сценарий - место на диске закончилось, с учетом того, что каждый день по 400МБ только на этом наборе данных в виде отдельной копии должно создаваться. итп. Вариантов, почему не работает может быть очень много. --- epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (6) |
| xbox Сообщений: 1024 На сайте с 2020 г. Рейтинг: 2074
| У меня для Вас две новости. Хорошая и вторая.
1. Кроме тех ~200 тысяч человек, про добавление которых я писал несколько дней назад, буквально вчера добавили еще 900 тысяч человек. Итого за последние пару недель в базу на портале открытых данных добавлено примерно 1,1 млн человек. Число записей в базе за короткое время выросло примерно на 61%. Эти записи я успешно импортировал на тестовую копию сайта epoisk, развернутую на домашнем компьютере.
2. Вторая новость заключается в том, что я уже приступил к выгрузке данных в Интернет, но столкнулся с нехваткой ресурсов на хостинге. 12 ГБ оперативной памяти на сервере не хватает для процедуры импорта и подготовки данных. Поэтому мне нужно еще время, чтобы переписать процедуру импорта. Предварительно думаю, что нужно будет на домашнем компьютере большой файл с источником нарезать на несколько более мелких, а на сервере их обрабатывать при импорте по отдельности и обратно собирать все данные уже в БД. Поэтому мне нужно еще время на переделки.
P.S. В прилагаемых файлах итоговые цифры до обновления и после. Можете посмотреть, какие кладбища добавились. Пока это данные с тестовой машины.
   --- epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (36) |
| Tiffosa Москва Сообщений: 1024 На сайте с 2020 г. Рейтинг: 540
| >> Ответ на сообщение пользователя xbox от 1 октября 2025 1:26 Спасибо Вам огромное! --- Ищу потомков дворян Касселей, Арцимовичей, Александровых, Хотяинцевых, Симанских, Ульяниных, проживавших в начале 20-го века в Арзамасском уезде, Нижегородской губернии. | | Лайк (3) |
| xbox Сообщений: 1024 На сайте с 2020 г. Рейтинг: 2074
| Наверх ##
2 октября 13:34 2 октября 14:22 Ну, друзья, и дела происходят чуть ли не каждые пару дней. Буквально сегодня в исходной базе на портале открытых данных отображаемое количество участков увеличилось на ~126тыс, а это, еще около 342 тыс человек. Это кроме того числа новых записей, про которое писал ранее. По технической части я пока не успел исправления сделать для импорта данных на сайт. В рабочие дни на это не хватает времени. Может с такой скоростью обновления источника и не стоит торопиться, чтобы потом два раза в магазин не бегать?  P.S. Обновленная статистика (пока с тестового контура) в прилагаемом файле.
 --- epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (24) |
tirael Подмосковье Сообщений: 793 На сайте с 2023 г. Рейтинг: 2234 | Наверх ##
2 октября 13:44 2 октября 13:44 xbox написал: [q] Может с такой скоростью обновления источника и не стоит торопиться, чтобы потом два раза в магазин не бегать? a_003.gif[/q]
Возможно лучше пока понаблюдать. От того, что мы сможем получить выгрузку в epoisk на 1-2 недели, да даже месяц позже, никто ничего не потеряет. Главное чтобы Вы свое время потратили меньше и не пришлось переделывать, если у них что-то снова поменяется. --- Ищу сведения: Хижниковы,Хижняковы,Хижинковы (ст.Новочеркасская), Бродские (Одесса, Туркестанский край), Коломойцевы,Зоновы (Никополь,СПб,Мск) Погореловы (Воронеж. губ до1925, Крым/Кубань с1925, Ленинград с 60х), Саватеевы/Савватеевы (Владимирская губ, Москва и обл. Кулебякино), Моисеевы (Рязанская г | | Лайк (12) |
| kazokin Новичок
Москва Сообщений: 7 На сайте с 2022 г. Рейтинг: 8 | Наверх ##
2 октября 23:15 2 октября 23:25 Московский Ритуал называет 127 кладбищ.... Если исполнитель портала открытых данных действительно намерен выполнить задание до конца года, то нас ждёт в ближайшее время ещё много добавлений к текущим цифрам... | | Лайк (2) |
| DariaSh Сообщений: 271 На сайте с 2023 г. Рейтинг: 1124
| Наверх ##
3 октября 13:43 3 октября 14:31 xbox, скажите, пожалуйста, правильно ли я понимаю, что самые актуальные данные хранятся в geojson? В json у меня нет недавно появившихся кладбищ (Николо-Архангельское, Преображенское и др., которые так нужны). Смогла json сконвертировать только через командную строку, всего получилось 656293 строк (захоронений), как я понимаю, а в excel только ограниченное количество строк, к великому сожалению... В любом случае, то, что уже появилось - такой подарок и шок одновременно! Очень жду базу! Спасибо! P.s. Похоже, в excel все есть. Осталось его полностью открыть | | Лайк (1) |
guenther Понемногу отовсюду Сообщений: 785 На сайте с 2019 г. Рейтинг: 1827 | Наверх ##
3 октября 15:21 DariaSh, надо загружать актуальный набор данных, выставляя последнию версию набора в параметрах запроса | | Лайк (1) |
| xbox Сообщений: 1024 На сайте с 2020 г. Рейтинг: 2074
| Наверх ##
5 октября 21:08 5 октября 21:23 В базу захоронений в г. Москве добавлено 2,1млн человек! Общее текущее количество в базе - без малого 4млн человек!https://epoisk.ru/burmsk/Как обычно, посетители сайта epoisk.ru первыми могут получить доступ к удобному поиску по этим данным. Если я ничего не пропустил, то в открытом доступе пока аналогов нет. Выходные провел с пользой. Переписал конвертацию и импорт исходных данных, добавил немного магии и ускорил поиск в несколько раз. Но нужно понимать, что с таким количеством записей при некоторых вариантах поиска не все запросы будут быстро выполняться. Самый быстрый поиск - это по одной Фамилии без лишних параметров. Если вы ищите по не самой распространенной фамилии, то всегда рекомендую так начинать, а потом глазами отфильтровать. И быстрее и ничего не пропустите. Попробовал поискать по своим фамилиям - количество найденных результатов выросло более чем в два раза относительно поиска по базе до обновления. Пополнения идут практически ежедневно. По мелочи (100-200тыс новых записей) я уже писать не буду.  Теперь с применением обновлений проблем быть не должно вне зависимости от объема. Если на портал открытых данных выложат 10 млн записей, то это уже не будет проблемой. Статистику уже загруженных на епоиск данных можно отслеживать здесь: https://epoisk.ru/burmsk/stat/Текущие показатели в прилагаемых файлах.
  --- epoisk.ru – Продвинутый онлайн поиск метрических книг, исповедных ведомостей, и ревизских сказок в ЦГА Москвы. | | Лайк (45) |
Vladimir Ka Россия, Московская область Сообщений: 547 На сайте с 2017 г. Рейтинг: 5516 | Наверх ##
5 октября 23:10 5 октября 23:11 >> Ответ на сообщение пользователя xbox от 5 октября 2025 21:08 Xbox, Спасибо! Я, с вашей помощью, нашел место искомых могил на Даниловском!!! Ранее два дня методично изучал участок, безрезультатно... Теперь вижу, что "Ритуал" сообщил ранее не тот участок... Завтра двинусь на указанную точку! --- https://mikkibear.ru/
Калмыковы, Алимовы, Рюкины, Щукины - село Петровское Одоевский район/уезд Тульской области/губернии
Прощалыкины, Панюковы, из Малёвки, Дьячковы и Дульневы Красного Холма и окрестных деревень и сел Богородицкого района/уезда Тульской области/губернии и других краев Родины. | | Лайк (12) |
|