ОБД-Мемориал - массовые выборки из базы

На сайте ВГД собираются люди, увлеченные генеалогией, историей, геральдикой и т.д. Здесь вы найдете собеседников, экспертов, умелых помощников в поисках предков и родственников. Вам подскажут где искать документы о павших в боях и пропавших без вести, в какой архив обратиться при исследовании родословной своей семьи, помогут определить по старой фотографии принадлежность к воинским частям, ведомствам и чину. ВГД - поиск людей в прошлом, настоящем и будущем!

НОВИЧКАМ !

ЗДЕСЬ ВЫБОРКИ - МАССОВЫЕ ПО РВК.

ДЛЯ ЛИЧНЫХ ЗАПРОСОВ НАЙДИТЕ НУЖНУЮ ВЕТКУ НА ВОЕННОМ ФОРУМЕ https://forum.vgd.ru/120/

ЧИТАЙТЕ РЕКОМЕНДАЦИИ ПО ПОИСКУ https://forum.vgd.ru/109/ АНКЕТЫ ДЛЯ ЗАПРОСОВ по ссылке.

Для уроженцев и призванных на территории Украины - запрос в Национальный Музей истории ВОВ в Киев адрес Адрес: 01015 Украина, г. Киев, ул. Лаврская, 24. Можно просить данные из Книги Памяти, копию извещения и данные о месте захоронения.

ДЛЯ ПРОПАВШИХ БЕЗ ВЕСТИ ОТКРОЙТЕ ИМЕННУЮ ТЕМУ ЗДЕСЬ https://forum.vgd.ru/110/
Удачи!

Всем, кому необходимо выгрузить большие массивы данных из ОБД (как пример - для анализа призыва по местности, по городу и т.п) - предлагаю помощь.
Конечный результат будет в формате Excel, по структуре карточки (формуляра) поиска на сайте ОБД-Мемориал.
************************************************
Пишите критерии отбора информации
*************************************************
к примеру -
призван Сталинским РВК г.Москвы 1941,
место рождения,
и так далее. по любому полю в форме поиска..

Я могу поделиться технологией, но .. Технология рассчитана на компьютерщиков, поэтому мне легче помогать самому людям, чем научить, что и когда и как запускать.
Программа отработана, отбирал записи по Сталинскому РВК Москвы, местам призыва (Вязьма, Реутов, Балашиха) и прочим.. 19 тысяч записей в Ексель выгружал часа за 2. работы.

Пишите, будем искать вместе..

Измайлов Феликс.

Переход на хранилище с файлами

Феликс, добрый день!
Сделайте, пожалуйста, выборку по призывникам отсюда:

место призыва: Вчерайшанский РВК,Житомирская обл., Украинская ССР, Вчерайшанский р-н
место рождения: с. Макаровка (Макарьевка), Вчерайшанский р-н, Житомирская обл., Украинская ССР

Спасибо!

Перенесено из темы Аналитическая работа с ОБД Мемориал МО РФ ( иными словами, КАК САМОМУ СДЕЛАТЬ ВЫБОРКУ С ОБД)

minay
Начинающий
г. Москва
28 февраля 2014 14:58
практические советы по работе с базой

Великая Отечественная война поистине была всенародной и затронула, практически, каждую семью. В связи с этим, в генеалогических поисках, особенно на первых её этапах, большую помощь может оказать Объединённая База Данных «Мемориал» Министерства Обороны РФ.
Её можно найти по следующей ссылке: http://obd-memorial.ru/html/index.html
Надо только использовать все широчайшие возможности, которые она предоставляет. Так что же мы можем?

1. Прежде всего, выйдя на главную страницу сайта ОБД Мемориал, воспользуемся «расширенным поиском», найдя и нажав
соответствующую кнопку.
2. В открывшемся новом меню проставляем галочки поиска в первых десяти клетках. Три последние галочки лучше не ставить, чтобы не получить в ответе массу отвлекающего и, зачастую, совершенно постороннего материала.
3. Далее вводим в верхнее окно поиска ФИО нашего родственника и получаем ряд ответов, которые просматриваем. А вдруг получаем «нулевой» ответ типа «записи не найдены».
Не отчаивайтесь, есть некоторые тонкости поиска, которые можно использовать и повысить шанс нахождения хоть каких-то сведений.
Их рассмотрим чуть позже. А пока…
4. Начинаем просмотр, нажимая на нужную строчку в списке ответов.
5. Ответ на запрос состоит из двух частей:
первая часть это таблица примерно такого вида

Фамилия Юрасов
Имя
Отчество
Дата рождения/Возраст __.__.1911
Место рождения Ростов. обл., Цимлянский р-н, ст. Нижне-Курмоярская
Последнее место службы 1135 Сальский сп
Воинское звание лейтенант
Причина выбытия пропал без вести
Дата выбытия 20.10.1941
Название источника информации ЦАМО
Номер фонда источника информации 58
Номер описи источника информации 818883
Номер дела источника информации 596

Вторая часть это снимок документа. Мы можем его рассмотреть, увеличив, используя плюсик на панели над снимком, или открыть в другом окне, увеличить его там и сохранить себе на компьютер.
Также полезно обратить внимание на количество листов в нашем документе. Например, в личных карточках, карточках военнопленных имеются снимки лицевой и оборотной сторон. В документах со списками потерь может содержаться любое количество страниц.
Воспользуйтесь опцией "просмотр документа". Важно просмотреть начало документа, там мы можем найти дополнительные сведения о воинском подразделении, в котором воевал наш родственник, имена его начальников. Также бывает очень результативен поиск в интернете начальников нашего воина, которые чаще упоминаются в разного рода воспоминаниях участников войны. И таким образом мы можем неожиданно найти литературное произведение, где упоминается и наш искомый, или, хотя бы, мы находим описание боевого пути части, в которой он воевал. Тем самым, поле возможного дальнейшего поиска существенно расширяется.
Также можно провести поиск в интернете по номеру воинской части, опять же, с выходом на воспоминания её служащих и её боевой путь.
6. Теперь вернёмся к моменту поиска по ОБД, когда запрос по ФИО дал нулевой ответ. В этом случае у нас есть ещё несколько вариантов продолжить поиск, используя саму базу.
Вариант первый, набираем только фамилию и имя. Смотрим. – Ноль.
Вариант второй, набираем фамилию с инициалами. Смотрим. – Ноль.
Вариант третий, набираем просто фамилию и просматриваем весь спектр ответов. Вариант этот трудоемкий, но может дать результат.
Вариант четвертый, набираем место призыва, или жительства, и смотрим кто призывался вместе с нашим родственником. Часто этоземляки (или родные) и воевали вместе. Ведём поиск через земляков.
7. Также варьируя форму запроса (по ФИО, по ФИ, по месту призыва) ищем используя кнопку по списку военно-пересыльных пунктов.
В общих чертах это пока всё. Если что-то не понятно – спрашивайте.
Успеха вам!

Прочел предыдущие комментарии..
Хочу уточнить...
ВЫборки могу делать по ЛЮБОМУ полю или по полям в ЛЮБОМ сочетании

ВСЕ что находится в виде полей поиска - можно выгрузиь. НО...
Есть ограничение на максимальное количество записей за ОДИН запрос - 10 000..
Приходится обходить - через перебор начальных букв ФАМИЛИЙ..
Максимальная выборка, по моему больше ста тысяч записей за раз..
По Москве выбирал призывников..
/**********************************/
ВСЕ ЗАЯВКИ БУДУТ ВЫПОЛНЕНЫ
/**********************************/

Секретов выгрузки нет, но это чисто программисткое решение.
Я изучил структуру запросов к ОБД и структуру ответов, научился имитировать запросы, и научился ответы разлагать на текст.

Опытом готов делиться, уже двум передал знания, но что-то в ответ тишина.. Наверное учитель из меня никакой

KarLa написал:

[q]
Донесения по воинским частям из базы ОБД можно найти здесь
http://www.teatrskazka.com/Raznoe/DivDocs/DivDocs.html
[/q]

Вопрос риторический: насколько полна эта выборка? Сразу же бросается в глаза, что количество донесений заметно разнится. Например, по интересующей меня 14 артдивизии Прорыва РГК их всего 5, и те касаются только рядового и сержантского состава. Донесения об офицерах еще ждут очереди на оцифровку или пропали, никто не в курсе?

oztech написал:

[q]
насколько полна эта выборка?
[/q]

Да, согласна. Пару донесений по каким то дивизиям, которые там отсутствовали, я тоже нашла и написала админу этого сайта с просьбой о включении. Это незамедлительно выполнили и поблагодарили. Если Вы располагаете подобной информацией, предлагаю сделать тоже самое. А сайту и его создателям огромное спасибо за подспорье в поисках!

Посмотрел эту ссылку
http://www.teatrskazka.com/Raznoe/DivDocs/DivDocs.html
Хм.. тоже титанический труд..
А что скажет общественность, если по этим донесениям я выкачаю ФИО и номера записей?
Если подойти серьезно к этой задаче, то в принципе можно не тольйо ФИО, а всю информацию . .т.е текст записи можно сохранить..
Еще раз уточню: ничего сложного - по номерам записей ДОКУМЕНТОВ вывести ВСЕ записи по бойцам..
Как такое предложение?

Номер записи 3926856
Фамилия Глухих
Имя Борис
Отчество Борисович
Дата рождения __.__.1922
Место рождения Иркутская обл., ст. Зима
Дата и место призыва 22.09.1941, Бурят-Монгольский РеспВК, Бурят-Монгольская АССР
Последнее место службы 1 сд
Воинское звание красноармеец
Причина выбытия убит
Дата выбытия 11.06.1944
Название источника информации ЦАМО
Номер фонда источника информации 58
Номер описи источника информации 18002
Номер дела источника информации 483

FVI написал:

[q]
А что скажет общественность, если по этим донесениям я выкачаю ФИО и номера записей?
[/q]

Феликс, для начала такой вопрос, не имеющий прямого отношения к Вашему: а Вы не знаете, что это за номера записей? Похоже на сквозную нумерацию в порядке сканирования. Только почему-то в ней есть пропуски. Если так, то поиск по этим номерам практически будет поиском вслепую.

Что касается Вашего вопроса, то как Вы представляете дальнейшее хранение собранных сведений? Их, видимо, нужно тоже как-то обработать? И что же получится в результате?

FVI написал:

[q]
Хм.. тоже титанический труд..
[/q]

Вот именно!

FVI написал:

[q]
Как такое предложение?
[/q]

Ничего себе!!! oztech верно говорит, это же создание огромнейшей базы и труд не в пример больше, чем исходная база!

FVI написал:

[q]
Еще раз уточню: ничего сложного - по номерам записей ДОКУМЕНТОВ вывести ВСЕ записи по бойцам..
Как такое предложение?
[/q]

Вполне реализуемый вариант. Пишете поискового робота, который будет делать запросы или по номеру записи или по любому другому полю. Робот вам и выкачает всю информацию. Если не ставить задачу копирования всей ОБД, а сохранять только карточку и ссылку на pdf, то и емкости винчестера может хватить.

Это все реализовано уже, я спрашиваю - нужно это кому нибудь или нет?
А об'ем там небольшой..

Если выводить в csv, то 100т.з. примерно мегабай 50 будет
С уважением,
Измайлов

ОБД-Мемориал - массовые выборки из базы

Поисковикам, и/или всем, кому необходимо массово выгружать (сохранять)) данные из ОБД-Мемориал (работа по спискам дивизий, рай-облвоенкоматов и т.п.)