Нарисуйте свое древо. Бесплатно. Онлайн.   [х]
Всероссийское Генеалогическое Древо
На сайте ВГД собираются люди, увлеченные генеалогией, историей, геральдикой и т.д. Здесь вы найдете собеседников, экспертов, умелых помощников в поисках предков и родственников. Вам подскажут где искать документы о павших в боях и пропавших без вести, в какой архив обратиться при исследовании родословной своей семьи, помогут определить по старой фотографии принадлежность к воинским частям, ведомствам и чину. ВГД - поиск людей в прошлом, настоящем и будущем!
Вниз ⇊
Реклама. ООО «Центр генеалогии «Семейная реликвия», ИНН 7842196068

Автоматизация работы с генеалогическими сайтами

Скрипты и программы для упрощения работы с разными генеалогическими и около-генеалогическими сайтами.

← Назад    Вперед →Страницы:  1 2 Вперед →
Модератор: LonerD
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Автоматизация работы с генеалогическими сайтами

В рамках данной темы будет размещена подборка инструментов, облегчающие взаимодействие с генеалогическими и около-генеалогическими сайтами - скрипты, расширения, программы, полезная информация, ссылки на сайты с информационными базами.

Всякие полезняшки регулярно попадаются на сайтах, форумах, в чЯтиках, раскиданы по разным разделам и темам, иногда впоследствии удаляются авторами. А когда понадобятся - то начинаются хаотичные поиски "где-то я это видел... но где?". Потому цель данной темы - постараться собрать всё воедино.

В первом посте будет представлен список имеющегося в теме материала со ссылками на посты этой темы. В постах - небольшое описание и инструкция.
Подробный FAQ о том, как пользоваться браузером, программами и "куда тыкать" не входит в рамки темы.



Скрипт GetFilmsByDGS для Familysearch - Ссылка
Скрипт GetFilmsByDGS.htm на основе номера плёнки сайта Familysearch генерирует ссылки на изображения, которые можно затем загрузить.



FS Film Trawler (оно же FS Film Collector) - браузерное расширение для Familysearch - Ссылка
Расширение FS Film Trawler (FS Film Collector) на основе номера плёнки сайта Familysearch генерирует ссылки на изображения, которые можно затем загрузить.



DownThemAll! - массовое скачивание файлов в браузере - Ссылка
Расширение для браузеров на основе Chrome, FireFox, Edge для автоматического массового скачивания файлов. В рамках темы это наиболее удобный (на мой взгляд) вариант для скачивания файлам с сайта Familysearch по ссылкам, сгенерированным через FS Film Collector или GetFilmsByDGS.



FS_NoLimit - скрипт для снятия ограничений на Familysearch - Ссылка
Скрипт для браузера снимает ограничения на скачивание файлов с сайта Familysearch и позволяет избежать временной или постоянной блокировки аккаунта за массовое скачивание.



FamilySearch SpeedUp - скрипт ускорения работы Familysearch - Ссылка
Скрипт для браузера, ускоряет работу сайта Familysearch, вырезает всякую аналитику.



RgadaDownloader (rgada-downloader) - скачивание с сайта РГАДА - Ссылка
Консольное приложение для скачивания архивных материалов с сайта РГАДА (Российского Государственного Архива Древних Актов). НЕ для ГИС УИАД!



Yandex Archive Downloader (yandex-archive-downloader) - скачивание с Яндекс.Архива - Ссылка
Расширение для браузеров на базе Chrome для скачивания файлов с сервиса Яндекс.Архив.
Внимание! УЖЕ НЕ РАБОТАЕТ



Яндекс Архив DreamScript - скачивание с Яндекс Поиск по архивам - Ссылка
Скрипт для консоли браузера, который скачивает файлы с сервиса "Яндекс Поиск по архивам".
РАБОЧИЙ ВАРИАНТ



---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Скрипт GetFilmsByDGS для Familysearch

Скрипт GetFilmsByDGS.htm на основе номера плёнки сайта Familysearch генерирует ссылки на изображения, которые можно затем загрузить.
Автор - euhome, Доработанный вариант - PavelBr.

1. Сохранить файл GetFilmsByDGS и открыть его в браузере.
2. Ввести номер плёнки (DGS). Можно также указать начальный и конечный кадры (или оставить эти поля пустыми, если нужны ссылки на все сканы).
3. Нажать Get links - на странице появятся ссылки на сканы.
4. Скачать файлы изображений (сканов) с помощью любого браузерного расширения. Или можно просто открыть-посмотреть любой кадр.
Внимание! Нужно быть авторизованным на сайте Familysearch для возможности скачивания и просмотра изображений (для генерации ссылок авторизация не обязательна).


Прикрепленный файл (GetFilmsByDGSMy2.0.htm, 2649 байт)
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
FS Film Trawler (или же FS Film Collector) - браузерное расширение для Familysearch

Расширение FS Film Trawler (FS Film Collector) на основе номера плёнки сайта Familysearch генерирует ссылки на изображения, которые можно затем загрузить.
Автор - tsamosaver. Ссылка на github.

Работает в браузерах на основе Chrome и FireFox.
Предварительно нужно скачать расширение, распаковать его и установить.
Для установки открыть в браузере настройки расширений, можно ввести в адресную строку:
chrome://extensions/
Переключить радиокнопку "Developer mode" во включённое положение.
Нажать кнопку "Load unpacked" и указать путь к расширению.

1. Ввести номер каталога или номер плёнки.
2. Нажать "Начать поиск".
3. Дождитесь завершения поиска.
4. Для каждой пленки вы можете:
- Выбрать кадры для экспорта, используя поле ввода.
- Использовать следующие форматы для номеров кадров:
---Отдельные номера: 1,2,3
---Диапазоны: 1-100
---Комбинированно: 1-50,75,80-90
5. Нажмите "Экспорт ссылок" для создания html файла со ссылками
6. Откройте html файл в браузере.
7. Скачайте файлы изображений (сканов) с помощью любого браузерного расширения. Или можно просто открыть-посмотреть любой кадр.

Внимание! Нужно быть авторизованным на сайте Familysearch для возможности скачивания и просмотра изображений (для генерации ссылок авторизация не обязательна).



Прикрепленный файл (FS_Trawler_Chrome-main.zip, 60302 байт)
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
FS_NoLimit - скрипт для снятия ограничений на Familysearch

Скрипт снимает ограничения на скачивание файлов с сайта Familysearch. Мормоны не приветствуют массовую загрузку файлов, иногда на аккаунт за это накладывается временный кулдаун, иногда - пермабан (у меня два аккаунта так отлетело). Скрипт позволяет избежать этих ограничений.
Автор - tsamosaver. Ссылка на github.

Для работы скрипта должно быть установлено браузерное расширение Tampermonkey (или Greasemonkey).

Инструкция по установке в Tampermonkey:
1. Скопировать весь код скрипта.
4. Нажать на иконку Tampermonkey в браузере.
5. Выбрать пункт "Create a new script"
6. Удалить весь шаблонный код и вставить скопированный код.
7. Нажать Ctrl+S или кнопку "File - Save" в редакторе Tampermonkey.
8. Проверить, что скрипт появился в списке установленных скриптов Tampermonkey и включён.

Отключать его вручную нет смысла - не мешается, срабатывает только при работе с сайтом Familysearch.


Прикрепленный файл (FS_NoLimit.js, 1905 байт)
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
FamilySearch SpeedUp - скрипт ускорения работы Familysearch

Скрипт для браузера, ускоряет работу сайта Familysearch. По умолчанию на FS тонны аналитики, отладки, слежки за тем, что делает пользователь прочего, что совсем не нужно для просмотра плёнок. Скрипт всё это вырезает.
Автор - zzaa (az32612).

Для работы скрипта должно быть установлено браузерное расширение Tampermonkey (или Greasemonkey).

Инструкция по установке в Tampermonkey:
1. Скопировать весь код скрипта.
4. Нажать на иконку Tampermonkey в браузере.
5. Выбрать пункт "Create a new script"
6. Удалить весь шаблонный код и вставить скопированный код.
7. Нажать Ctrl+S или кнопку "File - Save" в редакторе Tampermonkey.
8. Проверить, что скрипт появился в списке установленных скриптов Tampermonkey и включён.

Если сайт FS начнёт выдавать массовые сообщения в стиле "Что то пошло не так" или не загружать страницу, то скрипт рекомендуется отключить и проверить работу сайта без него.


Прикрепленный файл (fs_block_1.7.0.txt, 3948 байт)
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
DownThemAll! - массовое скачивание файлов

Расширение для браузеров на основе Chrome, FireFox, Edge для автоматического массового скачивания файлов. В том числе ссылок на сканы Familysearch, сгенерированные через FS Film Collector или GetFilmsByDGS.
Оф.сайт
Магазин расширений Chrome.

Настройки.
1. Предварительно открыть настройки расширения, можно ввести в адресную строку браузера:
chrome://extensions/?id=nljkibfhlpcnanjgbnlnbjecgicbjkge
и включить "Allow access to file URLs" (разрешить пакетную загрузку файлов).

2. В настройках самого расширения Network - Concurrent downloads выставить значение 1 . Это нужно, чтобы скачивать файлы по очереди (иначе сайт FS может посчитать, что его досят).

3. При первом скачивании в поле Mask указать: *name*.*ext*
Это нужно для того, чтобы файлы нумеровались по порядку и им присваивались понятные имена.
Или же *text*\*name*.*ext* для скачивания каждой пленки в отдельную папку.
Поставить галочку Filters - JPEG Images, если она там не стоит (то есть скачивать jpg-файлы).

4. Нажать Download.

Время от времени стоит очищать список скачанных файлов (когда там накопятся десятки и сотни тысяч записей, браузер начнёт глю-глю).
DownThemAll - Manager, или же в консоли браузера.
chrome-extension://nljkibfhlpcnanjgbnlnbjecgicbjkge/windows/manager.html
выделить и удалить всё.


Прикрепленный файл (nljkibfhlpcnanjgbnlnbjecgicbjkge 4.15.1.0.rar, 949464 байт)
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
Лайк (1)
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Резерв.
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Резерв.
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Резерв.
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
LonerD
Модератор раздела
дитё боярское

LonerD

из откуда в никуда
Сообщений: 691
На сайте с 2013 г.
Рейтинг: 724
Резерв.
---
Дневник || Дергунов, Дырдин, Добрынин, Богатырев, Арехов, Берескин, Попов (Липецкий у.) || Нагорный, Нелипа, Вергун, Борисенко (Богодуховский у.), Лябах, Ростовский (Полтавщина) - Константиновка | Громѣка (Гадяч), Бурдѣй (Перелюб) - Вознесенка
← Назад    Вперед →Страницы:  1 2 Вперед →
Модератор: LonerD
Генеалогический форум » Дневники участников » Дневники участников » Дневник LonerD » Автоматизация работы с генеалогическими сайтами [тема №192993]
Вверх ⇈