Ñêà÷èâàíèå ìàòåðèàëîâ ñ Familysearch.org

LPP2023 íàïèñàë:

[q]

À âû îòêðûëè ýòîò ì/ô íà FS

[/q]

äà, îí îòêðûâàåòñÿ íà FS, íå çàáëîêèðîâàí

LPP2023 íàïèñàë:

[q]

äàéòå íîìåð ì/ô

[/q]

Ñïàñèáî çà æåëàíèå ïîìî÷ü, íàïèøó â ëè÷êó, ÷òîáû íå çàñîðÿòü òåìó

>> Îòâåò íà ñîîáùåíèå ïîëüçîâàòåëÿ miliam îò 17 ìàðòà 2017 18:18

Ïðèâåòñòâóþ, êîëëåãè!

Òåìà ìàññîâîãî ñêà÷èâàíèÿ îöèôðîâàííûõ êíèã âñåãäà àêòóàëüíà, òàê êàê êëèêàòü âðó÷íóþ ïî 400–800 ëèñòîâ — ýòî êîëîññàëüíûé òðóä.  íàøåì ñîîáùåñòâå ñåé÷àñ èñïîëüçóþòñÿ òðè îñíîâíûõ ìåòîäà ìàññîâîé çàãðóçêè (îò ïðîñòûõ ãîòîâûõ óòèëèò äî àâòîìàòèçàöèè ñ ïîìîùüþ èñêóññòâåííîãî èíòåëëåêòà).

Íèæå — ïîäðîáíûé ãàéä, êàê ýòî äåëàåòñÿ.

Ìåòîä 1. Ãîòîâûå ïðîãðàììû è ðàñøèðåíèÿ (Ñàìûé ïðîñòîé ïóòü)
Äëÿ òåõ, êòî íå õî÷åò âîçèòüñÿ ñ êîäîì, ñóùåñòâóþò ãîòîâûå ðåøåíèÿ, ðàçðàáîòàííûå êîëëåãàìè-ãåíåàëîãàìè:

Ïðîãðàììà GetFS (ëåãåíäàðíûé èíñòðóìåíò) Ýòî íàñòîëüíàÿ ïðîãðàììà, ñîçäàííàÿ ñïåöèàëüíî äëÿ ñêà÷èâàíèÿ êíèã ñ FamilySearch.
Êàê ðàáîòàåò: Âû ââîäèòå â ïðîãðàììó íîìåð ãðóïïû ñíèìêîâ (DGS) — íàïðèìåð, 8017278 — è óêàçûâàåòå äèàïàçîí êàäðîâ (íàïðèìåð, ñ 1 ïî 450). Ïðîãðàììà àâòîìàòè÷åñêè ñêà÷èâàåò èõ â âûáðàííóþ ïàïêó íà êîìïüþòåðå â ìàêñèìàëüíîì êà÷åñòâå.
Ãäå èñêàòü: Ÿ àêòóàëüíûå âåðñèè è îáñóæäåíèå ëåãêî íàéòè íà ôîðóìå ÂÃÄ â ïðîôèëüíûõ òåìàõ ïðî ñêà÷èâàíèå ñ FamilySearch.
Áðàóçåðíûå ðàñøèðåíèÿ (Chrome / Firefox / Opera) Ñóùåñòâóþò ðàñøèðåíèÿ äëÿ áðàóçåðîâ (íàïðèìåð, ñêðèïòû äëÿ ðàñøèðåíèÿ Tampermonkey), êîòîðûå äîáàâëÿþò êíîïêó «Ñêà÷àòü âñþ êíèãó» èëè «Ñêà÷àòü äèàïàçîí ñòðàíèö» ïðÿìî â ñòàíäàðòíûé èíòåðôåéñ ïðîñìîòðà ñíèìêîâ FamilySearch.
Ìåòîä 2. Áðàóçåðíûé «ëàéôõàê» ÷åðåç êîíñîëü (Äëÿ ïðîäâèíóòûõ)
Åñëè âû íå õîòèòå óñòàíàâëèâàòü ñòîðîííèå ïðîãðàììû, ìîæíî èñïîëüçîâàòü âñòðîåííóþ êîíñîëü áðàóçåðà (òàê êàê âû óæå àâòîðèçîâàíû íà ñàéòå, ó âàñ àêòèâíû âñå êóêè è ñåññèÿ):

Îòêðûâàåòå ïðîñìîòð êíèãè íà FamilySearch.
Íàæèìàåòå F12 (èëè ïðàâîé êíîïêîé ìûøè -> Ïðîñìîòðåòü êîä) è ïåðåõîäèòå íà âêëàäêó Console (Êîíñîëü).
Òóäà âñòàâëÿåòñÿ íåáîëüøîé Javascript-ñêðèïò (èõ øàáëîíû ÷àñòî âûêëàäûâàþò íà ãåíåàëîãè÷åñêèõ ôîðóìàõ), êîòîðûé â öèêëå «ïðîáåãàåòñÿ» ïî ññûëêàì èçîáðàæåíèé è îòïðàâëÿåò èõ íà ñêà÷èâàíèå ïðÿìî ÷åðåç âàø áðàóçåð.
Ìåòîä 3. Ñ ïîìîùüþ ÈÈ (Gemini / ChatGPT) è Python (Äëÿ ëþáûõ ñàéòîâ è àðõèâîâ)
Åñëè âû êà÷àåòå êíèãè ñ ãîñóäàðñòâåííûõ àðõèâîâ (òàêèõ êàê ÃÀÐÔ, ÖIJÀË, ïîëüñêèé Szukajwarchiwach, ëèòîâñêèå èëè ýñòîíñêèå àðõèâû), ÈÈ ñòàíîâèòñÿ íåçàìåíèìûì ïîìîùíèêîì.

Ó òàêèõ ñàéòîâ àäðåñà ñíèìêîâ âñåãäà èäóò ïî ïîíÿòíîé ëîãè÷åñêîé öåïî÷êå. Íàïðèìåð:

Êàäð 1: https://archive.com/files/book123/001.jpg
Êàäð 400: https://archive.com/files/book123/400.jpg
Êàê ìû ýòî äåëàåì ñ ïîìîùüþ ÈÈ:
Âû îòêðûâàåòå ëþáîé ÈÈ (íàïðèìåð, Google Gemini) è ïèøåòå åìó ïðîñòîé çàïðîñ íà ðóññêîì ÿçûêå:

«ß õî÷ó ñêà÷àòü ìåòðè÷åñêóþ êíèãó. Ññûëêà íà ïåðâûé ëèñò: https://archive.com/files/book123/001.jpg, âñåãî â êíèãå 400 ëèñòîâ (íîìåðà ôàéëîâ ìåíÿþòñÿ îò 001 äî 400). Íàïèøè ïðîñòîé ñêðèïò íà Python, êîòîðûé ñêà÷àåò âñå ýòè 400 ôàéëîâ â ïàïêó "Ìåòðèêè". Äîáàâü ïàóçó â 1 ñåêóíäó ìåæäó ñêà÷èâàíèÿìè, ÷òîáû ñåðâåð àðõèâà ìåíÿ íå çàáëîêèðîâàë çà ñëèøêîì ÷àñòûå çàïðîñû».

ÈÈ çà îäíó ñåêóíäó âûäàåò âàì ãîòîâûé, àáñîëþòíî ðàáî÷èé ñêðèïò. Âñ¸, ÷òî âàì îñòàåòñÿ:

Ñêîïèðîâàòü êîä ÈÈ è ñîõðàíèòü åãî â òåêñòîâûé ôàéë ñ ðàñøèðåíèåì .py (íàïðèìåð, downloader.py).
Çàïóñòèòü åãî â òåðìèíàëå (êîìàíäîé python3 downloader.py).
Ñêðèïò ñàì ñîçäàñò ïàïêó, àêêóðàòíî ñêà÷àåò âñå 400 ëèñòîâ ïî ïîðÿäêó, ïîêàæåò êðàñèâóþ ïîëîñó çàãðóçêè è âåæëèâî ñîîáùèò îá óñïåõå. Ýòî íåâåðîÿòíî óäîáíî, íàäåæíî è ïîëíîñòüþ ïîä âàøèì êîíòðîëåì!

Íàäåþñü, ýòà èíñòðóêöèÿ ïîìîæåò ñýêîíîìèòü âàì ñîòíè ÷àñîâ ðó÷íîé ðàáîòû! Óñïåõîâ â ïîèñêàõ!

vedra íàïèñàë:

[q]

softmaker íàïèñàë:

[q]

• Ññûëêà íà ñòðàíèöó êàòàëîãà: https://www.familysearch.org/search/catalog/757276

[/q]

Ýòî îøèáî÷íàÿ ññûëêà, îíà âåäåò ê çàïèñÿì êàòîëè÷åñêèõ öåðêâåé â Âåíåñóåëå,


softmaker íàïèñàë:

[q]

• Ñîäåðæàíèå: Family registers 1857-1944 (Burkanów)
• Íîìåð ìèêðîôèëüìà (Film/Item): 2040700 Items 1 - 3
• Íîìåð ãðóïïû ñíèìêîâ (DGS): 8017278

[/q]

Ïîä ýòèì øèôðîì ïðîõîäÿò ìåòðèêè 1930 ãîäà. Îíè ïîä ðåñòðèêöèåé äàæå åñëè íåò îãðàíè÷åíèé îíëàéí-äîñòóïà.
Ó âàñ âèäíî òàêæå?

[/q]

Äà, âñ¸ âåðíî! Ïëåíêà äåéñòâèòåëüíî íàõîäèòñÿ «ïîä çàìêîì» (îãðàíè÷åíà èç-çà ïðàâ äîñòóïà) äëÿ îáû÷íûõ ïîëüçîâàòåëåé èç äîìà — èìåííî ïîýòîìó ÿ è îáðàùàþñü çà ïîìîùüþ ê òåì, ó êîãî åñòü äîñòóï èç Öåíòðîâ ñåìåéíîé èñòîðèè èëè áèáëèîòåê-ïàðòíåðîâ, ãäå ýòè îãðàíè÷åíèÿ ñíèìàþòñÿ.

Äàííûå àáñîëþòíî òî÷íûå: ýòîò ìèêðîôèëüì (2040700 / DGS 8017278) ñáîðíûé, è åãî ïåðâûå òðè ÷àñòè (Items 1-3) ñîäåðæàò èìåííî êíèãè ïðèõîæàí — «Family registers 1857-1944 (Burkanów)».

Áóäó î÷åíü áëàãîäàðåí, åñëè ó êîãî-òî áóäåò âîçìîæíîñòü ñêà÷àòü ýòó ïëåíêó (èëè êîíêðåòíî ðàçäåëû ñ ñåìåéíûìè ñïèñêàìè Áóðêàíîâà) â Öåíòðå ñåìåéíîé èñòîðèè!

XeniaAg íàïèñàë:

[q]

êàê ìîæíî ñåé÷àñ êà÷àòü ñòðàíèöû ìèêðîôèëüìîâ

[/q]

Ýòîò ñïîñîá ðàáîòàåò äëÿ ïîñòðàíè÷íîãî ñêà÷èâàíèÿ:
https://forum.vgd.ru/post/1883/82882/p4373412.htm#pp4373412
(Êíîïêà "Áîëüøå èíôîðìàöèè")