https://forum.vgd.ru/5/154887/ На движке Yandex Cloud Vision OCR ru https://forum.vgd.ru/5/154887/p4920580.htm#pp4920580 https://forum.vgd.ru/5/154887/p4920580.htm#pp4920580 <br>Cdtnf написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>все понятно: что ничего не понятно. Зачем информация, если ей нельзя воспользоваться<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote>Листая медицинский хирургический журнал, в котором рассказывается, как сделать операцию, можно прийти к такому же заключению. Зачем информация, если ей нельзя воспользоваться. Вот в другом журнале советуют не есть булочки на ночь. Там да, - все по делу, хороший журнал про здоровье.<br><br>Бывают случаи, когда чтобы воспользоваться информацией, требуются определенные навыки из знания. Здесь об этом прямо заявлено. Чтобы воспользоваться тем, что здесь описывается, нужно быть (или желательно быть) программистом. Тогда можно внести свой вклад в опубликованный код, либо можно развернуть свою копию на своих ресурса и допиливать систему под свои нужды.<br><br>Мне информация была полезна. Как развернуть копию такой системы я понимаю. На будущее буду иметь ввиду про такую возможность, но пока разворачивать не планирую, поскольку нет задач по массовому распознаванию текста. Для распознавания нескольких страниц большие затраты по времени, а для массового распознавания еще требуется оплачивать услуги Яндексу по 1.3руб/страница. Т.е. без спонсоров или пожертвований за свой счет больше 1-2тыс страниц распознавать будет накладно. xbox Sat, 06 Apr 2024 21:03:24 +0300 https://forum.vgd.ru/5/154887/p4917710.htm#pp4917710 https://forum.vgd.ru/5/154887/p4917710.htm#pp4917710 <br>Ms_Hedgehog написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Так как же в итоге можно расшифровать рукописные записи? Простите, если туплю, так и не поняла, можно ли куда-то загрузить картинку (страницу из оцифрованного архивного документа), чтобы понять, что там написано<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br><br>Нет, загрузить картинку для распознавания нельзя, но если есть навыки разработки на Python и работы с Docker, то можно развернуть свой экземпляр сервиса, чтобы через него распознавать текст и вести поиск по нему. Daemon2011 Wed, 03 Apr 2024 19:41:07 +0300 https://forum.vgd.ru/5/154887/p4917529.htm#pp4917529 https://forum.vgd.ru/5/154887/p4917529.htm#pp4917529 Так как же в итоге можно расшифровать рукописные записи? Простите, если туплю, так и не поняла, можно ли куда-то загрузить картинку (страницу из оцифрованного архивного документа), чтобы понять, что там написано Ms_Hedgehog Wed, 03 Apr 2024 16:00:10 +0300 https://forum.vgd.ru/5/154887/p4916954.htm#pp4916954 https://forum.vgd.ru/5/154887/p4916954.htm#pp4916954 Немного о качестве распознавания Яндекса.<br><br>Если кратенько: к сожалению, результат не всегда так хорош, как хотелось бы. Но Яндекс постоянно совершенствует свой ИИ, так что можно будет попробовать повторно прогнать снимки через годик - возможно, что результат будет лучше. <br>Что именно влияет на результат - не ясно, но есть догадки: <br>* качество снимка: по одной и той же РС одного и того же села (т.е. разные копии одной сказки) фотки ГАНО весят 1 Мб, а фотки ЦАНО - почти 10 Мб. Разница, конечно, не в 10 раз, но она и есть и она в пользу тяжелых снимков;<br>* почерк писца: тут всё как у людей.<br><br>Некоторые дела распознались очень хорошо - даже цифры есть.<br><img src="https://sun9-79.userapi.com/impg/z4lEYlKnUeMCvgNWedb5UQC-nsIJ37HpCvVYiA/OzI8F_hkAcI.jpg?size=1921x1080&amp;quality=96&amp;sign=97061702c0e62b6da772b4a93c1216bd&amp;type=album" alt=""><br><br>А некоторые - очень плохо. Например, ревизия 1782 года по нашему селу. <br><img src="https://sun1-27.userapi.com/impg/LqocFUgzO38hzSCqBKYeC0S04uIMy2lJvX-8DQ/C3_cdh7axIM.jpg?size=1921x1080&amp;quality=96&amp;sign=f1bacc6a4fa9f61914e5020baa677c8f&amp;type=album" alt=""><br><br>Забавная ситуация: на странице 3 семьи Дурнайкиных, но Яшенька ни разу не смог распознать фамилию правильно ;D То Дирияйкин, то Аурномкин, то Аурнанкин.<br><br><img src="https://sun9-62.userapi.com/impg/I0Xfp4xRF-WF_vVp6sM1YJgDYp6fxT6YpMJA4w/cy_c_tz94Ug.jpg?size=960x1280&amp;quality=95&amp;sign=af83036e266b0113d07fefa220d02bc0&amp;type=album" alt=""><br><img src="https://sun9-57.userapi.com/impg/h45WSRugDEA92cpfPEenzcdN6stIydFExNRnMg/uMqSLayEvcA.jpg?size=1280x719&amp;quality=95&amp;sign=9c5b0e5fc15e6f0acac592e90686d80f&amp;type=album" alt=""> Daemon2011 Tue, 02 Apr 2024 21:44:57 +0300 https://forum.vgd.ru/5/154887/p4916940.htm#pp4916940 https://forum.vgd.ru/5/154887/p4916940.htm#pp4916940 Немного о сайте и его функционале.<br>Чтобы сэкономить, я держу свой сервер в "холодном" режиме, так что при первом обращении сайт подтупливает секунды 3-4, но затем раскочегаривается и работает как надо.<br><br>Сайт состоит из 2 вкладок: заголовки и содержимое.<br>1а) На вкладке "Поиск по заголовкам" можно посмотреть список дел по нашему селу, которые я проиндексировал.<br><img src="https://sun9-49.userapi.com/impg/w4sRmttATtKDAfh5pGFKLBLCE-GUfONT_4g0bA/6X57-h2d8sc.jpg?size=1921x1080&amp;quality=96&amp;sign=a80cfe09c55c19adc65aad061e2fcf10&amp;type=album" alt=""><br><br>1б) Если известны координаты дела, то можно проверить, распознано ли оно и что находится внутри<br><img src="https://sun9-35.userapi.com/impg/5gVQvXmxDDMO3MuHfUIDF5Z0MXKAWZc4adBo8Q/FKYPVktcbE8.jpg?size=1921x1080&amp;quality=96&amp;sign=c1d97efd269346b496a325b13b44ee10&amp;type=album" alt=""><br><br>2а) На вкладке "Поиск по содержимому" можно вести поиск по содержимому дел. Например, по имени или фамилии (до 1850 фамилии в моем селе не писали, так что в ревизиях 1721-1834 годов нет фамилий).<br><img src="https://sun9-29.userapi.com/impg/mm2qqD3w_IwDDKtJ-VJ2CNv6KpK1F2_NBgJ9OQ/d-O3r0wZd7Q.jpg?size=1921x1080&amp;quality=96&amp;sign=1cc9be2b6be26c55ca9d338705ea7acb&amp;type=album" alt=""><br><br>2б) А введя координаты конкретного дела, можно просмотреть, где именно находится искомое имя/фамилия<br><img src="https://sun9-3.userapi.com/impg/VBmcTpjJGRi-QAMDWYrD7naAGUJwPqVBhUvwEQ/CC05QQi76fc.jpg?size=1920x1080&amp;quality=96&amp;sign=8e95ad9dcc0bdaf95654539f95bfaa03&amp;type=album" alt=""><br><br> Daemon2011 Tue, 02 Apr 2024 21:35:10 +0300 https://forum.vgd.ru/5/154887/p4916926.htm#pp4916926 https://forum.vgd.ru/5/154887/p4916926.htm#pp4916926 Привет, коллеги!<br><br>Полагаю, что всем известен Яндекс Архив <script type='text/javascript'>document.write('<a href="https://ya.ru/archive/search" rel="noopener" target=_blank>https://ya.ru/archive/search</a>');</script> - роскошный сервис, который выполняет автоматическую индексацию рукописного текста архивных документов, сохраняет распознанный текст в БД, а затем позволяет искать документы по содержимому. Главный его недостаток - неполнота, вызванная тем, что <br>1) многие архивы отказываются сотрудничать с Яндексом или сотрудничают "для галочки";<br>2) простым пользователям не позволено загружать свои коллекции отснятых архивных документов для распознавания, т.к. может возбудиться "правообладатель" снимков.<br><br>Частично проблему неполноты попытался решить другой сервис (причем еще до появления Я.Архива ;D) - Генотек Архивы <script type='text/javascript'>document.write('<a href="https://www.genotek.ru/archives/," rel="noopener" target=_blank>https://www.genotek.ru/archives/,</a>');</script> который проиндексировал тысячи снимков, сделанных мормонами, и дал к ним доступ. Но у него как раз случилась проблема №2, как минимум, с Тульским архивом - по итогу, доступ к снимкам ГАТО пришлось убрать.<br><br>Я предлагаю следующее решение: отказаться от размещения снимков вообще! Для этого был разработан инструмент archivestra (archive orchestra - архивный оркестр/оркестратор архивов), который работает следующим образом:<br>1) отправляет снимок документа на распознавание в Yandex Cloud Vision OCR;<br>2) получает ответ с распознанным текстом (Яндекс дает координаты каждого распознанного слова) и сохраняет его в БД;<br>3) при получении запроса, собирает из распознанных слов картинку так, чтобы каждое распознанное слово занимало ровно то пространство на изображении, которое занимал его рукописный прообраз, а затем отдает его пользователю.<br><br>Вот как-то так, слева направо: оригинал, собранная картинка, совмещение<br><img src="https://sun9-30.userapi.com/impg/jeLU713_1VZaeS1LJR_GDJwQh3nhlBmaB0SWTw/96OBZwNGafQ.jpg?size=2560x1207&amp;quality=95&amp;sign=654c5b15da0f22e32182ca6695fe9028&amp;type=album" alt=""><br><br>Исходный код лежит тут: <br><script type='text/javascript'>document.write('<a href="https://github.com/Daemon2017/archivestra" rel="noopener" target=_blank>https://github.com/Daemon2017/archivestra</a>');</script><br><br>А здесь находится сайт, куда я загрузил почти все имеющиеся у меня доки (РС, ИР, ведомости о числе населения) по моему родному селу Корину Арзамасского уезда Нижегородской губернии <br><script type='text/javascript'>document.write('<a href="https://daemon2017.github.io/archivestra/" rel="noopener" target=_blank>https://daemon2017.github.io/archivestra/</a>');</script><br>1-3РС не стал заливать, т.к. уже по 4-5РС видно, что шрифт 18 века Яшка не вытягивает(<br><br>Недавно у Яндекса был единый тариф на все модели: 0.13 рублей за снимок, но сейчас цены на модель распознавания рукописного текста выросли в 10+ раз - до 1.5 рублей за снимок. Но это всё еще очень демократично: мою коллекцию из 700 страниц распознали за 1000+ рублей. Актуальные расценки здесь: <br><script type='text/javascript'>document.write('<a href="https://yandex.cloud/ru/docs/vision/pricing" rel="noopener" target=_blank>https://yandex.cloud/ru/docs/vision/pricing</a>');</script> Daemon2011 Tue, 02 Apr 2024 21:27:37 +0300