Genealodzy.PL Genealogia
Nasze drzewa, Programy genealogiczne, Monografie o rodzinach - Wtyczka do pobierania skanów np. SZWA
xtedek - 06-11-2017 - 09:12
Temat postu: Wtyczka do pobierania skanów np. SZWA
Witam
Może niektórzy mnie kojarzą - jestem autorem ostatniej wersji geneteki (nie danych czy bazy a programu-skryptu 
W tej chwili po godzinach tworzę sobie plugin do Chrome, który będzie umożliwiał zautomatyzowanie pobierania skanów ze stron. Głównie stron archiwów, na razie jest to tylko szwa i publikacje wieloczęściowe w systemie dlibra. Na razie jest to bardzo wczesna wersja, przeznaczona do testów.
Od razu odpowiadam na pytania:
1. Po co to?
- Bo moim zdaniem skoro coś jest dostępne publicznie to powinna być możliwość ściągnięcia i trzymania tego na dysku. Przeglądanie skanów online jest często bardzo niewygodne a czasem wręcz niemożliwe. To jest moje zdanie i można się z nim nie zgadzać.
2. Czy to legalne?
- Tak jak najbardziej. Wtyczka tak naprawdę jedynie klika za użytkownika, nie robi na stronie nic czego nie mógłby zrobić użytkownik sam.
3. Jak to zainstalować?
- Otworzyć chrome i zainstalować ten plugin:
https://chrome.google.com/webstore/deta ... aggl?hl=pl
Następnie otworzyć stronę ze skanami szwa lub dlibra i kliknąć niebieską ikonę szufladki ze strzałką. Skany zostaną ściągnięte do katalogu Pobrane/Archives
4. Czy będą inne serwisy, np. FS?
- Tak
5. Kiedy?
- Nie wiem
Wszelkie uwagi, krytyka i błędy mile widziane.
Sroczyński_Włodzimierz - 06-11-2017 - 10:58
Temat postu: Wtyczka do pobierania skanów np. SZWA
Szkoda, że zacząłeś od szwa - tam akurat działa znane pod nazwą "webproject" ustrojstwo
W pełni popieram założenia - zresztą w szukaju wyraźnie zaznaczone prawa pod zakładką powtórne wykorzystanie
Biblioteka Narodowa, zdaje się, że w końcu doszła do wniosku, że polona powinna dawać możliwość pobrania całego obiektu (nie tylko strony) - analogicznie do innych bibl. cyfr. nie tylko strona po stronie
miejmy nadzieję, że NAC (podobne centrum kompetencji jak BN - pełna analogia o do usytuowania w systemie) podzieli zdanie NAC i wręcz sam zainstaluje taką możliwość
a wtedy może i FS dorówna do konkurencji:) i gwa:)
Do tego czasu na pewno wtyczki się przydadzą
A teraz uwaga (nie krytyka) co do wtyczki do szwa: ostatnie prace (wrzesień-listopad) wykazały, że nawet jak się coś pojawi to może zniknąć. Tym bardziej warto nie liczyć na on-line. Mi udało skorzystać się z "okna możliwości" tj być akurat przytomnym w ciągu paru godzin zaistnienia ewidencji zasobu APW w szwa, wyszukać jednostkę, pojechać, sfotografować. Teraz bym tego nie znalazł (jako, że zniknęła prezentacja zespołów i jednostek - zostało to co było rok temu)
stąd (tzn z tego, że dostęp do ewidencji jest przydatny, a nie jest zapewniony przez szwa):
moim zdaniem wartoby nie tylko ściągać skany, ale też "strukturę" , czyli zestawienie zespołów wraz z jednostkami.
Dałoby radę poszerzyć wtyczkę?
obecnie (stan na "teraz" 10:40, cały czas o AP w Warszawie piszę) do szwa wróciło zestawienie zespołów (nie wszystkich ale wielu, ok 4000) czyli w zasadzie to co SEZAM oferuje, a jeszcze wczoraj było ich kilkadziesiąt, są też bardzo skąpo reprezentowane jednostki w nich (większość zespołów "pusta" tj nie tylko skanów brak, ale zestawienia jednostek brak)
a może bogaciej niż skąpo? nie wiem..przejrzenie - jest zawartość/nie ma na piechotę czasochłonne
byłaby możliwość ściągnięcia, zrzutu (czy to do postaci katalogów/folderów czy prostego csv) bym wiedział...i miał na okazję "rozmyśliliśmy się, wycofaliśmy, trzeba jechać do AP i przeglądać wydruki)
dwa: opcja uploadu...coś prostego pozwoliłoby większej liczbie osób "repozytorium" tworzyć. To nie jest jeszcze sprecyzowany pomysł, bardziej hasło rzucam niż proponuję konkret: ułatwienie niezbyt zaawansowanym użytkownikom włączenie się w re-use polegającym m.in. na pracy (zmiana nazw, przeorganizowanie układu, udostępnienie w przyjaźniejszej formie) także na etapie wgrania
nie pilne, ale jeśli projektowanie "wtyczki" (tu już "" bo wtyczką to by nie było) wymaga pomyślenia o tym na początku ..to warto wziąć pod uwagę
pozdrawiam
kkrzastek - 06-11-2017 - 11:29
Temat postu: Wtyczka do pobierania skanów np. SZWA
Dużo pracuję na bibliotekach internetowych. Twoja wtyczka jest bardzo dobrą inicjatywą. Dziękuję Ci za Twoją pracę i podzielenie się jej efektami. Będę z niej korzystał często.
Spostrzeżenia na szybko.
1) Brak przycisku "Przerwij". Włączyłem testowo losowy zespół. Po zorientowaniu się, że ma dużo zdjęć chciałem przerwać działanie wtyczki. Nie znalazłem takiego przycisku. Musiałem użyć ALt+F4.
2) Brak możliwości wybrania przedziału plików z zespołu np od 045 do 120. Czasami potrzebuję pobrać tylko wybraną część zespołu. Korzystam z mobilnego internetu i muszę uważać na limit transferu. Taka funkcja byłaby bardzo przydatna
3) Gdy wejdę w SZWA w konkretny zespół, włączę miniaturkę jakiegoś zdjęcia a potem uruchomię wtyczkę, to pliki zapisują się w standardowym katalogu, a nie we wskazanym. Można dołączyć informację na temat postępowania, aby efekt z góry znany.
4) Czy jest możliwość pominięcia klikania "zapisz" dla każdego pliku z osobna? Gdy zespół liczy 1000 zdjęć, może to bardzo obciążyć komputer, gdy w pamięci podręcznej mamy otwarte tyle okien do zapisu. Jeśli się mylę, proszę o poprawę. Jeśli nie da się tego uniknąć, to i tak wtyczka jest wielkim ułatwieniem w pobieraniu.
Dziękuję za Twoją pracę. Z tej wtyczki na pewno będę teraz korzystał.
Pozdrawiam
xtedek - 06-11-2017 - 12:14
Temat postu: Wtyczka do pobierania skanów np. SZWA
@kkrzastek
Dzięki za miłe słowa.
1. Po zamknięciu okna powinno przestać pobierać
2. W przyszłości, na pewno do FS bo tam księgi są porozrzucane po filmach
3. Potrzebuję chyba konkretny link, żeby sprawdzić co i jak
4. Chrome -> Ustawienia -> Zaawansowane -> Pobrane pliki -> Pytaj przed pobraniem, gdzie zapisać każdy plik -> wyłączyć
@Sroczyński_Włodzimierz
Zacząłem tak naprawdę od FS ale na razie mam taką wczesną wersję, tam jest dużo ustawień do zrobienia. No i ciekawe czy czasem FS tego nie będzie chciał blokować, ale skoro sami dają opcję ściągnięcia...
Co do uploadu to odpada, to tylko wtyczka do pobierania, narzędzie, temat na inny projekt i ja się tego nie podejmę
kkrzastek - 06-11-2017 - 13:43
Temat postu: Wtyczka do pobierania skanów np. SZWA
Wyłączenie zapytania o katalog zapisu pobranych plików zlikwidowało problemy
1) przerwania pobierania poprzez zamknięcie danego okna przeglądarki. Wcześniej nie było to możliwe ze względu na mnogość otwierających się okien z zapytaniem o ścieżkę zapisu;
3) problem występował tylko, gdy opcja pytania o ścieżkę zapisu była włączona;
4) zapis działa teraz bardzo płynnie, dając komfort i przyjemność z korzystania.
Jeżeli podczas korzystania pojawią się u mnie jakieś, problemy z pewnością dam znać.
Krzysztof Krząstek
artmanc - 06-11-2017 - 14:27
Temat postu: Wtyczka do pobierania skanów np. SZWA
Świetna sprawa! Dziękuję za udostępnienie wersji testowej! Przy okazji - na przyszłość - zgłaszam propozycję uwzględnienia we wtyczce (o ile to technicznie możliwe) możliwości pobierania ze strony ZAO Opava (http://digi.archives.cz/da/index.jsp).
Pozdrawiam
Artur Cielecki
Piotr_Pizoń - 06-11-2017 - 14:42
Temat postu: Wtyczka do pobierania skanów np. SZWA
Czy tą wtyczką będzie można pobrać z http://www.agad.gov.pl ?
Czyli np. coś takiego: http://agadd.home.net.pl/metrykalia/301 ... indeks.htm
Pozdrawiam Piotr
xtedek - 06-11-2017 - 15:45
Temat postu: Wtyczka do pobierania skanów np. SZWA
@artmanc
możliwości pobierania ze strony ZAO
- może kiedyś
@Piotr_Pizoń
Czy tą wtyczką będzie można pobrać z http://www.agad.gov.pl ?
- może kiedyś
marekzaborski - 09-11-2017 - 09:04
Temat postu: Wtyczka do pobierania skanów np. SZWA
Czy równolegle można pobierać kilka sygnatur i program zapisze w oddzielnych folderach?
Marek
fiolet - 09-11-2017 - 10:43
Temat postu: Wtyczka do pobierania skanów np. SZWA
Kamil - dziękuję - jesteś WIELKI ! Kawał dobrej roboty !
Super narzędzie, które pozwoli mi zaoszczędzić dużo czasu na ściąganie przy słabym necie. W ciągu godziny wykonałam pracę, która normalnie zajęłaby mi nawet kilka tygodni - co daje mi szansę na spokojną pracę bez internetu.
Pozdrawiam Beata
Mendyka_Grzegorz - 09-11-2017 - 14:26
Temat postu: Re: Wtyczka do pobierania skanów np. SZWA
fiolet napisał:
Kamil - dziękuję - jesteś WIELKI ! Kawał dobrej roboty !
Super narzędzie, Pozdrawiam Beata
dołączam do Beaty
z konieczności piszę do Ciebie maile/zrzuty ekranowe!/,
a Ty natychmiast odpowiadasz:
Trzeba otworzyć tą stronę właśnie w przeglądarce Chrome
bo wydaje mi się, że jest teraz otworzona w IE.
W razie dalszych problemów lepiej mnie i innych pytać na forum,
zostanie wiedza dla potomnych.
Ok, będę ćwiczył po wyłączeniu IE
Szacun
Mendyka_Grzegorz - 10-11-2017 - 13:06
Temat postu: Re: Wtyczka do pobierania skanów np. SZWA
ale teraz problem bo SzWA nie pokazuje mi skanow metryk w parafiach, ktore były z pewnością
-czy ktoś może mi potwierdzić- sprawdzić, że faktycznie nie ma w SzWA skanów
parafii Kalisz, Leszno, Poznań, Domachowo, Rajsko... nie wiem co się dzieje
-czy może mi ktoś podać dowolny link do dowolnej parafii ze skanami w SzWA, bym przećwiczył
-czy to z powodu awarii serwerowni firmy OVH w Europie????!
Sroczyński_Włodzimierz - 10-11-2017 - 13:21
Temat postu:
53/3647/0 Akta stanu cywilnego Parafii Rzymskokatolickiej św. Mikołaja Kalisz
brak skanów
53/3373/0 Akta stanu cywilnego Parafii Rzymskokatolickiej Leszno
brak skanów
dowolna "parafia"
http://szukajwarchiwach.pl/72/158/0/str ... bJednostki
link do widoku ze skanami w losowej jednostce
http://szukajwarchiwach.pl/72/158/0/-/4#tabSkany
nie, ovh nie ma z tym nic wspólnego
NAC ma własne serwery, łącza i zupełnie niezależną strukturę
ew. jak dns by poszły to byłby problem
91.207.156.23 (na dziś;) jakby co
Worwąg_Sławomir - 10-11-2017 - 13:46
Temat postu:
"53/3647/0 Akta stanu cywilnego Parafii Rzymskokatolickiej św. Mikołaja Kalisz
brak skanów"
Są, ale tylko lata 1866-1874
http://szukajwarchiwach.pl/53/3647/0/6. ... bJednostki
Mendyka_Grzegorz - 10-11-2017 - 14:44
Temat postu:
Worwąg_Sławomir napisał:
+
"53/3647/0 Akta stanu cywilnego Parafii Rzymskokatolickiej św. Mikołaja Kalisz
brak skanów"
Są, ale tylko lata 1866-1874
http://szukajwarchiwach.pl/53/3647/0/6. ... bJednostki
Ano właśnie: dlaczego Włodek widzi "brak skanów"
zaś Sławek znalazł?
Ot pytanie!
ponawiam próby:
-na hasło Kalisz widzę różności, ale bez metryk:
http://szukajwarchiwach.pl/search?q=Kal ... SKANro%3At
-dodaję opcję: Akta metrykalne i stanu cywilnego
i widzę: Brak wyników dla frazy: Kalisz
co robię niewłaściwie?
przed próbami z wtyczką Kamila tego nie miałem zarówno w IE i Chrome
ps: Włodek-wpisz w SzWA hasło Warszawa i
-dodaj opcję: Akta metrykalne i stanu cywilnego
http://szukajwarchiwach.pl/search?q=War ... amp;order=
Sroczyński_Włodzimierz - 10-11-2017 - 14:48
Temat postu:
Teraz i Włodek widzi:)
skupiłem się na informacji o brakach (domniemując, że były wszystkie, potwierdziłem, że są jednostki których skanów brak) Sławek - i słusznie - sprecyzował, że brak nie dotyczy wszystkiego
w odpowiednim wątku (o NAC i szwa) znajdziesz informacje o wyszukiwaniu i błędach
w końcu to SZUKAJ
nie znajdź:)
xtedek - 10-11-2017 - 14:58
Temat postu:
Niestety na szwa widać mają duże problemy.
To co ja widzę, że u nich szwankuje w tej chwili:
1. Wyszukiwarka "Tylko ze skanami" nie zwraca wyników pomimo, że są
2. Zaznaczenie "Akta metrykalne i stanu cywilnego" nie zwraca wyników pomimo, że są
3. Liczba skanów czasem pokazuje "0", pomimo, że są
4. Skany były a teraz ich nie ma - tu pewny nie jestem, ale wydaje mi się, że się tak zadziało
Grzegorzu na te problemy nie ma wpływu moja wtyczka, ona jest tylko do ściągnięcia tego co człowiek sam już znajdzie.
Mendyka_Grzegorz - 10-11-2017 - 15:12
Temat postu:
xtedek napisał:
Niestety na szwa widać mają duże problemy.
To co ja widzę, że u nich szwankuje w tej chwili:
1. Wyszukiwarka "Tylko ze skanami" nie zwraca wyników pomimo, że są
2. Zaznaczenie "Akta metrykalne i stanu cywilnego" nie zwraca wyników pomimo, że są
3. Liczba skanów czasem pokazuje "0", pomimo, że są
4. Skany były a teraz ich nie ma - tu pewny nie jestem, ale wydaje mi się, że się tak zadziało
Grzegorzu na te problemy nie ma wpływu moja wtyczka, ona jest tylko do ściągnięcia tego co człowiek sam już znajdzie.
Tak Kamilu, Twoja wtyczka działa super! dziękuję!
ja miałem pecha, że trafiłem na problemy SzWA, co potwierdzasz w 1,2,3,4, podczas prób i uczenia się Twojej wtyczki,
zaś przy mojej mozolnej znajomości różnych komputerowo-programistycznych cudów mogę się dodatkowo pogubić.
Dlatego dziękuję za pochylenie się nad nami Tobie i tym, którzy pomagają
autentycznie, bez ironicznych przytyków.
Pozdrawiam
do następnego problemu wykluczanych 
krycla - 10-11-2017 - 15:48
Temat postu:
Wtyczka bardzo fajna, ale ja mam problem.
Ponieważ włączam pobieranie i nic nie ruszam, czekam aż pobierze wszystkie skany.
Skany się pobierają pobierają i nagle 137/243 i koniec.
Proces się przerywa i kończy.
Druga kwestia jest taka że po zakończeniu kompletnego lub nie kompletnego procesu pobierania potem mam problem z uruchomieniem SZWA, strona się nie odświeża wręcz nie może załadować.
Co można z tym fantem zrobić? Jakieś porady?
Pozdrawiam,
K.F
xtedek - 10-11-2017 - 16:23
Temat postu:
krycla napisał:
Wtyczka bardzo fajna, ale ja mam problem.
Ponieważ włączam pobieranie i nic nie ruszam, czekam aż pobierze wszystkie skany.
Skany się pobierają pobierają i nagle 137/243 i koniec.
Proces się przerywa i kończy.
Druga kwestia jest taka że po zakończeniu kompletnego lub nie kompletnego procesu pobierania potem mam problem z uruchomieniem SZWA, strona się nie odświeża wręcz nie może załadować.
Co można z tym fantem zrobić? Jakieś porady?
Pozdrawiam,
K.F
To jest wersja testowa i po to jest też na forum, żeby opisywać błędy
Proszę podać link na którym dokładnie taki błąd występuje. I napisać co dokładnie krok po kroku trzeba zrobić żeby zablokować stronę.
Żeby coś naprawić to najpierw muszę to zobaczyć, a żeby to zrobić muszę błąd odtworzyć u siebie
krycla - 15-11-2017 - 14:32
Temat postu:
Witam,
Otwieram normalnie SZWA na jakiejkolwiek stronie ze skanami.
Rozpoczynam pobieranie i dochodzi do jakiegoś momentu np 137/245 skanów i przerywa się akcja pobierana a przy okazji blokuje strona SZWA i nie można przez dłuższy czas jej włączyć.
http://szukajwarchiwach.pl/30/338/0/-/1 ... 1#tabSkany udało mi się je pobrać za którymś kolejnym razem.
pozdrawiam.
K.F
Mariok - 08-02-2018 - 10:02
Temat postu:
Witam,
wtyczka super, ale mam problem chyba nie dotyczący samej wtyczki lecz czegoś u mnie, czego nie wiem. Zapisuje mi wszystkie skany ok, ale potem na wszystkie muszę klikać przycisk zachowaj - dlaczego jak tego uniknąć.
Z góry dziękuję za podpowiedź.
"
00000188.jpg
http://szukajwarchiwach.pl/48/284/0/-/3 ... OrXHgzescw
Plik tego typu może uszkodzić komputer.
PRZERWIJ ZACHOWAJ"
Tomkow - 12-02-2018 - 19:37
Temat postu:
Czy znacie Państwo podobne rozwiązanie dla skanów zawartych na serwisie FamilySearch? Trochę szukałem, ale nie znajduję, co nie wyklucza, że sprawa była już omówiona - wówczas przepraszam za zbędny SPAM.
Pozdrowienia, Tomasz
Sroczyński_Włodzimierz - 12-02-2018 - 20:42
Temat postu:
nie, dlatego (skoro do szwa już istniała wcześniej dobrze działająca, a chodziły słuchy, że do FS będzie pilna potrzeba bo zamkną) na początku listopada uśmiechałem się jako i Ty teraz czynisz
co było do FS - chyba już nie działa
fi8 - 08-05-2018 - 15:50
Temat postu:
Witam,
Czy plugin będzie jeszcze rozwijany?
Obecna wersja niestety po pierwszym użyciu zawiesiła się w trakcie pobierania i już nie udało się jej drugi raz zmusić do pracy mimo reinstalacji etc.
Dodatkowo wyglada na to, że SZWA przy masowym ściąganiu plików blokuje na jakiś czas dostęp.
Pozdrawiam,
Filip
kkrzastek - 06-06-2018 - 16:34
Temat postu:
Witam
Wtyczka przestała mi działać. Będąc na stronie ze skanami, pokazuje komunikat Przejdź do strony ze skanami. czy jest sposób, aby rozwiązać ten problem?
Krzysztof
Kazmierczak_Slawomir - 06-06-2018 - 17:03
Temat postu:
Dzień dobry,
wciąż działa program WebProject: https://www.dropbox.com/s/m4i27cb0qcj1d ... t.zip?dl=0
Pozdrawiam
Sławomir
Wszystkie czasy w strefie CET (Europa)
Powered by
PNphpBB2 © 2003-2006 The PNphpBB Group
Credits