[0.7] Update programiku do pobierania ksiąg wieczystych z portalu ekw.ms.gov.pl
Nowy tag specialnie dla programu #ekwpobieraczek
Link do exe:
https://github.com/Rzezimioszek/eKW-pobieracz/releases/tag/0.7
Co nowego:
* Zapis do formatu HTML (na razie mam tekst i linki)
* Zapis do formatu TXT
* Zapis raportu z wyszukania dla każdej księgi osobno (z okienka po wpisaniu numeru, ale przed wybraniem treści) do JSON
* Zapis raportu z wyszukania do jednego pliku(z okienka po wpisaniu numeru, ale przed wybraniem treści) do CSV
* Baner przenoszący kliknięciem do tagu
* 8 bitowa muzyka
* Pobieranie/generowanie numerów KW nie mrozi okna programu
* Tryb pauzy
* Zatrzymywanie pobierania
(Zatrzymywanie i pauza następują po zakończeniu obecnego taska np. jeśli pobierasz po 5 ksiąg na raz to dopiero po ich pobraniu się zatrzyma)
* w przypadku błędu pobierania przez Chrome program spróbuje poprać przez EDGE (chromium)
* możliwość wyłączenia wyświetlania grafik na pobieranych stronach
* poprawiono mniejsze błędy (skalowanie nadal nie poprawione przy innych ustawieniach niż 100%)
* nadal stare UI, ale obudowane prawdziwy potwór Frankeisteina
* nowe nieznane błędy!!!
Po weekendzie siądę do kolejnych poprawek i wesji 0.8
https://github.com/Rzezimioszek/eKW-pobieracz
#ksiegiwieczyste #python #selenium #geodezja #nieruchomosci
Nowy tag specialnie dla programu #ekwpobieraczek
Link do exe:
https://github.com/Rzezimioszek/eKW-pobieracz/releases/tag/0.7
Co nowego:
* Zapis do formatu HTML (na razie mam tekst i linki)
* Zapis do formatu TXT
* Zapis raportu z wyszukania dla każdej księgi osobno (z okienka po wpisaniu numeru, ale przed wybraniem treści) do JSON
* Zapis raportu z wyszukania do jednego pliku(z okienka po wpisaniu numeru, ale przed wybraniem treści) do CSV
* Baner przenoszący kliknięciem do tagu
* 8 bitowa muzyka
* Pobieranie/generowanie numerów KW nie mrozi okna programu
* Tryb pauzy
* Zatrzymywanie pobierania
(Zatrzymywanie i pauza następują po zakończeniu obecnego taska np. jeśli pobierasz po 5 ksiąg na raz to dopiero po ich pobraniu się zatrzyma)
* w przypadku błędu pobierania przez Chrome program spróbuje poprać przez EDGE (chromium)
* możliwość wyłączenia wyświetlania grafik na pobieranych stronach
* poprawiono mniejsze błędy (skalowanie nadal nie poprawione przy innych ustawieniach niż 100%)
* nadal stare UI, ale obudowane prawdziwy potwór Frankeisteina
* nowe nieznane błędy!!!
Po weekendzie siądę do kolejnych poprawek i wesji 0.8
https://github.com/Rzezimioszek/eKW-pobieracz
#ksiegiwieczyste #python #selenium #geodezja #nieruchomosci
Cumulonimbus_Capillatus-32
2024-07-06 18:56:32
+64
@Iandschaft: i tak moze sprawdzić wpisując losowe numery kw. Jak ogarnie się kw w jakimś obrębie to łatwo zgadnąć inne kw działek z obrębu. Właściwie mając bardzo dużo czasu można znaleźć wszystkie kw.
Zresztą żałosne portaliki mają wszystkie kw po nr działek i tak naprawdę każdy ma dostęp, musi zapłacić tylko 30pare złotych. Ogólnie to państwo z kartonu, to powinno być albo publiczne, wyszukiwarka albo całkowicie tajne. A tymczasem jest taki bubel. Tak samo jak z pożyczkami na dowód, wpisywaniem wszystkiego w koszta i innymi bublami, które promują w tym kartonie "zaradność" czyli cwaniactwo i krętactwo.
Zresztą żałosne portaliki mają wszystkie kw po nr działek i tak naprawdę każdy ma dostęp, musi zapłacić tylko 30pare złotych. Ogólnie to państwo z kartonu, to powinno być albo publiczne, wyszukiwarka albo całkowicie tajne. A tymczasem jest taki bubel. Tak samo jak z pożyczkami na dowód, wpisywaniem wszystkiego w koszta i innymi bublami, które promują w tym kartonie "zaradność" czyli cwaniactwo i krętactwo.
LM317K
2024-07-06 18:46:42
+10
@RZM_4: "eKW pobieraczek"
a później przyjdzie wezwanie do opłaty za program pocztą ( ͡° ͜ʖ ͡°)
a później przyjdzie wezwanie do opłaty za program pocztą ( ͡° ͜ʖ ͡°)
ThePaueu
2024-07-06 23:26:12
+5
@mk321 przydatne kiedy szukasz właściciela działki/mieszkania i chcesz ominąć faszystowskie biuro nieruchomości
ext11
2024-07-06 23:40:37
+3
@RZM_4: hej, te pakiety są częścią biblioteki standardowej pythona i nie musisz ich dawać w requirements.txt:
asyncio
datetime
base64
time
sys
os
json
tkinter
webbrowser
logging
asyncio
datetime
base64
time
sys
os
json
tkinter
webbrowser
logging
RZM_4
[OP]
2024-07-06 23:06:55
+2
@pieknylowca powiedziałbym, że lepsza nazwa nie mogła się zwolnić ( ͡º ͜ʖ͡º)
affairz
2024-07-07 01:58:29
+2
@RZM_4: u mnie avast to blokuje na ament. to jest jakiś false positive czy nas chcesz tu kolego zhackować ( ͡° ͜ʖ ͡°)
Iandschaft
2024-07-06 18:47:01
+1
@RZM_4 I to każdy tak sb może sprawdzić na kogo jest jaki dom w całej Polszy?
mtosny
2024-07-06 20:22:42
+1
@RZM_4: Jak sobie radzisz z banowaniem przez EKW po wykryciu dużego ruchu? Ja pamiętam, że jak jakieś pół roku temu robiłem zrzut ksiąg z jednego IP / komputera przy użyciu Selenium, to po pobraniu kilku tysięcy ksiąg dostałem info o wykryciu zautomatyzowanego ruchu i na jakiś czas strona wtedy nie odpowiadała.
RZM_4
[OP]
2024-07-06 20:25:25
+1
@mtosny do tej pory pobrałem kilka tysięcy ksiąg i nic takiego się nie wydarzyło
RZM_4
[OP]
2024-07-06 20:30:56
+1
@mtosny zresztą Mirek @KobyleCaco pisał pod poprzednim postem, że włączył programik na 24h i nie było problemów, więc może coś się zmieniło od strony ekw.ms.gov.pl
RZM_4
[OP]
2024-07-06 20:46:14
+1
@mtosny zrobić coś takiego byliby super, ale nie wiem czy mam tyle umiejętności i czasu. Na ten moment nie wykluczam rozwoju w tym kierunku, lecz to nie mój priorytet
MercedesBenizPolska
2024-07-06 20:57:26
+1
@RZM_4: dzieki za poprawe przycisku na „ostroznie” :)
m.....8
2024-07-06 22:02:33
+1
@RZM_4: jakiś czas temu stworzyłem na swoje potrzeby coś podobnego i śmiga bez problemu. Kiedyś było captcha ale chyba po czasie wywalili, a zabezpieczenia które maja na tej stronce są śmieszne i da się je obejść właśnie w podobny sposób jak zrobiłeś.
Tommy__
2024-07-06 22:17:41
+1
@RZM_4: Ta wersja działa, na przyszłość jak takie rzeczy wrzucasz to polecam virtualboxa z czystym windowsem żeby zobaczyć czy tam się będzie odpalać
virusriddle
2024-07-06 22:54:34
+1
@Cumulonimbus_Capillatus-32: z tym to jest lepiej bo jakiś czas temu w jeden weekend nagle KW się otworzyły na świat i każdy mógł wszystko sprawdzić. Płatne portale się zaktualizowały i po weekendzie "oj była awaria ale już naprawione"
pieknylowca
2024-07-06 22:55:49
+1
@RZM_4: gorzej z nazwą nie mogłeś trafić
RZM_4
[OP]
2024-07-06 23:05:31
+1
@ChamskoCytuje w tej brzydocie jest coś pięknego
GOHAN
2024-07-06 23:17:28
+1
@RZM_4: Po grzyba w ogóle ta muzyka.... Pod Plik albo nic nie ma albo baner jest na wyższej warstwie :)
e.....a
2024-07-07 02:56:05
+1
@janekhe: w sensie w miejscu takim żeby nie zdjęli powołując się na RODO itp. Dobrze wiesz co miałem na myśli. Takie ściąganie sobie wszystkiego przez każdego z osobna będzie miało tylko jeden skutek. Serwery padną i wprowadzą takie limity że trzeba będzie premium wykupić a takie premium jak wprowadzą może wymagać specjalnych uprawnień i weryfikacji. Dlatego zamiast popsuć bubla trzeba go zmyślnie obejść
e.....a
2024-07-07 04:22:01
+1
@janekhe: luz, zrobiłem taki trochę skrót myślowy z d to i miałeś prawo nie załapać ( ͡° ͜ʖ ͡°)
syn_admina
2024-07-07 05:37:31
+1
Dumbldore
2024-07-10 21:34:12
+1
[komentarz usunięty]
RZM_4
[OP]
2024-07-06 19:01:04
+0
@Iandschaft jeśli znasz numer księgi to tak, dostęp do ksiąg jest otwarty od dawna
mtosny
2024-07-06 20:33:06
+0
@RZM_4: Jeżeli masz chęci, to możesz rozszerzyć projekt o stworzenie sieci/botnetu, do której można dołączyć, by zescrapować całe EKW. Czyli robisz serwer i dajesz ludziom klienty. Serwer przygotowuje listę numerów ksiąg do sprawdzenia. Klient podłączając się dostaje zakres ksiąg do sprawdzenia, scrapuje EKW (to już masz w aktualnej wersji aplikacji) i wysyła serwerowi rezultaty. Serwer odpowiada za walidację danych i zebranie ich do kupy a potem publikację, np. w sieci torrent. Oczywiście należy zadbać o jakość danych, np. każda księga powinna być pobrana przez 3 niezależne klienty i jeśli jej stan od wszystkich 3 jest spójny, to wtedy traktujemy go jako poprawny i nadający się do publikacji 😉
affairz
2024-07-06 20:39:47
+0
@RZM_4: jak to pobrać? próbuję pobrać exe i zrywa mi w mniej niż połowie
RZM_4
[OP]
2024-07-06 20:47:49
+0
@affairz z pierwszego linku GitHub pobierasz zip I tam wszystko jest, to ma około 100 mb więc nie powinno być problemów z popraniem
17loginbylzajety
2024-07-06 20:50:24
+0
@RZM_4: dzięki za jsona
Tommy__
2024-07-06 21:28:18
+0
@RZM_4: rFailed to load dynlib/dll '.\\libvlc.dll'. Most likely this dynlib/dll was not found when the application was frozen.
RZM_4
[OP]
2024-07-06 21:40:20
+0
@Tommy__ może to być problem z biblioteką python-vlc , czy aplikacja się uruchomiła czy później się pojawił problem?
RZM_4
[OP]
2024-07-06 21:50:04
+0
@Tommy__ będę musiał wyłączyć opcję związane z muzyką, bo nie mogę wymagać aby do takiej pierdoły jak muzyka w tle każdy miał zainstalowane VLC
RZM_4
[OP]
2024-07-06 21:59:00
+0
@Tommy__ pobierz ponownie, pod tym samym linkiem jest wersja z usunietą muzyką, zobacz czy działa jeśli masz możliwość
RZM_4
[OP]
2024-07-06 22:02:11
+0
@Tommy__ bez muzyczki się obejdzie, więc może w następnej wersji wrócić z inną biblioteką do muzyki lub spakuje plik dll wymagany od VLC, no nic podminilem plik teraz nie powinno być z tym problemów
HighFlyingBird
2024-07-06 22:07:39
+0
@RZM_4 ile jest wszystkich-wszystkich ksiag? i ile czasu zajęłoby mi ich pobranie? xd
RZM_4
[OP]
2024-07-06 22:24:35
+0
@HighFlyingBird potencjalnych numerów ksiąg jest okolo 32 000 000 000 z czego większość to wolne numery i pobranie takiego zbioru jednym komputerem zjaleoby około 2 576 388 dni przy założeniu że każda księga istnieje, więc w praktyce mogłoby to być nawet 4 razy szybciej, jedna księga przy optymistycznym założeniu jakie przyjąłem to 7 sekund. Więc aby móc to zrobić należaloby pobierać więcej ksiąg na raz niż 5 przez więcej niż 1 komputer. Program raczej służy do pobierania z konkretnej listy, bo np. pobierasz księgi po wywłaszczenia drogowe i musisz pobrać 2000 ksiąg lub najpierw pobierasz CSV, który zapisuje wyniki wyszukiwania bez treści ksiąg i dopiero potem tylko te księgi które istnieją
RZM_4
[OP]
2024-07-06 22:27:18
+0
@Tommy__ wiem już zwykle wrzucałem sobie to na virtualke, ale nie chciało mi się tego na laptopie robić, bo sobie tylko sklejałem to przez tydzień wymyśliłem
ChamskoCytuje
2024-07-06 22:55:44
+0
@RZM_4: do desingerem to raczej nie zostaniesz ( ͡° ͜ʖ ͡°)
ButtHurtAlert
2024-07-06 23:11:55
+0
@RZM_4 co do vlc to stare keygeny używały jakiegoś śmiesznego formatu ala midi, ale w sumie ciekawe jak tam odtwarzanie było ogarnięte
mk321
2024-07-06 23:24:06
+0
@Cumulonimbus_Capillatus-32 @RZM_4 po co komuś księgi wieczyste? Chcesz wiedzieć gdzie ktoś mieszka i mieć jego dane? Po coś to potrzebne?
Przy kupnie mieszkania?
Bo jedyny pomysł, to branie kredytów na PESEL, ale można teraz sobie zastrzec.
Przy kupnie mieszkania?
Bo jedyny pomysł, to branie kredytów na PESEL, ale można teraz sobie zastrzec.
M.....i
2024-07-06 23:44:46
+0
@Itslilianka: Na rozprawę sądową jest potrzebne np.
A powody rózne są, jest jeden mirek co ma tag, co pare lat juz ma spór z sąsiadem i jest bardzo popularny, ale raz na rok, albo dwa lata dodaje wpis bo sie dlugo to ciagnie xd
A powody rózne są, jest jeden mirek co ma tag, co pare lat juz ma spór z sąsiadem i jest bardzo popularny, ale raz na rok, albo dwa lata dodaje wpis bo sie dlugo to ciagnie xd
bylem_zielonko
2024-07-06 23:45:46
+0
do desingerem to raczej nie zostaniesz ( ͡° ͜ʖ ͡°)
@ChamskoCytuje: jakby całe okno było większe i wszystko poumieszczane w większych odstępach + lepsze buttony to byłoby OK
p3oo1
2024-07-06 23:57:10
+0
@Iandschaft: @RZM_4 taka ciekawostka dla ludzi nie w temacie. Zaorski udostępnij numer swojej księgi ze złotej 44. Mając ten numer ma się bardzo łatwy dostęp do wszystkich księg w budynku xd
P.....o
2024-07-06 23:59:12
+0
@RZM_4: dodasz może chiptune w tle jak z jakiegoś pirackiego instalatora? ( ͡° ͜ʖ ͡°)
radziuxd
2024-07-07 00:16:42
+0
@RZM_4: serio zmień nazwę na DOWLONADER czy coś, bo nie mogę tego pobieraczka zdzierżyć xD
d.....a
2024-07-07 00:37:07
+0
@RZM_4 Zastanawiam się na ile jest to legalne? W sensie, nikogo to nie zdziwi, że z jednego adresu IP ktoś pobiera sobie tysiące księg?
ozzi91
2024-07-07 01:28:38
+0
@RZM_4: chociaż nie działa u mnie, ma edge najnowsze, chrome nie mam. program otwiera chromium, otwiera pierwszy dział a tak jakby dalej nie daje rady.
[07.07.24 01:20:30]Błąd pobierania wybranych działów księgi: OP1U/00000001/7
[07.07.24 01:20:30]Błąd pobierania wybranych działów księgi: OP1U/00000001/7
e.....a
2024-07-07 02:40:16
+0
@RZM_4: a po cholerę każdy ma pobierać księgi wieczyste? To nie lepiej zrobić oddzielny serwis z wyszukiwarką po nazwisku lub PESELu i wystawić to gdzieś w TORze lub republice bananowej?
janekhe
2024-07-07 02:47:56
+0
@europa: republice bananowej? pierwsze slysze, wtajemnicz mnie ( ͡° ͜ʖ ͡°)
Jan998
2024-07-07 03:13:13
+0
@RZM_4: Do tego GUI to powinieneć mieć wmontować jakąś muzyczkę MIDI ^^
RZM_4
[OP]
2024-07-07 07:54:16
+0
@mk321 @Itslilianka na użytek prywatny faktycznie po grzyba, ale w pracy wiele osób musi pobierać takie rzeczy czytać, załączać wydruki ze strony do dokumentacji itp.
RZM_4
[OP]
2024-07-07 08:33:12
+0
@affairz kod jest dostępny na githubie i jest to to samo co w exe, więc jeśli żadna z bibliotek które używam nie jest zainfekowana, a nie używam żadnej nietypowej, to chyba Avast jest nadgorliwy. Ewentualnie jeśli Ci się chce możesz sam skomplikować exe I czy będzie ten sam efekt
RZM_4
[OP]
2024-07-07 08:56:35
+0
@syn_admina jeśli boisz się pliku exe to już jesteś niewolnikiem systemu (windows), a tak serio kod jest dostępny na githubie, jak chcesz możesz odpalić bezpośrednio z nieskomplikowanego pliku
janekhe
2024-07-07 09:34:15
+0
@syn_admina: defender oznacza doslownie wszystko jako wacatac (jesli nie zaplacisz grubej kasy za sygnowanie kodu), jezeli widzisz ta nazwe to nie masz o co sie bac
Drogomir
2024-07-11 20:31:14
+0
[komentarz usunięty]