Nie jesteś zalogowany.
Jeśli nie posiadasz konta, zarejestruj je już teraz! Pozwoli Ci ono w pełni korzystać z naszego serwisu. Spamerom dziękujemy!

Ogłoszenie

Prosimy o pomoc dla małej Julki — przekaż 1% podatku na Fundacji Dzieciom zdazyć z Pomocą.
Więcej informacji na dug.net.pl/pomagamy/.

#1  2023-07-28 19:00:56

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

( SOLVED) Wget i PDFy

Chcialem sciagnac wybiorczo kilka plikow .pdf z okreslonej domeny (https://cheatography.com/explore/). Moglbym dolaczyc liste komend , ktore probowalem, wszystko na nic.
Moze ktos ma jakies dobre doswiadczenia w tym zakresie?

Ostatnio edytowany przez Karoll (2023-08-03 11:43:06)


Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

#2  2023-07-31 11:17:43

  megabajt - Użytkownik

megabajt
Użytkownik
Skąd: Wrocław
Zarejestrowany: 2012-03-07

Re: ( SOLVED) Wget i PDFy

Offline

 

#3  2023-07-31 12:09:30

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

Re: ( SOLVED) Wget i PDFy

Dzieki za linka, innym dodatkiem FF jest "AddThemAll" Niestety to wszystko kiepsko dziala.
Ludzie pisza skrypty, uzywaja Pythona. Mysle ze to jest zadanie dla webmastera.
Pozdro.


Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

#4  2023-07-31 20:05:45

  mati75 - Psuj

mati75
Psuj
Skąd: masz ten towar?
Zarejestrowany: 2010-03-14

Re: ( SOLVED) Wget i PDFy

Z czym jest problem?

Kod:

wget https://cheatography.com/kontodonauki/cheat-sheets/genetyka-4-dziedziczenie-mendla/pdf/ -O genetyka-4-dziedziczenie-mendla.pdf
--2023-07-31 20:04:39--  https://cheatography.com/kontodonauki/cheat-sheets/genetyka-4-dziedziczenie-mendla/pdf/
Translacja cheatography.com (cheatography.com)... 178.79.154.177
Łączenie się z cheatography.com (cheatography.com)|178.79.154.177|:443... połączono.
Żądanie HTTP wysłano, oczekiwanie na odpowiedź... 200 OK
Długość: nieznana [application/pdf]
Zapis do: `genetyka-4-dziedziczenie-mendla.pdf'

genetyka-4-dziedzic     [ <=>                ] 189,99K  1,00MB/s     w 0,2s    

2023-07-31 20:04:41 (1,00 MB/s) - zapisano `genetyka-4-dziedziczenie-mendla.pdf' [194553]

Normalnie się pobiera.


https://l0calh0st.pl/obrazki/userbar.png

Offline

 

#5  2023-07-31 22:58:40

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

Re: ( SOLVED) Wget i PDFy

@mati75
Zeby pobieralo same PDF-y a nie rekursywny mirroring calej domeny.


Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

#6  2023-07-31 23:54:20

  mati75 - Psuj

mati75
Psuj
Skąd: masz ten towar?
Zarejestrowany: 2010-03-14

Re: ( SOLVED) Wget i PDFy

Kod:

pup

powinno pomóc tylko, trzeba mape strony przygotować. 4 linijkowy skrypt w bashu wystarcza do ściągnięcia całej strony.

~~~edyta~~~~

da się prościej https://cheatography.com/sitemap.xml

Ostatnio edytowany przez mati75 (2023-07-31 23:56:13)


https://l0calh0st.pl/obrazki/userbar.png

Offline

 

#7  2023-08-01 15:50:16

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

Re: ( SOLVED) Wget i PDFy

Ja nie chce calej strony lub plikow .jpeg, tylko wszystkie pliki .PDF z domeny  "cheatography.com"
Bedzie ich tam ponad 1000.


Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

#8  2023-08-01 17:57:07

  mati75 - Psuj

mati75
Psuj
Skąd: masz ten towar?
Zarejestrowany: 2010-03-14

Re: ( SOLVED) Wget i PDFy

Dałem wędkę żeby rybe złowić sobie samemu.

Kod:

wget https://cheatography.com/sitemap.xml -O- | grep loc | grep -v media.cheatography.com | sed s%"<loc>"%%g | sed s%"</loc>"%%g

wyświetli wszystkie url na tej stronie dopisanie do każdego na końcu /pdf da pobranie pdfa


https://l0calh0st.pl/obrazki/userbar.png

Offline

 

#9  2023-08-01 19:39:38

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

Re: ( SOLVED) Wget i PDFy

Staram sie cos zlowic - ale ryby uciekly.

Kod:

mark@debian:/PDFy$ https://cheatography.com/ericg/cheat-sheets/vi-editor/pdf 
bash: https://cheatography.com/ericg/cheat-sheets/vi-editor/pdf: No such file or directory

Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

#10  2023-08-02 08:42:15

  arecki - Użytkownik

arecki
Użytkownik
Skąd: 44 Bronson Lane Hensonville
Zarejestrowany: 2016-03-03

Re: ( SOLVED) Wget i PDFy

To nie ryby uciekły tylko rybak coś nie teges ;)

Kod:

wget https://cheatography.com/ericg/cheat-sheets/vi-editor/pdf/ -O cheat-sheets.pdf

i analogiczne cała reszta z sitemap.

Offline

 

#11  2023-08-02 10:24:44

  megabajt - Użytkownik

megabajt
Użytkownik
Skąd: Wrocław
Zarejestrowany: 2012-03-07

Re: ( SOLVED) Wget i PDFy

Kod:

#!/bin/bash

site="https://cheatography.com/sitemap.xml"   
urls="$(wget -qO- "$site" | \
                grep '^  <loc>' | \
                sed 's/^  <loc>//g' | \
                sed 's/<\/loc>/pdf/g' | \  
                tr -d '\r')"

for i in $urls; do
        filename="$(echo "$i" | \
                sed 's/https:\/\/cheatography.com\///g' | \
                sed 's/\//./g')"
        wget -O "$filename" "$i"     
done

Offline

 

#12  2023-08-03 11:41:43

  Karoll - Użytkownik

Karoll
Użytkownik
Zarejestrowany: 2019-08-12

Re: ( SOLVED) Wget i PDFy

Obydwa sposoby tj, komenda Kol "arecki" i skrypt basha Kol "megabajt" dzialaja znakomicie! Z wyrazami szacunku za wiedze i wdziecznosci za poswiecony czas !!!
https://imgur.com/a/dvsEtZH


Tolerancja i apatia, to ostatnie cnoty umierającego społeczeństwa.
Gdy wiesz o wszystkim, co robi twoj rzad – to jest demokracja.
Gdy rzad wie wszystko o tobie – to jest tyrania !

Offline

 

Stopka forum

Powered by PunBB
© Copyright 2002–2005 Rickard Andersson
To nie jest tylko forum, to nasza mała ojczyzna ;-)