wget

8Ciepło

1Odpowiedz

łącza indeksujące polecenia sitemap.xml do polecenia wget:

Próbuję zaindeksować wszystkie linki pliku sitemap.xml, aby ponownie zapisać w pamięci podręcznej witrynę. Ale opcja rekurencyjna wget nie działa, otrzymuję tylko odpowiedź: Plik zdalny istnieje, ale

11Ciepło

1Odpowiedz

Jak ograniczyć szybkość pobierania żądań HTTP w żądaniach biblioteki Pythona?

Czy można ograniczyć szybkość pobierania żądań GET przy użyciu biblioteki Python requests? Na przykład z taką komendą: r = requests.get('https://stackoverflow.com/') ... czy możliwe jest ograniczeni

6Ciepło

1Odpowiedz

Jak uzyskać zrzut witryny Mozilla Developer Network

Jaki rozmiar ma cała witryna Mozilla Developer Network? api.jquery.com ma około 40 MB po pobraniu przez wget.

29Ciepło

3Odpowiedz

Miejsca nieakceptowania nagłówek agenta wget użytkownika

Kiedy uruchomić polecenie: wget --user-agent="Mozilla/5.0 (Macintosh; Intel Mac OS X 10.8; rv:21.0) Gecko/20100101 Firefox/21.0" http://yahoo.com ... uzyskać ten rezultat (z niczym innym w pliku): <

19Ciepło

3Odpowiedz

wget podaj nazwę pobranego pliku i nie ma innego pliku

Chcę użyć wget, aby mój plik przybierał nazwę, której chcę. Na przykład, jeśli wykonam wget -r http://www.x.com/y/z, plik główny zostanie nazwany z, mimo że w rzeczywistości jest to index.html. Sprawd

97Ciepło

4Odpowiedz

Jak pobrać cały katalog i podkatalogi za pomocą wget?

Próbuję pobrać pliki projektu za pomocą wget, ponieważ serwer SVN dla tego projektu nie jest już uruchomiony i mam dostęp tylko do plików za pośrednictwem przeglądarki. Adresy URL bazowe dla wszystkic

6Ciepło

1Odpowiedz

WGET Pobierz określone foldery w katalogu apache

Chcę pobrać niektóre foldery w tych samych katalogach przy użyciu wget, tutaj znajduje się struktura katalogu apache. example.com/main/eschool/PhotoAlbum/Album/2008-10-13-citieneducationcenter/ exam

5Ciepło

1Odpowiedz

wget zachować równoważność sesji curl

tworzę skrypt, który powinien pracować również w MAC i chciałbym wiedzieć równoważności następnego wiersza poleceń przy użyciu polecenia curl: wget --keep-session-cookies --load-cookies=cookies.txt --

324Ciepło

4Odpowiedz

Polecenie wget, aby pobrać plik i zapisać jako inną nazwę pliku

Pobieram plik przy użyciu polecenia wget. Ale kiedy pobierze na mój komputer lokalny, chcę, aby został zapisany jako inna nazwa pliku. Na przykład: Mam pobierając plik z www.examplesite.com/textfile.t

20Ciepło

2Odpowiedz

Jak zignorować określony typ plików do pobrania w wget?

Jak ignorować pliki .jpg, .png w wget, ponieważ chciałem uwzględnić tylko pliki .html. Staram: wget -R index.html,*tiff,*pdf,*jpg -m http://example.com/ ale to nie działa.