urlclean

urlclean zapewnia następujące funkcje:
- Śledzić przekierowania HTTP,
- Przestrzegać META HTML przekierowanie,
- Usunąć parametry tracker URL urwis i Facebooka
- Który łączy w sobie wszystko to, aby unshorten i rozwiązywać różne adresy URL
Wypróbuj go z linii poleceń:
& Nbsp; python -m urlclean
Spis treści:
Wskaźniki i tabele
- Główna
- Indeks Moduł
- Wyszukiwanie Strona
Dokumentacja Kodeksu
urlcleaner moduł, który rozwiązuje i usuwa przekierowany śledzenie adresów url params
urlclean.weedparams (url)
& Nbsp; usuwa tracker Urchin Facebook i params nadzoru z adresów URL.
& Nbsp; args:
& Nbsp; url (str): url do peelingu z brzydkich params
& nbsp; Zwraca:
& Nbsp; (str). Zwrot oczyścić url
urlclean.httpresolve (url, ua = Brak, proxyhost = "localhost", proxyport = 8118)
& Nbsp; rozwiązać jedno przekierowanie żądania HTTP.
& Nbsp; args:
& Nbsp; url (str): url podążać jedną przekierowanie
& Nbsp; ua (fn): Funkcja powrotu ciąg agenta użytkownika (opcjonalnie)
& Nbsp; proxyhost (str): http serwer proxy (opcjonalnie)
& Nbsp; proxyport (int): http proxy port serwera (opcjonalnie)
& Nbsp; Powroty: (str, httplib.response). Zwrot rozwiązany url, i
& Nbsp; odpowiedź zapytania http
urlclean.unmeta (url, res)
& Nbsp; jest zdania, że ​​każda meta przekierowania obiekt httplib.response który ma text / html jako typu zawartości.
& Nbsp; args:
& Nbsp; url (str): url podążać jedną przekierowanie
& nbsp; res (httplib.response): Przedmiotem http.response
& Nbsp; Powroty: (str). Zwrot rozwiązany url
urlclean.unshorten (url, cache = Brak, ua = Brak,>> ** <> **