urlclean

urlclean cung cấp các chức năng sau:
- Theo một chuyển hướng http,
- Theo một META HTML chuyển hướng,
- Để loại bỏ Urchin và Facebook thông số URL tracker
- Kết hợp tất cả những để unshorten và giải quyết các đường dẫn khác nhau
Hãy thử nó ra từ các dòng lệnh:
& Nbsp; python -m urlclean
Nội dung:
Chỉ số và bảng
- Index
- Mô-đun Index
- Tìm kiếm Trang
Tài liệu cho Mã
urlcleaner một module mà giải quyết url chuyển và loại bỏ theo dõi params url
urlclean.weedparams (url)
& Nbsp; loại bỏ Urchin Tracker và Facebook params giám sát từ url.
& Nbsp; args:
& Nbsp; url (str): Url để chà các params xấu xí
& Nbsp; Returns:
& Nbsp; (str). Sự trở lại sạch url
urlclean.httpresolve (url, ua = None, proxyhost = 'localhost', proxyport = 8118)
& Nbsp; giải quyết một chuyển hướng của một yêu cầu http.
& Nbsp; args:
& Nbsp; url (str): Các địa chỉ để theo một chuyển hướng
& Nbsp; ua (fn): Hàm trả về một chuỗi User Agent (tùy chọn)
& Nbsp; proxyhost (str): http máy chủ proxy (không bắt buộc)
& Nbsp; proxyport (int): http cổng máy chủ proxy (không bắt buộc)
& Nbsp; Returns: (str, httplib.response). Sự trở lại giải quyết url, và
& Nbsp; phản ứng từ các truy vấn http
urlclean.unmeta (url, res)
& Nbsp; Finds bất kỳ meta chuyển hướng một đối tượng httplib.response có text / html là content-type.
& Nbsp; args:
& Nbsp; url (str): Các địa chỉ để theo một chuyển hướng
& Nbsp; res (httplib.response): một đối tượng http.response
& Nbsp; Returns: (str). Sự trở lại giải quyết url
urlclean.unshorten (url, cache = None, ua = None,>> ** <> **