screen-scraper

Dự án màn hình-scraper là một công cụ được sử dụng để trích xuất dữ liệu từ các trang web. Bạn có thể sử dụng màn hình-scraper cho các mục đích sau:
· Khai thác dữ liệu và Extraction
· Di cư dữ liệu
· Tích hợp ứng dụng
· Kinh doanh thông minh
· Web công tác tự động hóa
· Portal Components
· Meta-Searching
· Lưu trữ
Các ứng dụng màn hình-scraper bao gồm hai phần chính:
 
· Workbench: Một giao diện người dùng đồ họa cung cấp một cách tiếp cận trực quan cho phép bạn chỉ định các trang và các phần cụ thể của thông tin được trích xuất.
· Server: Sau khi sử dụng bàn làm việc để chỉ định các dữ liệu được cạo, màn hình-scraper có thể được chạy trong một chế độ máy chủ, giống như một cơ sở dữ liệu. Các ứng dụng bên ngoài thì có thể kết nối với màn hình-scraper, mà sẽ kéo dữ liệu ra của các trang web được chỉ định, sau đó trả lại cho ứng dụng gọi. Ví dụ, bạn có thể xây dựng một ứng dụng dựa trên web bằng cách sử dụng Active Server Pages (ASP) hoặc PHP để gọi màn hình-scraper để tìm kiếm các sản phẩm được tìm thấy trên một trang web bên ngoài trong thời gian thực.
Ngoài ra, màn hình-scraper có thể được bắt đầu trong một chế độ phi đồ họa từ dòng lệnh như vậy mà nó có thể được lên kế hoạch hoặc gọi theo yêu cầu.
màn hình-scraper có thể tự động hóa nhiều trong những nhiệm vụ thường được yêu cầu khi cạo dữ liệu từ các trang web, chẳng hạn như theo dõi các tập tin cookie, đăng nhập vào các trang web, và vượt qua các trang kết quả tìm kiếm.
Tùy thuộc vào ngôn ngữ lập trình và nền tảng mà bạn thích nhất, màn hình-scraper có thể sẽ quen thuộc với bạn. màn hình-scraper chứa một công cụ kịch bản nội bộ hỗ trợ:
· VBScript
· JScript
· Perl
· Java Interpreted
· JavaScript
· Python
Khi gọi màn hình-scraper bên ngoài để lựa chọn các ngôn ngữ sau:
· Java
· PHP
· Bất cứ điều gì COM dựa trên (chẳng hạn như Active Server Pages, Visual Basic và Visual C ++)
· NET (cả Microsoft và dựa trên Mono)
· Cold Fusion
Có gì mới trong phiên bản này:
· Một số sửa lỗi và tính năng nhỏ đã được thêm vào, bao gồm cả tự động sao lưu cơ sở dữ liệu, HTML rendering tăng cường và HTML tước, sửa chữa một lỗi gây ra trùng lặp kịch bản xuất hiện vào những thời điểm nhập khẩu, và sửa chữa nhiều lỗi liên quan đến các bộ ký tự quốc tế và phi ký tự ASCII.