Apache Pig

Apache Pig đã sinh ra từ Apache Hadoop dự án và là một trong những mô-đun của nó mà nơi chịu trách nhiệm về việc cung cấp một cách để phân tích dữ liệu mà nó xử lý và lưu trữ.
Pig sử dụng một ngôn ngữ truy vấn tùy chỉnh được gọi là "Pig Latin", mà là vô cùng dễ dàng để tìm hiểu và hỗ trợ cả phong cách quan hệ và chức năng.
Điều này có nghĩa là bạn có thể sử dụng nó như là một ngôn ngữ SQL cổ điển được hưởng lợi từ các dữ liệu tham gia và các bộ lọc, hoặc bạn có thể sử dụng tính năng MapReduce của nó, là người vẽ bản đồ dữ liệu và gia giảm.
Theo mặc định Apache Pig đã có nghĩa là để được sử dụng bên trong cài đặt Hadoop, nhưng các phiên bản mới hơn cho phép nó chạy một cách riêng biệt thông qua một JVM riêng biệt

là gì mới trong phiên bản này:.

• động cơ thực hiện đầu cắm (để cho phép con lợn chạy trên các công cụ phi MapReduce trong tương lai)
• Chế độ Auto-địa phương (cho những công việc nhỏ kích thước dữ liệu đầu vào để chạy trong tiến trình)
• Fetch tối ưu hóa (để cải thiện interactiveness của grunt)
• quầy cố định cho địa phương-mode
• Hỗ trợ cho mức jar dùng bộ nhớ cache
• Hỗ trợ cho các danh sách đen và danh sách trắng lệnh lợn
• Nhiều sửa lỗi hiệu suất và tính năng debuggability
• Một số thay đổi giao diện không tương thích ngược đã được giới thiệu trong phiên bản này để làm cho công việc chăn nuôi lợn với động cơ không MapReduce

là gì mới trong phiên bản 0.14.0:

• động cơ thực hiện đầu cắm (để cho phép con lợn chạy trên không động cơ -mapreduce trong tương lai)
• Chế độ Auto-địa phương (cho những công việc nhỏ kích thước dữ liệu đầu vào để chạy trong tiến trình)
• Fetch tối ưu hóa (để cải thiện interactiveness của grunt)
• quầy cố định cho địa phương-mode
• Hỗ trợ cho mức jar dùng bộ nhớ cache
• Hỗ trợ cho các danh sách đen và danh sách trắng lệnh lợn
• Nhiều sửa lỗi hiệu suất và tính năng debuggability
• Một số thay đổi giao diện không tương thích ngược đã được giới thiệu trong phiên bản này để làm cho công việc chăn nuôi lợn với động cơ không MapReduce

là gì mới trong phiên bản 0.11.0:

• Phiên bản này bao gồm DateType datatype, RANK, CUBE và khai thác ROLLUP, UDFs Groovy, ước tính giảm tốc tùy chỉnh, các bộ đồ dựa trên và HCatalog DDL hội nhập.

là gì mới trong phiên bản 0.9.1:.

• Phiên bản này hoạt động với Hadoop 0.20

là gì mới trong phiên bản 0.6:

• Added Zebra là một dự án đã đóng góp. Xem http://wiki.apache.org/pig/zebra
• Added UDFContext, cho UDFs một cách để vượt qua thông tin từ trước ra sau kết thúc và cho UDFS truy cập vào JobConf trong backend.
• Added trái bên ngoài tham gia cho mảnh replicate tham gia.
• Thêm khả năng để thiết lập ưu tiên công việc từ Pig Latin.
• đa truy vấn nâng cao để làm việc với tham gia trong một số trường hợp.
• Quản lý bộ nhớ Làm lại để làm giảm đáng kể GC trên cao và Out của thất bại Heap.
• giao diện Added Accumulator cho UDFs.
• Hơn 100 sửa lỗi và cải tiến.

Yêu cầu :

• Java 1.6.x hoặc cao hơn
• Apache Hadoop 0.20.x trở lên