Apache CarbonData Documentation Ver 1.4

......................................................................................................................................

Apache CarbonData

Ver 1.4.1 Documentation

......................................................................................................................................

The Apache Software Foundation

2018-08-17

Table of Contents

i

Table of Contents

....................................................................................................................................... 1. Table of Contents . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . i 2. Quick Start . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 3. CarbonData File Structure . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3 4. Data Types . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5 5. Data Management on CarbonData . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 6. Installation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 26 7. Configuring CarbonData . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31 8. Streaming Guide . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44 9. SDK Guide . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48 10. S3 Guide (Alpha Feature) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11. DataMap Developer Guide . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65 12. CarbonData DataMap Management . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13. CarbonData BloomFilter DataMap (Alpha Feature) . . . . . . . . . . . . . . . . . . . . . . 66 14. CarbonData Lucene DataMap (Alpha Feature) . . . . . . . . . . . . . . . . . . . . . . . . . . . 69 15. CarbonData Pre-aggregate DataMap . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 72 16. CarbonData Timeseries DataMap . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 76 17. FAQs . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79 18. Troubleshooting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83 19. Useful Tips . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87

?2018, The Apache Software Foundation ? ALL RIGHTS RESERVED.

Table of Contents

ii

?2018, The Apache Software Foundation ? ALL RIGHTS RESERVED.

1 Quick Start

1

1 Quick Start

....................................................................................................................................... Quick Start This tutorial provides a quick introduction to using CarbonData.

1.1 Prerequisites ? Installation and building CarbonData. ? Create a sample.csv file using the following commands. The CSV file is required for loading data into CarbonData.

cd carbondata cat > sample.csv ................
................

In order to avoid copyright disputes, this page is only a partial summary.

Google Online Preview   Download