# spark-java

**Repository Path**: dongyanggl/spark-java

## Basic Information

- **Project Name**: spark-java
- **Description**: 根据网上教程，创建的 spark java 工程
- **Primary Language**: Unknown
- **License**: Not specified
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 1
- **Forks**: 0
- **Created**: 2018-11-20
- **Last Updated**: 2020-12-19

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# spark-java

#### 项目介绍
根据网上教程，创建的 spark java 工程


## 创建项目的基本过程

1. 创建 Maven Project
    1. 选择 quickstart 
    2. 项目属性 - java build PATH 确认 jre 是机器中新的版本
    3. 配置 Maven，主要是一些连接 spark 的库，官网一般都会有
        1. 注意 scala 版本号
        2. dependency 中的 version 即 project.version 可能需要特定的版本号
        3. 有时下载的 jar 包一直提示出错，可以在 .m2 仓库中找到 jar 文件，删除，重新使用 maven  update 下载
    4. 配置 build，打包时使用的一些插件

## 本项目使用

直接导入 Maven Project 即可。

注意的点：

1. Spark， Scala 版本
2. textFile 的文件要能够找到