zoukankan      html  css  js  c++  java
  • Scala进阶之路-idea下进行spark编程

              Scala进阶之路-idea下进行spark编程

                                 作者:尹正杰

    版权声明:原创作品,谢绝转载!否则将追究法律责任。

    1>.创建新模块并添加maven依赖

     1 <?xml version="1.0" encoding="UTF-8"?>
     2 <project xmlns="http://maven.apache.org/POM/4.0.0"
     3          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
     4          xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
     5     <modelVersion>4.0.0</modelVersion>
     6 
     7     <groupId>cn.org.yinzhengjie</groupId>
     8     <artifactId>MySpark</artifactId>
     9     <version>1.0-SNAPSHOT</version>
    10 
    11     <dependencies>
    12         <dependency>
    13             <groupId>org.apache.spark</groupId>
    14             <artifactId>spark-core_2.11</artifactId>
    15             <version>2.1.0</version>
    16         </dependency>
    17 
    18     </dependencies>
    19 </project>

    2>.编写scala代码(使用类型推断)

    3>.scala编程(定义具体类型)

    4>.编写java版 wordcount

  • 相关阅读:
    机器学习之朴素贝叶斯
    机器学习之KNN
    格式化数字
    web.xml中load-on-startup的作用
    ExecutorService线程池
    201404转成 2014.04
    DBCP连接池配置示例
    java 写文本换行
    打印IP 来源
    MySQL分库分表的一些技巧
  • 原文地址:https://www.cnblogs.com/yinzhengjie/p/9377448.html
Copyright © 2011-2022 走看看