当前位置:   article > 正文

Spark实现统计插入_spark 数据库统计评分时怎么把评分的人数也一起统计了

spark 数据库统计评分时怎么把评分的人数也一起统计了

概述:本文主要实现Saprk SQL多表连接查询,并将结果存入新表。需求说明:数据库中存在emp和dept两张表,统计dept表中每个部门的人数逆序排序并存入统计表stat。

如图所示

1、创建统计表

  1. CREATE TABLE `stat` (
  2. `deptName` varchar(10) DEFAULT NULL,
  3. `total` int(11) DEFAULT NULL
  4. ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

2、创建Spark SQL项目,导入相关依赖

  1. <dependencies>
  2.    <dependency>
  3.        <groupId>org.scala-lang</groupId>
  4.        <artifactId>scala-library</artifactId>
  5.        <version>2.11.8</version>
  6.    </dependency>
  7.    <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-sql -->
  8.    <dependency>
  9.        <groupId>org.apache.spark</groupId>
  10.        <ar
声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/weixin_40725706/article/detail/945545
推荐阅读
相关标签
  

闽ICP备14008679号