×

scala

Spark常用算子之转换算子(spark 转换算子)

莫兮`2 莫兮`2 发表于2024-06-30 浏览6832 评论0
Spark常用算子(一)转换算子 spark常用算子包括两大类: 转换算子:由一个RDD变成另一个RDD,是RDD之间的转换,是懒执行的,需要action算子触发执行 行为算子:由一个RDD调用,但最后没有返回新的RDD,而是返回了其他数据类型,行为算子可以触发任务的执行,每个action算子都会触发一个job 1. WordCount package com.xiaoming import org.apache.hadoop.conf.Configuration impor

spring boot

SpringBoot开启异步多线程(springboot 异步多线程)

话说很安逸 话说很安逸 发表于2024-06-30 浏览5335 评论0
前言:         SpringBoot 的异步多线程需要从 java 的多线程基础说起,可以参考 java 多线程实现的三种方式区别。SpringBoot 在此基础上进行了多次封装,所以使用起来非常方便。 一、核心参数说明         ThreadPoolExecutor 是 java 的核心线程池类;Spring 对 ThreadPoolExecutor 进行二次封装形成了 ThreadPoolTaskExecutor,其中几个核心参数除了名字略有改动,核心含义没变,下面说