Spark Sql默认并行度 看官网，默认并行度200 https://spark.apache.org/docs/2.4.5/sql-performance-tuning.html#other-configuration-options 优化 在数仓中 task最好是cpu的两倍或者3倍(最好是倍数，不要使基数) 拓展 在本地 task需要自己设置&a…

2023年10月26日，杭州玳数科技有限公司（袋鼠云）与浙江工贸技术职业学院正式成立“数字孪生产教融合实践中心”，并完成授牌仪式。 人工智能学院副院长章增优主持会议，学院党总支书记徐登喜、院长赵秀芝、专业主任潘益婷、…

对外暴露有三种方式，分别时默认暴露、统一暴露、分别暴露。 但值得注意的是，使用import（引入）和export（暴露）关键字只能在模块系统中如vue中使用，不能在普通的js使用。 一.默认暴露 1.在新建的…

CSV（逗号分隔值）文件是一种常见的数据存储格式，广泛应用于数据导入、导出、分析和交换等场景。在Golang中，有许多库和工具可以帮助我们读取和写入CSV文件，使数据处理变得简单而高效。本文将深入探讨如何在Golang中使用…

前言： 1、问什么要写这篇博客？ 随着自己在数仓岗位工作的年限增加，对数仓的理解和认知也在发生着变化 所有用这篇博客来记录工作中用到的知识点与经验 2、这篇博客主要记录了那些内容？ 主要会记录一些数仓建设方法论和工作技巧 目…

Linux版本号4.1.15 芯片I.MX6ULL 大叔学Linux 品人间百味 思文短情长 人都是性情中人，如果把学习当做自己的女朋友，对她细致入微、掏心掏肺、有耐心有恒心，终会修成正果。 而我们本节需要学习的电…

MVCC 并发与锁从来都是密不可分的两个东西，在一个请求的过程中，难免会操作各种各样的资源，那么在多个请求同时到来的时候，各个请求处理资源是无序的，肯定就会造成干扰，那么普遍的做法就是加锁。 但是&#…

一、端口概述 端口是用于网络通讯中标识应用程序的通信机制。在Ubuntu系统中，共有65536个端口。 其中，0号端口保留，1-1023为系统端口，一般被系统进程或服务占用。1024-49151为注册端口，可以被用户进程或服务使用。49…