RDD概述 1.什么是RDD RDD（Resilient Distributed Dataset）叫做弹性分布式数据集，是Spark中最基本的数据抽象。代码中是一个抽象类，它代表一个不可变、可分区、里面的元素可并行计算 的集合。 2.RDD特点 RDD表示只读的分区的数…

教程 B站直播间弹幕Websocket获取 — 哔哩哔哩直播开放平台 基于B站直播开放平台开放且未上架时，只能个人使用。 代码实现 1、相关依赖 fastjson2用于解析JSON字符串，可自行替换成别的框架。 hutool-core用于解压zip数据，可自行替换成别的…

K8S中ingress-nginx通过header路由到不同后端 背景 公司使用ingress-nginx作为网关的项目，需要在相同域名、uri，根据header将请求转发到不同的后端中在稳定发布的情况下，ingress-nginx是没有语法直接支持根据header做转发的。但是这个可以利…

原子操作简介 原子操作（Atomic operation）是指一种不可分割的操作，要么完全执行成功，要么完全不执行。 原子操作的执行过程中不允许有任何中断，如果出现了中断，那么操作的结果就无法保证。 原子操作通常…

继直播电商平台后，双11再次迎来新玩家——小红书。 在“2023小红书双十一电商伙伴动员会”上，小红书宣布将在双十一期间投入百亿流量扶持和亿级补贴，这也标志着小红书正式参与到这场电商盛宴中。 值得关注的是，小红书提到要投入…

容器网络简单理解 容器拥有n多张veth网卡与一张docker0网卡 docker 五种网络 bridge 默认网络，Docker启动后创建一个docker0网桥，默认创建的容器也是添加到这个网桥中。host 容器不会获得一个独立的network namespace，而是与宿主机共用一个…

网络爬虫是一种强大的工具，用于从互联网上收集和提取数据。Perl 作为一种功能强大的脚本语言，提供了丰富的工具和库，使得编写的爬虫程序变得简单而灵活。在使用的过程中大家会遇到一些问题，本文将通过问答方式，解答一些…

一 tcp连接回顾 部分内容来自小林coding TCP篇 记录的目的： 亲身参与进来,加深记忆 ① 引入 前面我们知道： TCP 是面向连接 [点对点的单播]的、可靠的、基于字节流的传输层通信协议面向连接意味着：在使用TCP之前,通信双方必须先建立一…