相关文章
spark on hive
需要提前搭建好hive,并对hive进行配置。
1、将hive的配置文件添加到spark的目录下
cp $HIVE_HOME/conf/hive-site.xml $SPARK_HOME/conf2、开启hive的hivemetastore服务
提前创建好启动日志存放路径
mkdir $HIVE_HOME/logStart
nohup /usr/local/lib/apache-hi…
建站知识
2024/10/2 13:17:57
新环境下配置jupyter notebook并启动
1.先切换到我们需要使用的环境 2.安装python内核
conda install ipykernel
3.创建指定内核
ipython kernel install --user --nametensorflow2
4.运行jupyter notebook
即出现新创建的内核
建站知识
2024/9/13 12:32:14
二十九、高级IO与多路转接之epollreactor(收官!)
文章目录 一、Poll(一)定义(二)实现原理(三)优点(四)缺点 二、I/O多路转接之epoll(一)从网卡接收数据说起(二)如何知道接收了数据&…
建站知识
2024/11/5 13:29:41
背包问题学习笔记-多重背包问题
题意描述:
有 N 种物品和一个容量是 V 的背包。第 i 种物品最多有 si 件,每件体积是 vi,价值是 wi。求解将哪些物品装入背包,可使物品体积总和不超过背包容量,且价值总和最大。
输出最大价值。输入格式
第一行两个整数…
建站知识
2024/11/5 4:49:59
【SpringBoot】多环境配置和启动
环境分类,可以分为 本地环境、测试环境、生产环境等,通过对不同环境配置内容,来实现对不同环境做不同的事情。
SpringBoot 项目,通过 application-xxx.yml 添加不同的后缀来区分配置文件,启动时候通过后缀启动即可。 …
建站知识
2024/10/12 12:26:22
软技能继续挑战网络安全领域
根据 ISACA 的一份新报告,新的网络安全调查结果指出了网络安全专家缺乏的领域,其中人际技能、云计算和安全措施是网络安全专家最突出的技能缺陷。
59% 的网络安全领导者表示他们的团队人手不足。50% 的受访者表示有非入门级职位的职位空缺,而…
建站知识
2024/10/1 10:40:30
GPX可视化工具 GPX航迹预览工具
背景
当我们收到别人分享的航迹文档,即gpx文档时,如何快速的进行浏览呢?我们可以使用GIS软件来打开gpx文档并显示gpx中所记录的航迹,例如常用的GIS软件有googleEarth, Basecamp, GPXsee, GPX E…
建站知识
2024/10/7 10:35:51
docker基本管理
目录 docker理论
1.1、Docker 概述
1.2、Docker的设计宗旨:
1.3、容器化越来越受欢迎,因为容器是:
1.4、虚拟化产品
1.4.1、架构:
1.4.1.1、奇居架构:
1.4.1.2、原生架构:
1.4.1.3、奇居架构和原生…
建站知识
2024/9/13 12:32:06