Jht Blog

读书如不及时做笔记,犹如雨落大海没有踪迹

git ssh key

"使用 ssh key 克隆代码"

概述 使用 ssh key 进行 git 操作 生成 ssh key 使用 Ed25519 算法生成你的 SSH 密钥 常见的 SSH 登录密钥使用 RSA 算法。RSA 经典且可靠,但性能不够理想。 只要你的服务器上 OpenSSH 版本大于 6.5(2014 年的古早版本),就可以利用 Ed25519 算法生成的密钥对,减少你的登录时间。如果你使用 SSH 访问 Git,那么就...

wsl static IP

"给 wsl2 的 ubuntu 分配固定 IP"

概述 Windows 每次重启 wsl2 的 IP 都会变化。如果在上面部署服务,就会比较烦。 思路 设置 wsl 的IP 修改 DNS 开启 sshd 在 Windows 分配了一个同网段的 IP 需要用管理员身份运行 每次重启之后,需要运行一次 修改 wsl2 默认 DNS 修改虚拟网卡地址 修改虚拟网卡IP地址 # 修改 /etc/wsl.con...

git reset

"回退到指定版本"

git reset 回退到上一个版本 git reset --hard HEAD^ # 提交 git push -f 回退到某个指定的版本 # 139xxxxxxxxxxxxxxxxxxxxxxxxxxxx 是git提交的历史版本号 git reset --hard 139xxxxxxxxxxxxxxxxxxxxxxxxxxxx # 提交 git push -f

搭建本地nomad集群

"在ubuntu虚拟机集群上搭建"

nomad集群搭建 上文提到本地搭建虚拟机集群 本文将在虚拟机集群上搭建nomad集群 安装 首先安装consul 因为nomad依赖consul。 consul集群 首先选中一个虚拟机作为server,另外两个作为client。 安装 因为是虚拟机,apt不是很好用,我们下载二进制文件安装, # 第一步 安装,选择最新版本 wget https://releases.h...

搭建本地ubuntu集群

"ubuntu虚拟机集群设置固定IP并访问外网"

创建虚拟机 1. 打开Hyper-V管理器,这里选择快速创建,点击它。 2. 这里建议选择左边的系统,并点击创建虚拟机。 3.开始下载镜像并创建虚拟机 4. 虚拟机创建好后,点击连接虚拟机,然后会转到下面这个界面,点击启动(关机后启动也这么操作) 5. 启动后就是Ubuntu 第一次启动的初始化设置,选择相关设置,然后点击继续(Next)。 6...

数据分析学习(十一)

"Apache Parquet"

Parquet Parquet 是一种面向分析的、通用的列式存储格式,由Twitter和Cloudera合作开发,2015年5月从Apache的孵化器里毕业成为 Apache 顶级项目。它是语言、平台无关的,并且不需要和任何一种数据处理框架绑定,目前能够和Parquet适配的组件包括下面这些,可以看出基本上通常使用的查询引擎和计算框架都已适配,并且可以很方便的将其它序列化工具生成的数据转换...

Open Distro for Elasticsearch

"百分之百开源的es版本"

Open Distro for Elasticsearch 带的插件,已基本满足日常需求 官方文档

git cherry-pick

"分支的合并commit"

git cherry-pick 切换到要合并的分支 fork的 git fetch upstream release-0.2 git checkout -b release-0.2 upstream/release-0.2 git push origin release-0.2 git checkout -b my-release-0.2 非fork的 # 没有的话先创建分支 ...

数据分析学习(十)

"日志收集"

日志收集工具 轻量级 轻量级的Agent有: Filebeat Fluent-bit 优点 轻量级 零依赖(Fluent-bit编译依赖) 插件多 多种input 多种output 缺点 轻量级的更多的专注采集,信息转换不是很擅长,一般都是由下游的服务(Logstash,Fluent等)来转换。 Fi...

数据分析学习(九)

"数据湖"

什么是数据湖? 数据湖是一个集中式存储库,允许您以任意规模存储所有结构化和非结构化数据。您可以按原样存储数据(无需先对数据进行结构化处理),并运行不同类型的分析 – 从控制面板和可视化到大数据处理、实时分析和机器学习,以指导做出更好的决策。 数据湖作为一种服务模型,是一种架构,是为了交付业务价值,而不仅仅是存储数据。 为什么需要数据湖? 通过数据成功创造商业价值的组织将胜过同行。Ab...