剑道第一仙

kafka业务数据到ODS层处理小记

摘要： kafka业务数据到ODS层处理小记 1：kafka消息partition分区，应以表主键为key 2：kafka消息落地后，同一批次数据中取主键+offset最大的一条，再删除基础数据中此批次数据，最后将此批次数据按数据处理类型（delete、insert、update），先insert、upda 阅读全文

posted @ 2023-04-21 09:32 剑道第一仙阅读(61) 评论(0) 推荐(0) 编辑

flink 消费多个topic

摘要： flink 多个topic 阅读全文

posted @ 2023-04-20 16:04 剑道第一仙阅读(256) 评论(0) 推荐(0) 编辑

eclipse开启代码自动提示功能

摘要：转：https://www.bbsmax.com/A/gVdnOvKpzW/ 开启代码自动提示功能打开 Eclipse -> Window -> Perferences -> Java -> Editor -> Content Assist 1、Window ——> Preferences ——> 阅读全文

posted @ 2023-04-19 14:52 剑道第一仙阅读(53) 评论(0) 推荐(0) 编辑

win7系统出现2个或多个系统引导的设置步骤

摘要：转自：https://m.uc23.net/jiaocheng/36459.html?ivk_sa=1024320u 遇到win7系统出现2个或多个系统引导的问题，要怎么处理呢？详细解决方法如下：一、按下win+R快捷键打开运行窗口输入“msconfig”然后点击确定。二、在打开的系统配置窗口选阅读全文

posted @ 2023-04-05 14:01 剑道第一仙阅读(1063) 评论(0) 推荐(0) 编辑

电脑硬盘格式由gpt改为mbr怎么改

摘要：转自 https://zhidao.baidu.com/question/634080366973241244.html 电脑硬盘分区有gpt与mbr两种格式，两者各有优点。“gpt格式”带来了很多新特性，最大支持18EB的大容量。“mbr格式”最大只支持2TB，但拥有最好的兼容性。将gpt转化为m 阅读全文

posted @ 2023-04-05 13:24 剑道第一仙阅读(683) 评论(0) 推荐(0) 编辑

数据类项目管理要点

摘要：项目背景，项目目标，项目服务对象项目部署架构，服务器资源、技术组件发布数据指标、维度定义项目整体调度流程、数据来源项目人员分工阅读全文

posted @ 2023-03-23 15:41 剑道第一仙阅读(17) 评论(0) 推荐(0) 编辑

linux服务器重启未自动挂载磁盘解决办法

摘要：【1】root用户登录，检查磁盘加载情况XXXX:~ # df -m Filesystem 1M-blocks Used Available Use% Mounted on devtxx 32066 1 32066 1% /dev/dev/xx2 69591 13440 56151 20% / /d 阅读全文

posted @ 2023-03-08 11:08 剑道第一仙阅读(576) 评论(0) 推荐(0) 编辑

kettle9.3使用笔记03 网页端使用

摘要： 1：浏览器打开网址http://xx.xx.xx.xx:8080/pentaho/Login，输入用户密码如密码忘记可登录服务器重置密码后重启pentaho服务 hostname[/home/soft/pentaho-server9.3]$sh encr.sh password Encrypted 阅读全文

posted @ 2023-02-24 11:14 剑道第一仙阅读(187) 评论(0) 推荐(0) 编辑

kettle9.3使用笔记02 客户端配置使用

摘要：下载地址：https://sourceforge.net/projects/pentaho/files/ 第一次使用，a56爆大奖在线娱乐就选目前最新版本9.3，服务器端选择 pentaho-server-ce-9.3.0.0-428.zip，本地客户端选择pdi-ce-9.3.0.0-428.zip进行下载 1：阅读全文

posted @ 2023-02-24 10:57 剑道第一仙阅读(1512) 评论(0) 推荐(0) 编辑

kettle9.3使用笔记01 安装启动