01 / 职业经历

工作经历

时间、职责和相关项目。

任务
2020202120222023202420252026
状态
上海普瑞邦克软件技术有限公司数据开发工程师 / ETL 工程师2020.05 — 2026.04
SUCCESS
对公 CRM 与经营集市多粒度指标与链路建设2020.06 — 2022.07
SUCCESS
对公掌银经营分析与批流数据服务2022.08 — 2026.04
SUCCESS
新信贷系统配合改造大规模链路迁移与自动化验证2024.11 — 2025.10
SUCCESS
浪潮科技数据实施 · 数据实践与个人项目2026.07 — 至今
RUNNING
科研业务 BI让模型、口径与加工文档保持一致2026.07 — 至今
RUNNING
时间取自经历与项目记录RUNNING = 至今
2026.07— 至今

浪潮科技

数据实施 · 数据实践与个人项目

2026 年在苏州参与科研业务 BI 的数据梳理与专题库建设,围绕科研项目、经费、成果和平台维护指标映射、模型粒度、加工 SQL 与核对材料,通过 AI 协作整理资料、实现与检查。

实际调整包括金额从元到万元的口径更正、32 位标识拼接类型码后的字段容量处理、省级与全国统计的分别去重,以及仪器模型“一台仪器一行”的粒度确认。模型元数据、正式文档、加工逻辑和字段血缘随变更一起核对;日志区分本地结构检查、合成场景验证和待实际环境验收。

工作之外,我从自己的使用需求出发,迭代私人电影档案和个人记录网站。我负责方向、需求、实际使用反馈与核对要求,通过 AI 协作推进实现与检查。

2020.05— 2026.04

上海普瑞邦克软件技术有限公司

数据开发工程师 / ETL 工程师

参与银行对公数据集市与 CRM 的数据迁移、模型建设及指标加工,再延伸到掌银客户经营与新信贷系统配合改造。客户、账户、机构与历史月份有不同粒度,我把口径确认和数据校验放在加工过程里。

在 CRM 阶段,按主键唯一性、行数、空值率和码值组织配置驱动的校验,处理考核计算、历史组织口径及机构同步。掌银阶段,连接 Oracle、Impala、观远和 HBase 等不同加工与查询路径,参与存款批流链路迁移、变动标识增量推送及依赖配置投产。

新信贷配合改造涉及 200 多张上游变化表、1500 多个集市脚本和 3500 多个下游脚本。我用 Python 表引用匹配筛选候选影响范围,继续核对新老映射,并利用表结构生成字段比对 SQL。一次 70 多个脚本的上线测试,记录了约五分钟生成结果、再用约二十分钟分析的处理过程。

核心能力

能力与技术栈
6 个方向

01

数据仓库与业务建模

我会先问清楚一条记录代表什么,再考虑客户、账户、机构等主题怎样关联,怎样沿 ODS、DWD、DWS、ADS 分层组织。同一个指标怎么算,也要在模型里有交代。

02

SQL 与数据加工

我写过复杂 SQL、Oracle 存储过程和 Python、Shell 脚本。看一段加工逻辑时,会顺着来源、关联和过滤条件往下读,把结果怎样算出来弄清楚。

03

ETL 与批流链路

使用过 DataStage、Kettle、DataX、Sqoop,也参与过 Spark Streaming / Flink 加工。我会把加工、调度、同步和展示连起来看,留意数据在哪一步发生变化。

04

数据质量与影响分析

一处字段或口径变化,可能会牵动很多脚本。我会梳理表、字段与脚本依赖,再通过测试 SQL 和核对清单检查受影响的结果。

05

性能与交付自动化

遇到慢 SQL 或反复手工核对的环节,我会找具体的耗时点,尝试优化或自动化,再看实际链路里的变化。做过的调度、同步和上线验证,也会留下核对方法。

06

AI 协作与个人产品

我常从自己使用时遇到的问题提需求,通过 AI 协作推进实现,再回到实际使用的版本里核对。电影档案、记录网站和数据实践都在这个过程中持续调整。