工作汇报_3月
1. 工作概述
1.1 工作回顾
1.1.1 财务项目
- 完成了财务项目的指标计算开发,包括oracle函数hive sql翻译、数据表拆分,入库mysql。
- 通过flink sql将doris数据同步至oracle,实现了财务数据的有效管理和应用。
1.1.2 地服平台项目
- 完成了地服平台ftp文件入库doris,包括下载地服ftp最新数据文件,进行数据拆分,行列转换,结构化,入库doris和mysql。
- 这一过程提升了数据处理的效率和准确性,为地服平台的运营提供了有力支持。
1.1.3 航程中转项目
- 完成了航线通程维护表共享文件入库hive,包括下载共享文件目录最新数据文件,结构化并入库hive。
- 这一工作不仅提升了数据处理的效率,还增强了数据的一致性和准确性。
1.1.4 数据集市
- 完成了其他订单数据集市开发,涵盖了其他产品数据集市开发。
- 数据集市的建设为不同业务线提供了统一的数据服务,提升了数据应用的效率和质量。
1.1.5 沙盒数据项目
- 完成了沙盒数据同步和定时调度,包括接入hive、doris沙盒数据,定时同步至oracle。
- 沙盒数据项目为测试和开发提供了必要的数据支持,提高了项目的开发效率和质量。
1.2 学习与改进
1.2.1 个人学习
- 学习了doris的架构、优缺点、建模、查询等方面的知识,提高了对doris的理解和应用能力。
- 学习了flink的ogg json接入、项目流程规范化等方面的知识,增强了大数据处理的能力。
- 学习了旅服、客票订单、旅客中转、数据集市、会员、其他订单等业务知识,提高了对业务的理解和应用能力。
1.2.2 认知与改进
- 认识到在处理问题的全面性、严谨性、规范性方面存在不足,需要进行更深入的需求分析,确保理解所有关键点和潜在的边缘情况。
- 认识到在处理问题方案实施和相互沟通方面存在不足,需要更严谨的方案实施和更有效的沟通。
- 认识到在需求开发与上线细节方面存在不足,需要更规范的操作流程。
1.3 想法与建议
1.3.1 问题描述与建议
- 共享文档很多,会有些混乱,建议引入类似jira之类的项目跟踪与管理工具,提高项目与事务跟踪的规范化。
- doris存算压力大,建议实时性要求高的任务使用flink做计算逻辑,减少doris计算压力,同时合适的业务场景使用doris聚合引擎建表,减少doris存储压力。
- 关于架构,建议构建实时数据湖仓,以应对大数据时代的需求。
- 关于项目,建议开发航班延误预测系统、利用边缘计算优化机场运营、基于区块链的供应链管理、基于人工智能的能源管理等,以提高运营效率和质量。
1.4 未来规划与展望
1.4.1 融入公司,融入团队
- 熟悉企业文化,多参与公司部门内的团队活动、知识分享会,以更好地融入公司团队。
- 做好本职工作,不懂的请教同事,以提高自己的工作能力和效率。
1.4.2 熟悉工作内容,接触不同的业务知识
- 学习老数仓、综合数据分析平台、人力数据驾驶舱等,以熟悉不同的工作内容和业务知识。
- 尝试各种不同类型和业务场景的任务,平时多关注告警群,以提高自己的业务能力和应变能力。
1.4.3 个人技术能力提升
- 积极阅读飞书文档和同事交流,熟悉现有的技术架构及各项技术点。
- 工作之余,提高大数据以及相关技术知识的深度和广度,进行总结和自我思考,发散思维,有意识的在日常工作中对一些不合理的地方提出优化建议。
1.4.4 主动承担项目核心开发
- 主动表达对公司内部项目的兴趣,并争取承担核心开发任务,确保按时、按质地完成工作。
- 关注行业趋势和最佳实践,并应用于工作。
- 反思自己的工作表现,寻找改进的空间,优化后续项目开发过程。




