职位描述
该职位还未进行加V认证,请仔细了解后再进行投递!
岗位职责
1、实时数据处理:具备实时数据处理的经验,包括对流数据进行窗口计算、聚合操作和时间窗口处理等。
2、数据源集成:熟悉从 HDFS、Kafka 和 Oracle 数据库等数据源读取数据的方法和技术,能够有效地集成和处理各种数据源。
3、数据处理和计算:具备数据处理和计算的经验,包括数据清洗、转换、过滤、聚合、分析和计算等。
4、数据库操作:熟悉数据库操作,特别是 Oracle 数据库,能够将实时计算结果准确地写入数据库,并具备优化数据库操作的能力。
5、分布式计算和性能优化:理解分布式计算的概念和原理,有经验的分布式系统开发经验,能够优化 Spark Streaming 作业的性能和资源利用。
6、故障排查和调优:有故障排查和调优的经验,能够识别和解决 Spark Streaming 作业中的问题,包括调整任务并行度、调优内存和磁盘管理等。
具体要求
1、具备3年以上电力项目经验,承担过电网调度业务、国网调控云、调度自动化系统的数据模型者优先录用;
2. 精通sql开发,熟悉使用各种函数以及存储过程编写。
3. 熟练使用Oracle、PG、达梦数据库
4. 熟练使用PL-sql、Navicat、DBever等数据开发工具最少两种。
5. 熟悉Linux操作系统
6. 沟通表达能力。
7、能够适应长期出差。
1、实时数据处理:具备实时数据处理的经验,包括对流数据进行窗口计算、聚合操作和时间窗口处理等。
2、数据源集成:熟悉从 HDFS、Kafka 和 Oracle 数据库等数据源读取数据的方法和技术,能够有效地集成和处理各种数据源。
3、数据处理和计算:具备数据处理和计算的经验,包括数据清洗、转换、过滤、聚合、分析和计算等。
4、数据库操作:熟悉数据库操作,特别是 Oracle 数据库,能够将实时计算结果准确地写入数据库,并具备优化数据库操作的能力。
5、分布式计算和性能优化:理解分布式计算的概念和原理,有经验的分布式系统开发经验,能够优化 Spark Streaming 作业的性能和资源利用。
6、故障排查和调优:有故障排查和调优的经验,能够识别和解决 Spark Streaming 作业中的问题,包括调整任务并行度、调优内存和磁盘管理等。
具体要求
1、具备3年以上电力项目经验,承担过电网调度业务、国网调控云、调度自动化系统的数据模型者优先录用;
2. 精通sql开发,熟悉使用各种函数以及存储过程编写。
3. 熟练使用Oracle、PG、达梦数据库
4. 熟练使用PL-sql、Navicat、DBever等数据开发工具最少两种。
5. 熟悉Linux操作系统
6. 沟通表达能力。
7、能够适应长期出差。
工作地点
地址:广州黄埔区黄埔区光谱中路11号
求职提示:用人单位发布虚假招聘信息,或以任何名义向求职者收取财物(如体检费、置装费、押金、服装费、培训费、身份证、毕业证等),均涉嫌违法,请求职者务必提高警惕。
职位发布者
HR
广州海颐软件有限公司
- 计算机硬件·网络设备
- 100-199人
- 私营·民营企业
- 广州市ji经济开发区