日日噜夜夜草|一级黄色录像高清版|调教白富美加勒比久久|亚洲欧洲精品婷婷|日韩综合无码色色|日韩精品一区妖精视频|亚洲无码中文字幕hd|99亚洲思思丝袜|手机看片国产精品大胆亚洲|成人无码视频一区二区在线播放

高級數(shù)據(jù)工程師
職位：高級數(shù)據(jù)工程師（16K-25K，優(yōu)秀者薪資可面議）
工作經(jīng)驗：6-9 年
一、職位概述
我們正在尋找高級數(shù)據(jù)工程師（供應商方），負責將應用程序從原有 Cloudera 環(huán)境遷移至新的基于 Kubernetes 的數(shù)據(jù)平臺。該職位要求具備扎實的數(shù)據(jù)工程實操開發(fā)能力，能夠在內(nèi)部負責人的指導下交付高質(zhì)量的數(shù)據(jù)管道。
二、崗位職責
1、使用 Spark 3.5 和 Python/Scala 開發(fā)并優(yōu)化數(shù)據(jù)管道。
2、將現(xiàn)有 Hive、Spark 和 Control-M 任務遷移至基于 Airflow 和 DBT 的工作流。
3、實現(xiàn)數(shù)據(jù)管道與消息系統(tǒng)（Kafka、Solace）及對象存儲（S3、MinIO）的集成。
4、排查并優(yōu)化在 Kubernetes 環(huán)境中運行的分布式任務。
5、與內(nèi)部負責人及架構師緊密協(xié)作，落地最佳實踐方案。
6、設計并實現(xiàn)遷移 / 加速框架，實現(xiàn)端到端遷移自動化。
7、持續(xù)優(yōu)化框架，保障其穩(wěn)定性、可擴展性，支持多樣化的用例及場景。
8、協(xié)同各類數(shù)據(jù)應用，為遷移過程提供支持。
9、在約定時間內(nèi)完成分配的遷移任務。
三、崗位要求
1、統(tǒng)招本科或以上學歷，性別不限（優(yōu)秀可放寬至大專）
2、6-9 年數(shù)據(jù)工程實操經(jīng)驗。
3、精通 Apache Spark（批處理 + 流處理）和 Hive。
4、熟練掌握 Python、Scala 或 Java 編程語言。
5、了解編排工具（Airflow/Control-M）及 SQL 轉(zhuǎn)換框架（優(yōu)先考慮 DBT）。
6、有 Kafka、Solace 及對象存儲（S3、MinIO）的使用經(jīng)驗。
7、具備 Docker/Kubernetes 部署相關經(jīng)驗。
8、擁有數(shù)據(jù)湖倉格式（Iceberg、Delta Lake、Hudi）的實操經(jīng)驗。
9、供應商方人員需獨立負責指定模塊的工作，交付可投入生產(chǎn)的解決方案。
10、必須參與每日 / 每周狀態(tài)會議、評審及問題解決討論。
11、需適應客戶的流程、文檔標準及合規(guī)要求。
四、崗位薪資：綜合薪資16K-25K，五險一金，加班費，節(jié)假日福利等（優(yōu)秀者薪資可面議）
五、工作時間：周一到周五，9:00-18:00，周末及法定節(jié)假日休息（加班有加班費）
六、工作地點：天津市濱海新區(qū)開發(fā)區(qū)