牛大妈在社招职位搜索Kafka研发专家 有 48 条结果

招聘城市:成都
…任职要求:
1. 本科及以上学历,计算机、人工智能、数据科学等相关专业。有高并发、高可用系统开发经验,熟练掌握Java/Python等至少一种编程语言。
2. 5年以上大型企业数据中台领域架构经验(或B端复杂订单交易系统架构研发经验):精通数据湖仓(Lakehouse)、Data Mesh,或订单平台等现代架构,有实时计算、数据治理项目落地经验。包括Hadoop、Spark、Flink、Kafka、Iceberg等技术栈。
3. 具备良好的沟通协作能力和系统思维,能够跨团队推动复杂项目落地,对技术有热情,具备较强的问题分析与解决能力。深度理解业务需求,能将复杂问题转化为数据产品。
4. 具备数据中台及大模型应用场景落地经验(包括智能数据分析、自然语言查询等项目),以数据…
招聘城市:上海
…解决离线和实时等各类计算任务的问题;
- 对长耗时计算任务进行性能优化
4. 技术研究与创新
- 善于技术钻研,跟踪大数据领域前沿技术,推动技术落地与应用;
- 推动AI技术在数据研发域的效能提升和产品创新
5. 数据安全与合规
- 设计并实施数据安全策略,确保数据隐私与合规性。
任职要求:
1. 学历与背景
- 计算机科学、软件工程、数据科学或相关专业硕士及以上学历(优秀者可放宽);
- 熟悉分布式系统原理、数据库原理及大数据生态技术栈。
2. 技术能力
- 精通至少一种编程语言(Java/Python/Scala),熟悉SQL及NoSQL数据库(如Hive、HBase、ClickHouse、MongoDB等);
- 熟悉大数据处理框架(如Hadoop、Spark、Flink、Kafka、Storm等),具备实际项目开发经验;熟悉Alibaba MaxCompute更好。
- 熟悉…
招聘城市:上海
…场景的数字化渗透,不断提升骑手的作业效率。
1. 负责物流域实时数仓、离线数仓应用层的开发、优化与治理。
2. 能基于一致性、准确性、及时性的要求,不断提高数据质量。
3. 负责数据产品、重点项目的开发与维护,如区域作战台、经规项目等。
任职要求:
1. 有数据仓库需求调研和需求分析经验,能根据业务需求设计数据仓库模型,并对数据仓库数据模型进行管理,保证数据质量,3年以上数据仓库开发实施经验
2. 具有有丰富的实时计算、实时数仓建设经验,熟悉Flink、Spark、Kafka、HBase、Clickhouse等大数据组件的原理
3. 熟练使用SQL,至少熟悉一种常用的通用编程语言(Java、Scala、Python)
4. 有数字化运营项目推动、落地经验的优先;
招聘城市:上海
职位描述:
1.负责淘宝闪购AB实验平台的研发工作,从而为数据驱动的精细化运营提供平台支撑;
2.从数据视角出发搭建科学的指标体系和衡量方法,深度参与实验设计、评估工作,协同算法/产品/运营等团队,共同提升淘宝闪购AB实验的科学性、效率、体验。
任职要求:
1. 计算机科学、软件工程、数学、统计学、数据科学等相关专业本科及以上学历;
2. 熟悉Java语言及生态,熟悉JVM原理及性能调优,有高并发、分布式系统开发经验;
3. 熟悉大数据生态工具(Hadoop、Hive、Spark、Flink、Kafka等),有离线/实时数据处理项目经验;
4. 熟悉A/B Testing实验理论和流程,具备相关产品研发经验的优先;
5. 统计学基础扎实,熟悉各类假设检验、置信区间、方差分析…
招聘城市:杭州

4. 与产品、前端、测试等团队紧密协作,确保项目高质量按时交付;
5. 制定并落实编码规范和技术标准,提升团队整体研发效率和质量。
任职要求:
1. 计算机相关专业本科及以上学历,3年以上后端开发经验;
2. 熟悉掌握JAVA语言以及Web编程,掌握面向对象的分析与设计方法,掌握常见的设计模式,在公司担任过架构师或核心技术骨干;
3. 熟悉分布式系统的设计和应用,熟悉分布式、缓存、消息、负载均衡等机制和实现;
4. 熟悉主流后端开发框架及中间件,如Spring Boot、Redis、Kafka、MySQL等,并有实际项目应用经验;
5. 具备良好的沟通能力和团队协作意识,能够独立推进项目落地;
6. 对技术有热情,关注行业动态,具备较强的…
招聘城市:北京
…的实际应用落地。
2.面向安全垂直领域,构建安全知识体系,并将高质量的领域知识转化为大模型的有效训练数据,提升其在业务场景中的理解与推理能力。
3.深入研究AI技术,探索大模型在安全领域的应用开发与性能优化,包括但不限于威胁检测、流量分析、异常行为识别和数据隐私保护等场景。
4.针对依赖安全专家经验的复杂任务(如告警运营、渗透测试、漏洞挖掘等),优化大模型能力,提升模型在真实攻防场景中的性能和鲁棒性,形成可复用的知识体系与最佳实践。
5.负责安全数据湖(Security Data Lake)的整体架构设计,与威胁检测场景紧密协作,将数据湖能力深度整合进威胁检测、自动化响应(SOAR)及威胁狩猎流程中。…

小红书(xiaohongshu) 流存储引擎专家

全职 北京,上海,杭州
招聘城市:北京,上海,杭州
岗位职责:
1. 主导流存储引擎的研发与优化工作,构建一流的数据基础设施,满足AI+BI对数据Infra不断增长的需求。
2. 紧跟业界新思路,推动流存储技术选型与创新,落地具有行业影响力的业务成果。
3. 和开源社区保持沟通合作,提升团队和个人在业界的影响力。
任职要求:
1. 计算机或相关专业本科及以上学历,有扎实的计算机基础和算法数据结构功底,对技术有好奇心;
2. 熟悉主流的大数据存储产品(Kafka/HDFS/HBase/Alluxio/Fluss),有开源项目开发经验尤佳;
3. 有 Kafka 大规模生产经验者优先;
4. 具备良好的沟通和团队协作能力,做事主动积极负责任,有技术热情和激情面对挑战。

小红书(xiaohongshu) Java开发专家(数据治理平台)

全职 北京,上海,杭州
招聘城市:北京,上海,杭州
岗位职责:
1、负责数据治理平台的架构设计与产品研发工作,包括治理评估体系、框架引擎、数据服务能力及自动化工具能力的建设等;
2、探索大模型技术在智能运维领域中的落地应用,提供基于大模型的智能诊断、根因定位、异常检测、故障自愈等运维能力;
3、深入分析用户需求和产品优化方向,打磨产品细节,持续提升服务质量和用户体验,以系统化、智能化能力高效支撑成本及稳定性治理;
4、追求极致,探索数据治理前沿方向,持续跟进大模型前沿技术、开源方案及其在智能运维领域的应用,构建业内领先的数据治理产品。
任职要求:
1、扎实的计算机基础,熟练掌握Java语言和面向对象编程,熟悉JVM、类加载、多线程、IO、网络…

小红书(xiaohongshu) 流存储引擎/消息队列专家

全职 北京,上海,杭州
招聘城市:北京,上海,杭州
岗位职责:
1、主导流存储引擎的研发与优化工作,构建一流的数据基础设施,满足AI+BI对数据Infra不断增长的需求。
2、紧跟业界新思路,推动流存储技术选型与创新,落地具有行业影响力的业务成果。
3、和开源社区保持沟通合作,提升团队和个人在业界的影响力。
任职要求:
1、计算机或相关专业本科及以上学历,有扎实的计算机基础和算法数据结构功底,对技术有好奇心;
2、熟悉消息队列产品(RabbitMQ/RocketMQ/Pulsar/ActiveMQ/ZeroMQ/MetaMQ等)原理者优先;
3、熟悉主流的大数据存储产品(Kafka/HDFS/HBase/Alluxio/Fluss),有开源项目开发经验尤佳;
4、有 Kafka 大规模生产经验者优先;
5、具备良好的沟通和团队协作能力,做事主动积极负责任,有技术…

小红书 数据仓库专家(商业方向)

全职 上海,北京,杭州
招聘城市:上海,北京,杭州
…易用的数据服务,直接支持公司业务决策分析,赋能业务;
3、建设公司全站数据治理和管理体系,结合业务+元数据+技术,推进资源成本的优化,提高数据服务的数据质量,保障数据产出的稳定性。
任职要求:
1、本科及以上学历,五年以内数据研发经验;
2、有较为丰富的数据仓库研发经验,熟悉数据仓库、数据体系和数据价值的建设及优化;
3、掌握数据管理治理的相关理论,熟悉数据治理、数据标准、企业级数据建模、主数据、元数据管理等方法论;
4、熟悉大数据架构,具备实时或离线数据研发能力,熟悉Hive,Kafka,Spark,Storm,Hbase,Flink等相关技术并有相关开发经验;
5、具备快速学习能力、跨团队沟通协作能力,有较强的逻辑思维能力和解决问题能力。

小红书 数据仓库专家(社区方向)

全职 上海,北京
招聘城市:上海,北京
…的数据服务,直接支持公司业务决策分析,赋能业务;
3、建设公司全站数据治理和管理体系,结合业务+元数据+技术,推进资源成本的优化,提高数据服务的数据质量,保障数据产出的稳定性。
任职要求:
1、本科及以上学历,5年以内数据研发经验;
2、有较为丰富的数据仓库研发经验,熟悉数据仓库、数据体系和数据价值的建设及优化;
3、掌握数据管理治理的相关理论,熟悉数据治理、数据标准、企业级数据建模、主数据、元数据管理等方法论;
4、熟悉大数据架构,具备实时或离线数据研发能力,熟悉Hive,Kafka,Spark,Storm,Hbase,Flink等相关技术并有相关开发经验;
5、具备快速学习能力、跨团队沟通协作能力,有较强的逻辑思维能力和解决问题能力。

小红书(xiaohongshu) 数据仓库专家

全职 上海,北京
招聘城市:上海,北京
…易用的数据服务,直接支持公司业务决策分析,赋能业务;
3、建设公司全站数据治理和管理体系,结合业务+元数据+技术,推进资源成本的优化,提高数据服务的数据质量,保障数据产出的稳定性。
任职要求:
1、本科及以上学历,五年以内数据研发经验;
2、有较为丰富的数据仓库研发经验,熟悉数据仓库、数据体系和数据价值的建设及优化;
3、掌握数据管理治理的相关理论,熟悉数据治理、数据标准、企业级数据建模、主数据、元数据管理等方法论;
4、熟悉大数据架构,具备实时或离线数据研发能力,熟悉Hive,Kafka,Spark,Storm,Hbase,Flink等相关技术并有相关开发经验;
5、具备快速学习能力、跨团队沟通协作能力,有较强的逻辑思维能力和解决问题能力。
招聘城市:北京
部门介绍:
美团的使命是“帮大家吃得更好,生活更好”,公司聚焦“零售 + 科技”战略,和广大商户与各类合作伙伴一起,努力为消费者提供品质生活,推动商品零售和服务零售在需求侧和供给侧的数字化转型。
2018年9月20日,美团正式在港交所挂牌上市。美团将始终坚持以客户为中心,不断加大在科技研发方面的投入,更好承担社会责任,更多创造社会价值,与广大合作伙伴一起发展共赢。
岗位职责:
1. 预测模型工程化:配合算法同学将需求预测、供应链智能预测、用户行为预测等预测模型高效落地为生产系统;承担从数据流水线(Spark/Hive SQL 离线特征、Flink/Kafka 实时特征)、时序特征工程、模型训练(分布式训练 DDP/DeepSpeed、混合…
招聘城市:杭州

4. 与产品、前端、测试等团队紧密协作,确保项目高质量按时交付;
5. 制定并落实编码规范和技术标准,提升团队整体研发效率和质量。
任职要求:
1. 计算机相关专业本科及以上学历,5年以上后端开发经验;
2. 熟悉掌握JAVA语言以及Web编程,掌握面向对象的分析与设计方法,掌握常见的设计模式,在公司担任过架构师或核心技术骨干;
3. 熟悉分布式系统的设计和应用,熟悉分布式、缓存、消息、负载均衡等机制和实现;
4. 熟悉主流后端开发框架及中间件,如Spring Boot、Redis、Kafka、MySQL等,并有实际项目应用经验;
5. 具备良好的沟通能力和团队协作意识,能够独立推进项目落地;
6. 对技术有热情,关注行业动态,具备较强的…
招聘城市:上海
…数据标准化等工作。
岗位要求:
1.本科以上学历,三年以上终端安全大数据方向研发经验;
2.精通 Go / Java / Python / C++ 中至少一门编程语言,具备扎实的工程化研发素养;
3.有终端安全业务相关工作经验,包括但不限于数据采集、策略管理、威胁检测引擎、响应处置等模块;
4.掌握大数据处理和计算相关技术,如Spark、Flink、Hadoop、Hive、Iceberg、ClickHouse、StarRocks等,有实际生产环境项目。
加分项:
1.熟悉大数据建模、ETL开发设计、数据治理等流程,有实际大数据标准化和治理经验;
2.有安全相关背景优先。
岗位介绍:
在腾讯,后台开发工程师不仅是“又快又稳”的问题解决专家,更是生态共创者。你将与技术团队一同沉淀优质代码,让它成为我们共有的宝贵资产…
招聘城市:新加坡
…enhancing data quality, consistency, security, and pipeline stability.
任职要求:
任职要求
拥有计算机科学、信息技术或相关领域的学士及以上学位,具备3年以上相关领域工作经验。
拥有扎实的数据仓库研发经验,深刻理解从数据集成、建模到服务化的完整数据体系建设流程,并能持续推动其优化与价值实现。
掌握数据管理治理的核心理论与最佳实践,熟悉数据治理、数据标准、企业级数据建模、元数据管理及主数据管理等相关方法论。
精通大数据技术生态,具备扎实的实时或离线数据管道开发能力。熟练掌握Hive、Kafka、Spark、Flink、HBase等至少多项技术并拥有实际项目经验。
具备卓越的快速学习能力、出色的跨团队沟通与协作能力,以及强大的逻辑思维与复杂问题解决能力…
招聘城市:深圳
…探索AI原生的创新产品,实践并落地最新的模型能力;
4.研发内部工具,提升团队工作效率和团队协同效率。
岗位要求:
1.计算机或相关专业本科及以上学历;
2.3年及以上Linux后台开发经验,熟悉系统运维的基础知识,能够排查实际问题;
3.精通GO,C++,JAVA和Python开发语言中的一种或多种,熟悉常见rpc框架;
4.熟悉Mysql,Redis等常见开源组件,Flink,Hadoop,Kafka等大数据套件,掌握适用场景;
5.具备owner意识,能主动推进项目进展,承担更多责任,具备团队协作意识,和良好的沟通能力。
岗位介绍:
在腾讯,后台开发工程师不仅是“又快又稳”的问题解决专家,更是生态共创者。你将与技术团队一同沉淀优质代码,让它成为我们共有的…
招聘城市:西安
岗位职责:
1.负责元宝用户增长的研发工作,支持元宝运营功能的实现落地;
2.备注:此岗位为腾讯集团旗下子公司编制。
岗位要求:
1.计算机专业本科及以上学历 ;
2.3年及以上分布式服务端开发经验;
3.精通GO/C++/Java开发语言中的一种或多种,熟悉常见rpc框架;
4.熟悉微服务架构、数据库(MySQL/Redis/MongoDB)、消息队列(Kafka/RabbitMQ);
5.有用户增长、运营活动、交易、推荐、广告 相关开发经验优先。
岗位介绍:
在腾讯,后台开发工程师不仅是“又快又稳”的问题解决专家,更是生态共创者。你将与技术团队一同沉淀优质代码,让它成为我们共有的宝贵资产。在不同的业务场景和技术发展阶段,你的架构思维也将帮助更多协作团队拓展新…
招聘城市:美国
…enhancing data quality, consistency, security, and pipeline stability.
任职要求:
任职要求
拥有计算机科学、信息技术或相关领域的学士及以上学位,具备3年以上相关领域工作经验。
拥有扎实的数据仓库研发经验,深刻理解从数据集成、建模到服务化的完整数据体系建设流程,并能持续推动其优化与价值实现。
掌握数据管理治理的核心理论与最佳实践,熟悉数据治理、数据标准、企业级数据建模、元数据管理及主数据管理等相关方法论。
精通大数据技术生态,具备扎实的实时或离线数据管道开发能力。熟练掌握Hive、Kafka、Spark、Flink、HBase等至少多项技术并拥有实际项目经验。
具备卓越的快速学习能力、出色的跨团队沟通与协作能力,以及强大的逻辑思维与复杂问题解决能力…
招聘城市:深圳
…闭环;
3.热爱技术,有较强的学习意愿与能力,具备良好的分析解决问题能力,能独立承担任务,有项目进度把控能力;
4.熟悉多进程多线程编程,熟悉 TCP/IP,熟悉 Linux 网络编程和高并发,高可用设计范式;
5.熟悉 MySQL 数据库,NoSQL 存储,Kafka 等中间件;
6.熟悉常用的开源组件,包括 K8S 集群的搭建与运维,各种存储中间件的搭建与运维,并了解其内部原理。
岗位介绍:
在腾讯,后台开发工程师不仅是“又快又稳”的问题解决专家,更是生态共创者。你将与技术团队一同沉淀优质代码,让它成为我们共有的宝贵资产。在不同的业务场景和技术发展阶段,你的架构思维也将帮助更多协作团队拓展新的思考…