我们的客户:
亚洲领先的AI视频科技公司。得益于业务的强劲增长,现正面向东盟(ASEAN)市场设立全新岗位,视频数据规模与管线工程师。
高速发展的成长型公司。
广阔的职业发展前景。
首次招聘的全新岗位。
角色:
– 构建和扩展用于摄取、处理、存储和交付大规模视频及多模态数据以进行模型训练的系统。
– 负责从原始数据摄取到生成训练就绪数据集的整个端到端数据管道的速度、可靠性、可复现性和成本效益。
– 与数据策展和建模团队密切合作,将不断演变的数据集方案付诸实施,并在训练需求增长时可靠地对其进行扩展。
岗位责任:
构建和维护可扩展的系统,用于摄取、预处理和交付用于模型训练的大规模视频数据。
设计并扩展分布式数据管道,用于预处理、数据集生成和重复的数据集刷新。
负责大规模数据处理作业的工作流编排、作业调度、监控和故障恢复。
使用 Kubernetes 或同等的编排系统实施和维护容器化的管道基础设施。
针对成本、吞吐量和运营效率,优化跨供应商(AWS、GCS 或 Azure)的云数据存储和移动。
定义并实施数据集存储布局、版本控制、缓存、保留和访问模式的最佳实践。
构建支持大规模去重工作流的工具,包括对大型视频语料库的近邻去重管道。
与策展和建模团队紧密合作,将新的数据集方案付诸实施,并将不断演变的训练需求转化为可靠的管道。
在早期阶段的环境中,跨系统、基础设施和数据工程问题的混合领域开展工作。
如果您具备良好的团队精神且符合上述职位要求,请以MSWord格式发送详细简历至:
wesley.hui@wisenetasia.com
或联系Wesley Hui进行保密讨论。
EA注册编号:R1213253
WiseNet Asia Pte Ltd
执照编号:11C5663
电话:+65 6337 2231
www.wisenetasia.com
所有的申请都会严格保密处理,我们将仅联系入围的候选人,感谢您的理解。
专业领域 | : | 数据工程师 | ||
就业类型 | : | 永久 | ||
最低经验要求 | : | 5年 | ||
工作地点 | : | 新加坡 |
WiseNet Asia是一家专业的人力资源咨询公司,致力于满足客户的人才需求。成立于2011年,总部设在新加坡,同时在马来西亚、重庆、上海和香港设有办事处。由于我们在亚洲各地设有办事处,猎头团队的战略定位与我们的客户紧密相连,可以为寻求在亚洲拓展业务的国际团队提供优质的服务。我们提供人才招聘(猎头服务)、人才转型、人才发展和人力资源外包等服务。