混元深度学习框架高级研发工程师(大模型预训练)

Found in: Talent CN S2 - 2 weeks ago

Beijing, China Tencent Full time
混元深度学习框架高级研发工程师(大模型预训练) 北京 分享

分享岗位

方式1:复制岗位链接

方式2:分享岗位海报

手机扫描二维码分享

收藏 TEG 点击了解更多BG信息 技术 五年以上工作经验 更新于年04月17日 岗位职责 1.参与开发优化大模型训练框架，支持单任务万卡以上规模高效稳定训练；2.参与NLP、多模态大模型结构设计，并联合业务进行模型训练效率和效果验证；3.参与文生图、文生视频、文生3D等业务的训练性能加速；4.参与低精度训练性能优化和业务推广、参与大窗口训练性能优化。 岗位要求 1.熟练使用PyTorch框架，可对DDP训练的代码进行性能分析和优化；2.熟练使用主流大模型训练框架DeepSpeed、Megatron，掌握3D并行、ZeRO机制、Flash-Attn等的原理、使用场景、优劣势以及可优化方向；3.有ViT、SD、DiT模型训练性能优化经验者优先；4.熟练掌握CUDA性能优化手段，有算子编写优化项目经验者优先；5.对大模型前沿技术比较敏锐者优先；6.有实际大模型的训练调参和效果评测项目经验的优先；7.良好的沟通能力、解决问题能力。 机器学习平台部负责腾讯“太极”机器学习平台的建设，构建面向搜索、广告、推荐的稀疏大模型、大语言模型及稠密大模型和通用机器学习的平台能力，为腾讯广告，微信搜索、社交、游戏、金融、云等多个业务提供易用、高效的一站式机器学习平台服务。我们的技术包括但不限于预训练大模型框架、高性能参数服务器、CPU/GPU 训练和推理加速、图神经网络、NLP自然语言处理、搜索工程与算法等。

  • 大模型分布式训练研究员

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Lenovo Full time

    Description and Requirements 岗位职责： 1.负责深度学习大模型的分布式训练系统的架构设计与开发，优化模型训练效率和资源利用率； 2.研究并实现基于GPU等高性能计算平台的大规模深度学习模型并行训练算法； ...

  • 机器学习训练平台专家工程师(广告模型平台)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    机器学习训练平台专家工程师(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 五年以上工作经验 更新于年03月19日 岗位职责 ...

  • 机器学习高级后台研发工程师(推理平台方向)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    机器学习高级后台研发工程师(推理平台方向) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年03月29日 岗位职责 ...

  • 大模型算法工程师

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    大模型算法工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 PCG 点击了解更多BG信息 技术 两年以上工作经验 更新于年03月28日 ...

  • 视频号机器学习平台高级工程师(GPU开发)(广州)(深圳)

    Found in: Talent CN S2 - 2 weeks ago

    Beijing, China Tencent Full time

    视频号机器学习平台高级工程师(GPU开发)(广州)(深圳) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 WXG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月22日 岗位职责 ...

  • 机器学习后台开发工程师(广告模型平台)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    机器学习后台开发工程师(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年02月28日 岗位职责 ...

  • #QQ短视频机器学习工程师#

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    #QQ短视频机器学习工程师# 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 PCG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月10日 岗位职责 ...

  • #QQ短视频机器学习工程师#

    Found in: Talent CN S2 - 5 days ago

    Beijing, China Tencent Full time

    #QQ短视频机器学习工程师# 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 PCG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月29日 岗位职责 ...

  • 多模态资深算法工程师

    Found in: Talent CN S2 - 2 weeks ago

    Beijing, China Tencent Full time

    多模态资深算法工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 PCG 点击了解更多BG信息 技术 两年以上工作经验 更新于年04月18日 岗位职责 ...

  • 腾讯地图图像感知高级研发工程师

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    腾讯地图图像感知高级研发工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 CSIG 点击了解更多BG信息 技术 三年以上工作经验 更新于年03月08日 岗位职责 ...

  • 腾讯地图图像感知高级研发工程师

    Found in: Talent CN S2 - 6 days ago

    Beijing, China Tencent Full time

    腾讯地图图像感知高级研发工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 CSIG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月28日 岗位职责 ...

  • 微信搜索机器学习架构工程师

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    微信搜索机器学习架构工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 WXG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月17日 岗位职责 ...

  • 高级推理研发工程师(广告模型平台)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    高级推理研发工程师(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 五年以上工作经验 更新于年02月26日 岗位职责 ...

  • #NLP资深算法工程师#

    Found in: Talent CN S2 - 2 weeks ago

    Beijing, China Tencent Full time

    #NLP资深算法工程师# 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 PCG 点击了解更多BG信息 技术 两年以上工作经验 更新于年04月17日 岗位职责 ...

  • 广告大模型算法工程师（深圳/北京）

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    广告大模型算法工程师（深圳/北京） 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 CDG 点击了解更多BG信息 技术 两年以上工作经验 更新于年03月20日 岗位职责 ...

  • 机器学习平台高级算法研究员-大模型应用(广告模型平台)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    机器学习平台高级算法研究员-大模型应用(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年03月14日 岗位职责 ...

  • 机器学习平台高级算法研究员-大模型应用(广告模型平台)

    Found in: Talent CN S2 - 4 days ago

    Beijing, China Tencent Full time

    机器学习平台高级算法研究员-大模型应用(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月29日 岗位职责 ...

  • 微信搜一搜机器学习算法工程师

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    微信搜一搜机器学习算法工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 WXG 点击了解更多BG信息 技术 两年以上工作经验 更新于年04月17日 岗位职责 ...

  • 异构计算研发工程师(广告模型平台)

    Found in: Talent CN S2 - 1 week ago

    Beijing, China Tencent Full time

    异构计算研发工程师(广告模型平台) 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年02月26日 岗位职责 ...

  • 云原生调度工程师

    Found in: Talent CN S2 - 2 weeks ago

    Beijing, China Tencent Full time

    云原生调度工程师 北京 分享 分享岗位 方式1:复制岗位链接 方式2:分享岗位海报 手机扫描二维码分享 收藏 TEG 点击了解更多BG信息 技术 三年以上工作经验 更新于年04月21日 岗位职责 1.负责云原生大数据、云原生 AI...