亚马逊AWS官方博客
Tag: Amazon SageMaker
新增功能 – 使用 Amazon SageMaker Debugger 分析您的机器学习训练作业
今天,我非常高兴地宣布, Amazon SageMaker Debugger 现在可以分析机器学习模型,从而可以更轻松地识别和修复硬件资源使用导致的训练问题。
Amazon SageMaker JumpStart 简化了对预构建模型和机器学习解决方案的访问过程
Amazon SageMaker JumpStart 现已集成到 Amazon SageMaker Studio 中,这是用于机器学习的完全集成开发环境 (IDE),可直观地发现模型、解决方案等。
专利申报中:Infoblox 公司与 Amazon SageMaker 合作,为 DNS 建立一套同形异义词攻击检测模型
Infoblox团队使用Amazon SageMaker训练出一套深度CNN模型。此模型能够识别出与DNS域名中ASCII字符在外观上高度相似的Unicode字符。以此为基础,该模型还使用Unicode标准识别这些同形异义字符,验证准确率为0.969,测试F1得分为0.969。接下来,他们又编写一款检测器,使用此模型对Passive DNS流量上的IDN同形异义词进行检测,整个流程无需进行任何在线图像数字化或预测操作。
在 Amazon SageMaker 中构建一套定制化推荐系统
推荐系统的设计是一项艰巨的任务,有时需要对模型进行全面定制。在本文中,我们共同了解了如何在Amazon SageMaker当中从零开始实现、部署并调用NCF模型。以此为基础,大家可以运用自己的数据集打造出更适合自身场景的解决方案。
无代码机器学习:AutoGluon、Amazon SageMaker 与 AWS Lambda 合力加持 AutoML
在本文中,我们介绍了如何在无需编写任何代码的前提下,实现ML模型的训练与推理预测。AutoGluon、Amazon SageMaker以及AWS Lambda的密切配合最终让这一看似不可能的任务成为现实。大家可以使用本文中的示例无代码管道实现ML功能,整个过程轻松便捷,不需要任何编程或数据科学方面的专业知识。
使用 Amazon SageMaker Processing 与 AWS Step Functions 构建机器学习工作流
机器学习(ML)工作流负责编排并自动执行机器学习任务序列,包括数据收集,机器学习模型的训练、测试与评估,外加模型部署。AWS Step Functions能够在端到端工作流中编排并自动执行与 Amazon SageMaker相关的各项机器学习任务。AWS Step Functions数据科学软件开发工具包( AWS Step Functions Data Science Software Development Kit,简称SDK)是一套开源库,使您得以轻松创建包含数据预处理、模型训练和部署的工作流。您可以使用Python创建机器学习工作流,而无需分别设置及整合各项AWS服务。
自建 Kubernetes 集群提交和管理 Amazon SageMaker 训练任务(二)SageMaker Operator 安装及任务提交
在使用SageMaker Operator提交任务的时候,往往会涉及到使用的算法和数据来自本地,本文介绍了如何利用SageMaker Operator的参数定义,能够让线上的SageMaker训练任务使用到本地的代码及数据。
在 AWS 上构建云原生机器学习流水线
近两年,机器学习已经渗透到各行各业,各种人工智能和机器学习的应用蓬勃发展,在其背后实际上会有一个完善的机器学习平台和流水线来支撑模型的开发、测试和迭代。但是这样一个系统性的平台,往往需要通过整合基础架构层和平台层来完成。在本篇Blog中,我们将展现如果通过AWS的服务构建云原生的机器学习流水线。
在Amazon SageMaker中正确设计资源规划、避免非必要成本
本文向大家介绍了Amazon SageMaker的计费标准,根据机器学习项目内各个阶段正确调整Amazon SageMaker计算资源大小的最佳实践,以及如何通过自动停止闲置的按需notebook实例以避免产生非必要运营成本的具体方法。最后,我们还分享了如何自动检测Amazon SageMaker端点以保证不致发生误删情况。
谈金融服务领域的机器学习最佳实践
《金融服务中的机器学习最佳实践》白皮书旨在帮助大家了解如何建立起安全且具有良好治理水平的机器学习工作流,大家也可以结合实际疑问与作者取得联系。在您的机器学习探索之旅中,不妨随时参阅另一份白皮书以了解适用于机器学习工作负载的AWS架构设计原则。