Amazon Web Service、Hugging Faceと協力し高性能で効率の良い生成AIの開発が可能に

最終更新日:2024/02/07

AWS 生成AI開発へ協力開始

Amazon Web ServiceはHugging Faceと協力し、生成AIに不可欠である大規模な事前学習済みモデルの学習と推論を加速していくと発表しました。

Amazon Web Service（以下AWS）は、自然言語処理のデータセットを提供しているHugging Faceと協力し、生成AIに不可欠である大規模な事前学習済みモデルの学習と推論を加速していくと発表しました。

生成AIの用途は幅広く、文書の要約、質問への回答、コードの生成、画像の生成、エッセイや記事の作成など、さまざまなタスクの実行が可能です。

AWSは生成AIの活用に向けてイノベーションを継続してきており、機械学習モデルの構築からデプロイまで可能な「Amazon SageMaker」や、学習のための「AWS Trainium」、推論のための「AWS Inferentia」を専用のアクセラレーターとして開発しています。これらは機械学習をより使いやすくコスト効率を良いものにします。

今まで大規模な言語や画像のモデルを構築し、学習、デプロイすることは機械学習に関する専門知識だけでなく費用と時間がかかるプロセスなうえ、何千億ものパラメータを含むモデルはとても複雑で扱いが困難なため、多くの開発者にとって生成AIの開発は難しいものでした。

しかし今回、Hugging FaceはAWSと協力することにより、開発者がAWSのサービスを通じ生成AIアプリケーション専用のHugging Faceモデルを簡単に扱うことができます。学習が速くなり、データ転送の通信遅延の減少や高スループットの推論をスケーリングが可能です。

AWSでHugging Faceを始める方法は3つあり、SageMaker JumpStart、Hugging FaceのAWSディープラーニングコンテナ、AWS Trainium 、またはAWS Inferentiaのチュートリアルから生成AIの開発を始めることができます。

出典：Amazon Web Service

AIsmiley編集部

株式会社アイスマイリーが運営するAIポータルメディア「AIsmiley」は、AIの専門家によるコンテンツ配信とプロダクト紹介を行うWebメディアです。AI資格を保有した編集部がDX推進の事例や人工知能ソリューションの活用方法、ニュース、トレンド情報を発信しています。

・Facebookでも発信しています @AIsmiley.inc
・Xもフォローください @AIsmiley_inc
・Youtubeのチャンネル登録もお願いいたします@aismiley
メルマガに登録する