노센스와 함께하는 데이터 분석

데이터과학자, '현장에서 바로 써먹는' 시리즈 저자

딥러닝 2

ChatGPT의 파라미터 수 의미

ChatGPT가 쏘아올린 초거대(Super-Giant) AI에 대한 관심이 뜨겁습니다. GPT는 Generative Pre-trained Transfomer의 약자로 생성적(Generative)이라는 의미는 모델이 새로운 텍스트를 생성할 수 있다는 것을 의미하며, 사전학습(Pre-trained)이라는 의미는 모델이 대량의 텍스트 데이터를 사용하여 사전에 학습이 되었다는 것을 의미합니다. 그리고 Transformer는 모델의 기본 구조를 의미합니다. 생성형 모델의 성능 향상을 위해서는 매우 복잡한 신경망이 요구되고, 복잡한 신경망에는 엄청난 수의 파라미터가 존재합니다. 이렇게 파라미터 수가 엄청나게 많은 AI 모델을 초거대 AI라고 부르고 있으며 주요기업의 초거대 AI 현황은 아래와 같습니다. 가장 뛰어난..

이슈 2023.03.22

(R) Tensorflow GPU 설정 방법

[ 설치 PC 기본정보 ] ● OS : windows 10 ● R : 3.6.3 64bit ● RStudio : 1.3.1093 ● Tensorflow : 2.2.0 ● GPU : Nvidia GeForce GTX 1060 3GB ● CPU : Intel(R) Core(TM) i5-6500 (3.2GHz) ● RAM : 8GB R에서 Keras, Tensorflow를 사용하는 경우 GPU를 사용할 수 있는 설정 방법에 대해서 설명드리겠습니다. 순서는 아래와 같습니다. ① 본인의 그래픽 카드가 지원되는 그래픽 카드인지 확인 ② R에서 Keras, Tensorflow 설치 및 본인이 설치한 Tensorflow 버전에 맞는 CUDA 및 cuDNN 버전 확인 ③ Nvidia CUDA Toolkit 설치 ④ Nv..