좋은 데이터가 좋은 ai 모델을 만든다
-> 각 데이터 전문가가 봤을 때 좋은 데이터여야 함
전문지식이 많으면 데이터해석할때 많은 도움이 된다
나의 도메인은 무엇일까
(전문지식) ->문화예술경영
De: 큰 사이즈 데이터를 가장 빠르고 많이
->데이터레이크(쓸어담기)
Ds: 데이터로 뭔가를 할 수 있는 사람
-> 데이터에서 좋은 인사이트를 잘 찾자
..야생의 데이터를 가지고 의사결정에 도움주는(ai 나 분석기술에 기반해서)
백엔드(근본)
무조건경력직, -> 취업먼저하고 학교와 병행?(회사와 시너지라면 특수추천)
Ds
프로젝트 포폴 (ds관련)…블로그
캐글 메달
영어노출환경많이 만들고
Ds 수학 핵심
가변수함수, 편미분-> 딥러닝
-> 세부 직무 찾아보고 정하기
인공지능개론
사진, 이미지 기반 데이터로 예측 -> 인식태스크
이미지/비디오가 입력이 아닌 출력물 …합성, 편집 -> 생서ㅓㅇ태스크
한장의 이미지가 어떤 카테고리인지 분류 -> 분류태스크
컨볼루션 신경망 cnn
-> 컴퓨터 비전 분야 핵심모델
부분부분 국소적인 이미지요소들로 세부정보 인식가능 ->해당 데이터 취합, 종합-> 패턴 추출 -> 맞는 카테고리로 분류
Ex. vit(vision transformer)..자연어특화 트랜스포머 모델
-cnn의 계층(layer)을 통과함에 따라 점점 더 복잡한, 고차원적인 의미를 나타내느 패턴을 추출함
복잡한 부분을 띠는 이미지 도출가능
잔차신경망 (residual networks, reset)
:residual networks 는. cnn모델의 한 종류로서 딥러닝 및 인공지능 기술중 가장 파급력이 큰 기술
뉴럴넷이라는 모델 개별레이어를 깊게 쌓아서 딥뉴럴 네트워크. 신경세포 동작과정 모방. 뉴런 신경세포들이 서로 연결 -> 두뇌의 고차원적 판단 과정 모방한 시스템
->복잡한 태스크 수행 -> 딥러닝
-> 레이어 스킵 가능, 정보의 변질이나 소실 없이 구현 가능 -> 잔차신경망모델(resnet)요시티얼 커넥션?
<인식태스크 종류>
-물체검출
덩어리에 해당하는 영역 탐색 가능
Ex . Yolo
-의미적 영역분할 (디테일) semantic segmentations
Ex. 자율주행 dvsnet(cpvr) 실내인테리어, 의료영상
…오픈소스형태로 deeplab series모델 많이들 활용
Ex.
-대규모 영역분할 모델 segment anything model(sam)
: 대규모데이타를 통해 이미 학습이 완료된 모델: 체크포인트 모델
11m개의 라벨드 데이터를 통한 대규모 interactive segmentation
Ex. Meta
2024 최신연구동향
: 이종데이터 multimodal 모델 각광(이미지/비디오와 더불어 텍스트등 이종데이터함꼐 활용)
Ex. Clip, dall-e, laion
Point cloud데이터 모델-> 자율주행에 활용 lvdr?
변환태스크-> 해당 이미지를 조건붙여서 새로운 이미지생성
Ex. Style gan2(1세대 생성모델) www.Thispersondoesnotexist.com
-generative adversarial networks (gans)
영상 합성 및 변환의 핵심모델// 합성을 담당하는 생성자와 합성된 영상과 진짜 영상을 구분하는 구분자로 이루어짐 -: 생성자는 구분자를 속일정도로 고품질의 영상을 합성하도록 학습됨(사람을 동원해서 평가: 사람이 헷갈리면 헷갈릴수록 고품질 시스템)
..랜덤 벡터값 -> generator 생성자-> fake image+training set(직접 사람이 수기로 쓴 데이터) -> discriminator 구분자-> real or fake 분류
생성모델 예. : 스타일 전이 (style transfer)
샘플이미지를 활용한 image inpainting
모델이 생성한 이미지의 다양성을 보여주는 결과 ‘’
저해상도 이미지를 쨍한 고해상도로 만들어주는 모델과 결합해서 자주 이용
Stable diffusion 오픈소스형태의 대규모 확산생성 모델
소수의 데이터로 추가학습 - > dream booth ->
나의 아이디어; 캐스팅 디렉터(이 작품에 누가 어울리나) 더 나아가서는 최애 배우의 신작동시개봉 , 자신이 영화/cf주인공이 되어보세요,,체험 -> 공유가능(하려면 저작권동의받아야)
-> 어떤 이미지의 모델을 썼을 때 매출 분석시스템.
civital.com :stable diffusion모델의 예
Magi capture; 소스와 리퍼런스 제공해서 새로운 스타일의 유형사진 제공
vton : 옷갈아입히기, 헤어모델
<예시모델 위주로 학습하기.>