시청하면서 버그가 있을 수 있으니 버그나 문제가 있으면 댓글로 남겨주세요.
우선 유탑에서 공부하세요.
이해: 세상의 모든 지식 채널을 보고 알게 되었습니다.
관련 참조 비디오 링크 및 참조.
배경
튜링 테스트(1950)
- 1950년 제2차 세계대전 암호해독자 앨런 튜링이 과학자들에게 도전하다
- 질문자와 응답자 2명 준비, 응답자 중 1명 컴퓨터그리고 그 나머지 인간.
의뢰인은 어느 컴퓨터인지 모릅니다.
답변은 키보드를 통해서만 제공되며 이 테스트에서는
쿼리어가 컴퓨터가 어느 쪽에 있는지 확인할 수 없으면 컴퓨터가 테스트를 통과합니다. - 기계가 스스로 생각할 수 있는지 테스트 = 튜링 테스트
- 사람과 이야기할 때 차이점을 말할 수 있습니까?
엘리자 (1966)
- ELIZA는 1960년대 MIT 교수 Joseph Weizenbaum이 개발한 최초의 챗봇입니다.
- 규칙/패턴 비교 작업(튜링 테스트 실패)
ALICE(인공 언어 인터넷 컴퓨터 장치)(1995)
- 휴리스틱 패턴 매칭(XML 기반 스크립트로 패턴 및 템플릿 생성)
- 일상적인 인간의 모든 대화가 제한된 문장으로 진행되는 특성 반영
- 패턴에 문장 입력 → 답변 (튜링 테스트 통과)
- Spike Jonze의 영화 Her에서 영감을 받음
IBM 왓슨(2006)
- IBM 설립자이자 초대 CEO인 Thomas J. Watson의 이름 사용
- Jeopardy 쇼의 질문에 답하는 프로그램 설계
- 질문이 입력되는 즉시 질문을 구성하는 키워드 조각을 분석하고 메모리를 검색하여 50% 이상 일치하는 경우 부저를 울리는 메커니즘입니다.
- 질문이 입력되는 즉시 질문을 구성하는 키워드 조각을 분석하고 메모리를 검색하여 50% 이상 일치하는 경우 부저를 울리는 메커니즘입니다.
- 헬스케어: 암센터에서 폐암 치료의 적용(실패..)
→ 환자의 질병을 진단할 때 Watson은 문서, 차트, 의견 및
또는 검사 결과 등을 스캔하여 질병의 원인으로 의심되는 정보를 얻습니다.
그러나 나는 의사 소견서의 개인적인 표현이나 요약 정보를 이해하지 못했습니다. - 법률 분야: 사례 검색
가상 비서(Siri, Alexa, Google Assistant)(2011)
- 개인 비서처럼 사용자가 요청한 작업을 수행하고 사용자에게 특화된 서비스를 제공하는 소프트웨어 에이전트입니다.
- 인공지능(AI) 엔진과 음성인식 기반의 맞춤형 정보를 수집하여 사용자에게 제공
- 전화 걸기에서 미리 알림 설정, 웹 검색에 이르기까지 가상 비서가 작업을 수행합니다.
다양한 스마트홈 기기나 차량에 장착
GPT = Generative Pretrained Transformer(2020)
- G~이다 생성 AI 언어 모델생성적 의미
- 피~이다 사전 훈련사전 훈련된 수단
- 티~이다 건축학 변신 로봇
- 2018년 처음 공개된 모델
- 2020년 OpenAI에서 GPT-3 모델 발표
- 현재: GPT-3.5
GPT
- 상징적 접근: 단어를 상징적으로 분리(예: 영어 알파벳에서 명사, 목적어, 5형은 이렇게 정의..)
- 비기호적 접근: 인간의 신경망처럼 인공 신경망을 구축하여 AI 구축
- 파생 및 역전파 사용 → 텍스트도 변경되면 숫자입니다.
- 데이터에서 발생하는 각 단어에 고유한 정수를 할당합니다.
일반적으로 모든 영어 문장은 소문자이고 구두점(,.;)을 삭제하고 공백을 구분합니다.
그 별도의 단어 징후그것은이라고. 문장(샘플)은 여러 개의 토큰으로 구성됩니다.
- 파생 및 역전파 사용 → 텍스트도 변경되면 숫자입니다.
- 주의가 필요합니다.
구글 발표 → OPEN AI 시장 진입- 기존 신경망의 문제점: 이전에 학습한 것이 뒤로 전달되지 않음
- 대 인간 신경망: 후방 뉴런에 중요한 콘텐츠 전달
- 뉴런 앞뒷면 연결(문장의 특징 전달 → 잊혀진 특징 전달)
- 딥러닝은 학습할 때 특징을 줄인다 → 줄일 때 필요한 특징을 제공하기 위해
- 대 인간 신경망: 후방 뉴런에 중요한 콘텐츠 전달
- 자연어 처리에서 가장 널리 사용됩니다.
본질적으로 AI 언어 모델은 인간이 언어를 배우는 것과 마찬가지로 텍스트의 맥락과 의미를 이해하기 위해 각 문자와 단어의 의미를 순차적으로 결정합니다. - Attention Model: 위의 문제를 개선하여 후방 뉴런으로 정보 전달
- 무엇을 전달해야 하는지 알아보기
- 언어 구조 이해 = 불트(좌뇌)
- 음성 생성 = GPT(우뇌)
- 기존 신경망의 문제점: 이전에 학습한 것이 뒤로 전달되지 않음
- GPT-3 엔진 + 대화형 기계 학습과 OpenAI에서 만든 명령을 결합한 채팅 앱(서비스)
- GPT(Genarative Pre-trained Transformer)-3: 기계 학습 매개변수를 사용하여 다양한 자연어의 텍스트를 학습하도록 구축된 모델(약 1750억)
- 언어의 구조 이해 = 독립적으로 텍스트를 학습하는 비지도 학습 (인간의 언어는 이런 특징적인 명사형을 가짐)
- 1 단계 = 질문-답변을 위한 수많은 데이터 학습(감독 학습)
정답을 줘 (미세 조정 = 샘플 솔루션) - 2 단계 = 생성된 응답 중 가장 좋은 응답을 선택하도록 모델 교육(감독 학습일년)
답안지에 오류가 있는지 확인하고 모형을 만드십시오. (비윤리적인 답변…) - 3단계 = 생성-평가 반복을 통한 모델 교육(강화 학습)
반응-반응 모델 ︎ 학습 모델연속 회전으로 정확도 향상
- 추론 / 지식 / 의사소통 능력 / 창의성 / 성격 / 맥락 / 공감
출발점
- ChatGPT 같은 걸 만들려면… 비용이 많이 들기 때문에(돈, 인력, 인프라,…)
특정 지역에서만 판매하는 전략이 필요합니다. - 특정 영역을 만드는 것이 아니라 특정 영역에서 제공되는 기술/서비스를 사용하기 위해서입니다.
- 생성 AI를 사용한 비즈니스 모델
- Tenbagger = 10배 수익
- 14년 주기
- 100개 중 95개 실패
- 마나는 시장에 출시되어야 합니다.