본문 바로가기
  • 컴공생의 공부 일기
  • 공부보단 일기에 가까운 것 같은
  • 블로그

🤖 AI90

🤖신촌GPT 디스코드 봇🤖 만들기 디스코드 봇이 만들어보고 싶어서GPT랑 연동해서 만들어볼거다 후보는 - 카카오톡 문의 답변 봇 🌟일단 이거- 회의 서기봇🤖디스코드 봇🤖디스코드 개발자 사이트에서 아주 간단하게 만들 수 있다.지피티가 달리로 만들어준 프사를 단 봇에게 권한을 설정하고 원하는 서버에 등장시킨다🤖디스코드  세팅🤖우선 테스트 세팅- 실행될 시 보내는 메세지 설정- *TODO 커맨드메세지 설정- 채널에 메세지 오면 받아보기 => "상담해줘" 워딩 있으면 GPT 넘겨 답변 받아 출력🤖GPT 세팅🤖- gpt 3.5 터보 llm 사용- 문맥이 있는 상담을 위해 메모리 설정- 프롬프트 템플릿 설정- 메모리|프롬프트|모델 체인 만들기- 질문 들어오면 체인 돌리고 값 반환🤖TODO🤖🤖깃허브🤖!주의- gpt api key-.. 2024. 2. 29.
🦜 풀스택 GPT - MEMORY 챗봇에게 기억력 선사하기 => 이전 질문에 이어지는 대답하기 => 이전 대화의 내용 적용하기 컨텍스트 사용 랭체인에는 5가지 정도의 메모리가 있음 모델 자체(GPT 같은)에는 메모리 탑재 노노! 챗지피티에는 탑재 모델에게 이전 대화 전체를 보내는 형식으로 진행 모든 메모리는 동일한 api 형식 사용 save_context, load_memory_variables 등의 함수 🦜첫 번째 메모리 - ConversationBufferMemory 단순히 이전 대화 내용 전체를 저장 대화 내용이 길어질수록 비효율적임 ( 동일한 내용이 중복되어 쌓임) 예측을 할 때, 텍스트를 자동완성하고 싶을 때 유용 from langchain.memory import ConversationBufferMemory memory = C.. 2024. 2. 27.
🦜 풀스택 GPT - MODEL IO 모듈 LangChain은 다음과 같은 주요 모듈을 위한 확장 가능한 표준 인터페이스 및 외부 통합 기능을 제공 Modules | 🦜️🔗 Langchain LangChain provides standard, extendable interfaces and external integrations for the following main modules: python.langchain.com - Model I/O 언어 모델과의 인터페이스 - Retrieval 애플리케이션별 데이터를 사용한 인터페이스 - Agents 높은 수준의 지침이 주어지면 체인이 어떤 도구를 사용할지 선택하도록 합니다 - Chains 일반적인 빌딩 블록 구성 - Memory 체인 실행 간 지속적인 응용 프로그램 상태 - Callbacks 모든.. 2024. 2. 20.
🦜 풀스택 GPT - LangChain 🦜가상환경 >>> source env/bin/activate >>> deactivate 🦜openAi 모델 종류 https://platform.openai.com/docs/models/overview 🦜 랭체인(LangChain)이란? - 대규모 언어 모델과 애플리케이션의 통합을 간소화하는 SDK - LLM과 상호 작용하는 탁월한 도구 - 외부 도구와 통합되어 환경을 조성하는 강력한 프레임워크 랭체인은 간단하고 통합된 API를 노출하여 기본 LLM의 구현 세부 사항을 요약하는데, 이 API를 통해 개발자들은 코드를 크게 변경하지 않고 모델을 쉽게 교체하거나 대체할 수 있다. Introduction | 🦜️🔗 Langchain LangChain is a framework for developing appl.. 2024. 2. 17.
LLM - 냥plus🐈 저번 LLM 정리글에 지인이 답변을 달아 줬다.알아보자🥟 tokenization 토큰화 text : 문서나 문장 Corpus(말뭉치) : 텍스트에서 데이터 분석이나 모델 개발 등 특정 목적을 위해 수집된 텍스트 데이터Tokenization : 텍스트를 작은 단위(토큰)로 분리하는 것 Features : 토큰화, 정제, 정규화, 불용어 처리, 인코딩 등 여러 단계를 거쳐 실제 모델의 입력 데이터단어 사전 : 토큰의 리스트 🦾 Word Tokenization- 가장 일반적인 토큰화 방법- 특정 구분기호를 가지고 텍스트를 나누는 방법 (영어의 경우 기본적으로 공백 / 한글의 경우 교착어라는 특징 - 단어 구분이 쉽지 않음) OOV 문제(Out Of Vocabulary)입력된 데이터가 이미 만들어져 있던 단.. 2024. 1. 28.
신촌정보 MY GPTS 만들어보기 보호되어 있는 글 입니다. 2024. 1. 24.
🦾LLM 강의 정리~!~!🦾 대규모언어모델이란-1부오랜만에 포스팅합니다. 작년부터 GPT에 관심을 가졌고, 로컬LLM의 세계를 접한지가 벌써 년수로 2년차가 되가고 있네요 앞으로는 AI하면 LLM이고 2024년 올해부터 LLM은 골드러쉬가 시작된다고 생각nextshds.tistory.com강의 출처~LLM이란 ? 대규모의 언어 텍스트 데이터를 사용하여 학습된 대화형 자연어 처리 딥러닝 모델🤖 인공지능 구분딥러닝 ⊂ 머신러닝 ⊂ 인공지능 인공지능 : 사람의 지적능력을 컴퓨터를 통해 구현하는 기술   머신러닝 : 주어진 데이터를 인간이 먼저 처리, 사람이 먼저 컴퓨터에 특정 패턴을 추출하는 방식을 지시, 이후 컴츄터가 스스로 데이터를 분석하고 축적 딥러닝 :머신러닝에서 사람이 하던 패턴 추출 작업이 생략. 컴퓨터가 스스로 데이터를 기.. 2024. 1. 23.
🦜 풀스택 GPT - 시작하기~ 🦜풀스택 GPT 강의 소개 🦜 활용하는 패키지 : Langchain, GPT-4, Whisper, FastAPI, Streamlit, Pinecone, Hugging Face… and more! 구현하는 AI 웹 서비스 (6종) : DocumentGPT, PrivateGPT, QuizGPT, SiteGPT, MeetingGPT, InvestorGPT 구현하는 ChatGPT 플러그인 (1종) : ChefGPT GPT-4, Langchain 을 활용하여 실전형 AI 웹 서비스를 무려 7가지 구현합니다! 기본 지식 선형대수 / 통계 / 미적분학 / 기본적인 수학(?) + 파이썬 🦜 사용 툴 🦜 ⛓ LANGCHAIN ⛓ LLM을 활용한 어플리케이션을 만들기 위한 FrameWork ⛓ Claude ⛓ ⛓ LANG.. 2024. 1. 7.
🦜 풀스택 GPT - 랭체인으로 AI 웹 서비스 7개 만들기 AI의 성장에 발맞추어 성장을 꿈꾸는.. 홧탱 풀스택 GPT – 노마드 코더 Nomad Coders 랭체인으로 AI 웹 서비스 7개 만들기 nomadcoders.co 나는니꼬썜팬~! DocumentGPT 법률. 의학 등 어려운 용어로 가득한 각종 문서. AI로 빠르게 파악하고 싶다면? PrivateGPT 회사 기밀이 유출될까 걱정된다면? 이제 나만이 볼 수 있는 비공개 GPT를 만들어 활용하세요! QuizGPT 암기해야 할 내용을 효율적으로 학습하고 싶다면? SiteGPT 자주 묻는 질문 때문에 CS 직원을 채용...? SiteGPT로 비용을 2배 절감해 봅시다. MeetingGPT 이제 회의록 정리는 MeetingGPT에게 맡기세요! InvestorGPT AI가 자료 조사도 알아서 척척 해 줍니다. C.. 2024. 1. 7.
🤖LLM - 대규모 언어 모델 대규모 언어 모델의 정의 그리고 생성형 AI와의 관계2022년 11월 등장한 챗GPT(ChatGPT)는 기업과 소비자가 작업 자동화와 창의적인 아이디어 지원, 심지어 소프트웨어 코딩에까지 생성형www.itworld.co.kr🤖 대규모 언어 모델일종의 컴퓨터 알고리즘인 LLM은 자연어 입력 내용을 처리하고 이미 나온 것을 기반으로 다음 단어를 예측그 후에는 그 다음 단어를 예측하고 또 그 다음 단어를 예측하여 답변을 완성 + 엄청난 분량의 데이터  +데이터 입출력 집합을 통해 학습된 머신러닝 신경 네트워크+텍스트는 미분류 상태이며 모델은 자기지도 또는 준 지도학습 방법론을 사용할 때가 잦음  +백만 개, 수십억 개, 심지어 수조 개의 매개변수에 의해 제어 🤖 LLM 사용 예시오픈AI의 GPT-3 및 4.. 2023. 9. 28.

티스토리툴바