본문 바로가기
  • 컴공생의 공부 일기
  • 공부보단 일기에 가까운 것 같은
  • 블로그

전체 글1224

😄 Hugging Face 탐색 멘토링의 나날😄 Hugging Facehttps://huggingface.co Hugging Face – The AI community building the future.The Home of Machine Learning Create, discover and collaborate on ML better. We provide paid Compute and Enterprise solutions. We are building the foundation of ML tooling with the community.huggingface.co트랜스포머나 데이터셋 같은 머신러닝 프레임워크를 제공하는 세계 최대의 인공지능 플랫폼 중 하나인공지능계의 깃허브 - 공개된 머신러닝 레퍼런스를 통해 최신 모델을 스스로 구축 .. 2024. 10. 25.
〰️백준 - 17386 선분 교차 1 # 17386선분 교차 1🥇골3선분 교차 2를 옛날에 풀엇엇는데ccw썻던듯점 세 개의 선 방향을 알 때 쓰는 알고리즘 이걸 어케 쓰냐 하묜+ 비교차- 교차캬캬    선교2랑 다른 거는세 점이 일직선 위에 있는 경우는 없다. 가 있다2는 끝점이 겹치는 경우까지 예외처리햇어야햇오집가자 2024. 10. 24.
🔬sLLM 학습하기 :미세 조정(fine-tuning) ing LLM을 활용한 실전 AI 애플리케이션 개발 / 허정준🔬미세 조정 수행하기7B 이하 한국어 사전 학습 모델 중 가장 높은 성능을 보이는 beomi/Yi-Ko-6B 모델', '', '', '', '', '', '하', '', '', '', '', '', '', ',', '▁', '', '', '', '', '', '', '은', '▁', '', '', " data-og-host="huggingface.co" data-og-source-url="https://huggingface.co/beomi/Yi-Ko-6B" data-og-url="https://huggingface.co/beomi/Yi-Ko-6B" data-og-image="https://scrap.kakaocdn.net/dn/cpjD39/hyXlR.. 2024. 10. 24.
🔬sLLM 학습하기 : 성능 평가 파이프라인 LLM을 활용한 실전 AI 애플리케이션 개발 / 허정준🔬성능 평가 파이프라인 준비하기학습이 잘 진행된 것인지 판단할 수 있는 성능 지표 필요 뛰어난 성능의 LLM을 평가 지표로 사용하기Text2SQL 평가 방식EM 방식 : 생성한 sql문이 일치하는지 확인실행 정확도 방식 : sql 쿼리를 수행한 내용이 일치하는지 확인  - 평가 데이터셋- LLM sql 생성용 프롬프트- gpt 평가 사용 프롬프트 + api 요청 수행 코드평가 데이터셋 구축 학습+평가 데이터셋으로 나누기~ 평가 데이터셋 shangrilar/ko_text2sql · Datasets at Hugging FaceCREATE TABLE players ( player_id INT PRIMARY KEY AUTO_INCREMENT, usernam.. 2024. 10. 24.
🔬sLLM 학습하기 :Text2SQL 데이터셋 아그리고마라톤ㅜㅜ다 떨어짐LM을 활용한 실전 AI 애플리케이션 개발 / 허정준자연어 요청으로부터 적합한 SQL을 생성 실습에서 사용할 합성 데이터셋 모델이 잘 학습되고 있는지 평가하는 데 사용되는 평가 파이프라인 이후 성능 향상을 위한 다양한 조정transformers==4.40.1: Hugging Face의 Transformer 모델을 제공하는 패키지bitsandbytes==0.43.1:저수준의 최적화된 연산을 지원하는데, GPU 메모리 최적화 등에 사용accelerate==0.29.3: 멀티 GPU, TPU 분산 학습을 지원하는 패키지datasets==2.19.0: Hugging Face의 데이터셋 라이브러리로, 다양한 공개 데이터셋을 쉽게 다운로드하고 사용tiktoken==0.6.0: 토큰화를 지원.. 2024. 10. 24.
🦜카부캠 앵무말(Parrotalk) : GPT 파인 튜닝 이야 내 블로그 카카오 사내게시판에 올라갓대!gray 멘토님이 말해주심이럴 줄 알았으면 좀 말투 덜 유치하게 쓸걸🦜 GPT 파인 튜닝openAI 파인 튜닝 공식 가이드라인https://platform.openai.com/docs/guides/fine-tuning  데이터 세트 준비50-100개 사이 예제로 먼저 테스트해보기 AI-Hub샘플 데이터 ? ※샘플데이터는 데이터의 이해를 돕기 위해 별도로 가공하여 제공하는 정보로써 원본 데이터와 차이가 있을 수 있으며, 데이터에 따라서 민감한 정보는 일부 마스킹(*) 처리가 되www.aihub.or.kr훈련과 시험 분할 - Train and test splits데이터 서식 확인데이터 세트를 컴파일한 후 미세 조정 작업을 생성하기 전에 데이터 형식을 확인하는 것.. 2024. 10. 24.
🏃🏻2024년 제6회 K-디지털 트레이닝 해커톤🏃🏻 : 유저 플로우, 프리세일즈 기획서, NPS 호엥 할 게 생겼다🏃🏻프리 세일즈 기획서프리 세일즈(Pre-Sales)고객이 제품이나 서비스를 구매하기 전 단계에서 이루어지는 다양한 지원 활동고객이 제품을 더 잘 이해하고 구매 결정을 내릴 수 있도록 돕는 중요한 역할고객 요구 분석솔루션 제안기술 지원POC(Proof of Concept)와 파일럿- 고객이 제품을 도입하기 전에 실제로 작동하는지 테스트할 수 있도록 POC 또는 파일럿 프로젝트를 진행제안서 및 견적 작성경쟁 분석 및 대응잘만든듯이거 들고 돌아다니면 되는 거..?🏃🏻NPS ( Net Promoter Score )고객 충성도 및 만족도를 측정하는 지표고객이 회사의 제품이나 서비스를 친구나 동료에게 추천할 가능성을 평가하기 위해 사용고객 만족도 조사에서 자주 사용설문 예시: "당신은 이.. 2024. 10. 23.
🦜카부캠 앵무말(Parrotalk) : 랭체인 프롬프팅 망침깔끔하게! 고민 없이! 복학~~-아니 진짜 일대일 60분 기술면접 진짜냐 젠장 다대다라이트면접일줄알았다🦜 우리 서비스!https://451a-211-244-225-164.ngrok-free.app통화 된다~음질 굿TTS STT 진행 중이시다🦜 GPT api / Langchain가상환경 설정, 패키지 설치pip freeze > requirements.txt 프롬프트recommend_system_message = '''### 지시 ###주어지는 문장은 내 전화 상대방의 문장이다. 맥락에 따른 답변 추천 예시를 3개 생성하라.### 출력 형식 ###json 형식으로 출력하되 아래 형식으로 출력하라.{{ "recommend": [ // 요약한 메시지 3개, 이는 겹치면 안 된다. .. 2024. 10. 22.
🥽 if(kakaoAI)2024 기록 if(kakaoAI)2024모든 연결을 새롭게if.kakao.com if(kakaoAI)2024 기술 세션 찾아보기 (날짜별) - tech.kakao.com10월 22일 부터 24일까지, 카카오의 연례 개발자 행사 ‘if(kakaoAI)...tech.kakao.com몇 주 전부터 판교에 쫙 깔려있던 광고!디자인이 참 맘에 들었따..아지트 앞에 셔틀 타는 곳왜 있나 햇더니 목적지가 산골짜기다스티커랑 가방 받았는데 스티커가 홀로그램이다.. 엄청 비쌌겠는뎅카카오 AI 캠퍼스 도착감각적인 건물이었다비 안 왔으면 더더 예뻤을 텐데🥽모든 연결을 새롭게 / KananaLED판이 엄청 크고그라데이션 무빙이 멋져서대기업의 향취가 물씬왼쪽이 나앞줄이랑 다 카부캠 사람들이었다 12명 만난 듯애니매이션이랑 PPT 제작 현수.. 2024. 10. 22.
🏃🏻2024년 제6회 K-디지털 트레이닝 해커톤🏃🏻 : 토스 이경엽님 멘토링 2 🏃🏻멘토님 피드백 반영 : 기획서  현재 진행 상황 설명- 굿 발전하고 있는 것 같음 SIB 특정 기업 -의미 있는 기업이 있을지 슥 보기- 그들이 몇 점인지, 우리와 비교하기  - 문제 인식부문제 인식이 확 되지 않음숫자 지표가 부족함기사 같은 것이 있으면 좋음앞이 조금 약하다고 느껴짐로봇 iot 별로임좀 더 자극적으로 가야 함죽- 사회 문제부결식과 고독사의 연관성 좀 줄이기문제만 있어서 비즈니스 모델 캔버스를 앞쪽으로 서비스 시나리오를 위쪽으로서비스 프로세스도 2번으로 주요 기능 2가지 정도를 강조 한계점 조금 더 생각해 보기 왜 다른지가 확실하게 느껴졌으면 좋겠음수익 모델 정리가 조금 이상하긴 함 - 3번 내용이 아님TAM SAM SOM도 좀 줄이기 칸마다 줄 많이 줄이기 - 10장 넘으면 감점.. 2024. 10. 19.