Club380 💪🏻 카테부 부하 테스트 토너먼트 대회 - 최적화 작심삼일..이면 3일마다의 결심을💪🏻 최적화백엔드 : Redis Adapter 구현을 위한 단계별 계획 / 어스틴1단계: 기본 Redis 설정 (2-3시간) Redis 서버 설치 Socket.IO Redis Adapter 연결 기본적인 에러 핸들링 간단한 연결 테스트 2단계: Redis Sentinel 구성 (3-4시간) Master-Slave 구조 설정 (2대) Sentinel 노드 1대 추가 자동 페일오버 설정 페일오버 테스트 3단계: 안정성 보완 (1-2시간) 재연결 메커니즘 구현 기본적인 메모리 제한 설정 클라우드 / 소피아 누나route53 (도메인) -> alb -> front(??대) -(nginx) -> backend(??대) 로드밸런서로 서버 연결 작업 테스트 서버 추가하고 ng.. 2024. 12. 11. 💪🏻 카테부 부하 테스트 토너먼트 대회 - Playwright와 Artillery를 활용한 E2E 테스트 및 부하 테스트 아싸~! 50만원+💪🏻Playwright와 Artillery를 활용한 E2E 테스트 및 부하 테스트E2E 테스트애플리케이션의 전체 워크플로우를 테스트하는 방법실제 사용자의 시나리오를 기반으로, 시스템의 모든 구성 요소(프론트엔드, 백엔드, 데이터베이스 등)가 잘 통합되고 동작하는지 확인사용자 관점에서 기능 검증통합된 시스템의 안정성 보장회귀 테스트 수행 PlaywrightMicrosoft에서 개발한 E2E 테스트 프레임워크브라우저 자동화를 통해 사용자 시나리오를 테스트UI 테스트: 사용자 인터페이스가 예상대로 동작하는지 확인다중 브라우저 테스트: 크로스 브라우저 호환성 점검머리 없는 테스트: CI/CD 환경에서 브라우저 UI 없이 테스트 실행복잡한 워크플로우: 로그인을 포함한 여러 단계를 테스트 Ar.. 2024. 12. 11. 💪🏻 카테부 부하 테스트 토너먼트 대회 - 서비스 가용성을 높이기 위한 엔지니어링 💪🏻 서비스 가용성을 높이기 위한 엔지니어링 에...?머라거여 2024. 12. 10. 💪🏻 카테부 부하 테스트 토너먼트 대회 - 대규모 사용자들을 감당하기 위한 서비스 ㅜㅜ! 파이널 프로젝트 데드라인까지 얼마 안 남았는데 갑자기 일주일 동안 부하 대회가 열리다..!재미있는 주제 같긴 하다~ 다 비슷비슷한 거구먼12/09 (월) 14:00 ~ 15:00: 오프닝 및 대회 소개 15:00 ~ 16:00: 대규모 사용자들을 감당하기 위한 서비스 만들기 16:00 ~ 17:00: 서비스 가용성을 높이기 위한 기법 소개 17:00 ~ 18:00: Q&A 온라인 진행12/10 (화) 09:00 ~ 10:00: playwright 기반 E2E 테스트 코드 작성 기초 10:00 ~ 11:00: Claude를 이용하여 E2E 테스트 코드 자동으로 작성하기 11:00 ~ 18:00: 팀별 E2E 테스트 제작 및 부하테스트 진행을 위한 아키텍쳐 제작 진행 등(수정 및 배포 진행)12/11.. 2024. 12. 9. 🦜카부캠 앵무말(Parrotalk) : 문맥 딕셔너리 캐시 -> Redis 고도화 문맥 딕셔너리 캐시를 Redis로 고도화하겠다!DB 연결/데이터 저장이 알고 보니 백엔드 일이어서 실직했기 때문에..그리고 아직 파인튜닝 모델 수리와 TTS 모델 개발은...안 하고 싶다소피아언냐가 redis 도커 파일을 짜 준대헉그게모지,, 우선 redis에 대해 알아보자 딕셔너리를 고도화하는 것이기 때문에 비교1. 데이터 영속성딕셔너리의 한계: 딕셔너리는 메모리에 저장되기 때문에 프로그램이 종료되면 데이터가 사라집니다.Redis의 장점: Redis는 데이터를 디스크에 저장하거나 스냅샷을 통해 영속성을 제공합니다. 이를 통해 프로그램이 종료되거나 서버가 재부팅되어도 데이터가 유지됩니다.2. 멀티 프로세스/멀티 클라이언트 접근 가능딕셔너리의 한계: 딕셔너리는 동일한 프로세스에서만 접근 가능합니다. 다른 .. 2024. 12. 5. 🦜카부캠 앵무말(Parrotalk) : 선후행 투두 기능 개발 달력은 엄마랑 아빠가 탐내다가 엄마에게로 양보된파인튜닝은 PRAI api 명세서 명세서 생성!!!https://www.notion.so/API-fff81e0514ad815a978bf2d70d2f5b78?p=15381e0514ad811bb46dcc8de7c786f0&pm=s ERD parrotalkDraw ERD with your team members. All states are shared in real time. And it's FREE. Database modeling tool.www.erdcloud.commysql에~연결해보려고 했는데알고 보니 백엔드 쪽에서 연결하는 거였다. 실직. 그럼인터뷰하러총총 2024. 12. 5. 🦜카부캠 앵무말(Parrotalk) : 성능 통계 재료 통계 목표평균 (Mean): 각 모델의 평균 점수 계산중앙값 (Median): 점수의 중간값 계산분산 (Variance) / 표준편차 (Standard Deviation): 점수의 분포 정도를 확인점수 차이 (Difference): 파인튜닝 모델 점수 - 베이스 모델 점수 점수 차이의 평균: 점수 차이가 얼마나 일관되게 개선되었는지 확인점수 차이의 분포: 차이의 분산 및 표준편차 계산통계import jsonfile_paths = ["fineTuning/validate_data/base_model_validation.json", "fineTuning/validate_data/fineTuning_model_validation.json", "fineTunin.. 2024. 12. 3. 🦜카부캠 앵무말(Parrotalk) : 파인튜닝 모델 성능 측정 언니오빠들도 다 안 간다고 하고ㅠ 가지말까자- 파인튜닝된 모델에 정제한 validation data를 보내서 답변을 얻은 후- data 안에서 context랑 question, 답변을 answer으로 준비한 프롬프트에 넣어서 gpt 4.o에 쏘고- 평가용 json을 context, question, answer, evaluation_score(llm 성능 측정 숫자)으로 구성해서 반환의 계획! 바텀 업 디바이드앤컨커 간다222 평가 json 반환기랑 LLM 평가 점수 반환기는 재활용튜닝 모델 답변 반환기from transformers import AutoTokenizer, AutoModelForQuestionAnsweringimport torchfrom transformers import AutoToke.. 2024. 12. 2. 🦜카부캠 앵무말(Parrotalk) : 베이스 모델 성능 측정 카부캠을 떠날 때가 가까워지는구만~자- 베이스 모델에 정제한 validation data를 보내서 답변을 얻은 후- data 안에서 context랑 question, 답변을 answer으로 준비한 프롬프트에 넣어서 gpt 4.o에 쏘고- 평가용 json을 context, question, answer, evaluation_score(llm 성능 측정 숫자)으로 구성해서 반환의 계획! 바텀 업 디바이드앤컨커 간다평가 json 반환기# 성능 평가 파이프라인import osimport json# (키값) context, question, answer, evaluation_scorevalidate_datas = []file_path = "fineTuning/data/2.Validation/cutted_valid.. 2024. 12. 2. 🦜카부캠 앵무말(Parrotalk) : 검증 데이터 정제 바야흐로 겨울이오.계절이 가고 오는 시기면 으레 겪는 병이 있소이다.끙끙lfs에 대한 악몽이 있어서 그건 안 쓰고 싶은데..헌데 대안이 없지 않은가 끙아 이것도 용량이 안 되네..1GB밖에 안 줘?다들 유튜브를 본받으란 말이야 그냥 언트래킹 하고,,,push몸이,,,좋으면 머리가 고생하지 않는다그냥 새로 클론하고 result 빼고 add해벙려lfs 다시 쓰면 웹툰작가 전향함으! 이 한영바꾸기지옥우분투운영체제에서 빨리 탈출해야겠어왜 마우스 스크롤 방향도 다른 거야컨트롤 커맨드 위치 macos 우분투 윈도우 그리고 키보드별로도 다 다른 거 진짜 싸우고 싶네검증 데이터 정리GPT-4o API의 가격입력 토큰 1,000개당 $0.03출력 토큰 1,000개당 $0.06출력은 숫자 하나니까 그냥 없다고 봐도 무방.. 2024. 12. 1. 이전 1 ··· 14 15 16 17 18 19 20 ··· 38 다음
