[LLM] Quota discoveryengine.googleapis.com/documents exceeded.

1. 문제 발생Quota discoveryengine.googleapis.com/documents exceeded.GCP에서 MLOps를 구축 중, RAG를 위한 Discovery engine의 데이터 최대 수량이 초과되었다는 경고를 받게 되었다.기본 리밋은 100만건이지만 더 많은 데이터를 저장하기 위해서는 할당량 수정 요청이 필요하다.2. 할당량 수정 요청2-1. IAM & 관리자 -> 할당량 및 시스템 한도2-2. 초과된 항목 선택할당량 수정을 원하는 항목의 맨 오른쪽 메뉴 탭에서 할당량 변경을 선택할 수 있다.2-3. 할당량 변경 신청할당량 변경 신청을 요청하면, 2~3일 이내에 회신을 받을 수 있다. (내 경우 1일 만에 회신을 받았으나, GCP 계정을 만든 지 얼마 되지 않아 승인이 어렵다는 ..

• format_list_bulleted LLM
• · 2024. 12. 17.
• textsms

[LLM] Google Cloud Discovery Engine 데이터 스토어 업로드 포맷

1. Google Cloud Discovery Engine이란?Google Cloud Discovery Engine은 구글 클라우드 플랫폼에서 제공하는 검색 및 추천 서비스로, 웹사이트나 앱 내에서 사용자가 원하는 정보를 쉽고 빠르게 찾을 수 있도록 도와주는 서비스로 다음과 같은 특징을 가진다.고급 검색 기능 : 단순 키워드 검색이 아닌, 사용자의 의도에 맞춰 의미를 파악하고 관련 콘텐츠를 제안하는 자연어 처리(NLP) 기반 검색을 지원개인화된 추천 : 머신러닝 기반 추천엔진을 활용, 취향과 행동 패턴에 맞춘 추천 콘텐츠 제공확장 가능성 : 다양한 규모와 범위의 콘텐츠에 대해 빠른 검색 및 추천 성능유지2. 문제상황Google cloud discovery engine을 활용해 rag를 고도화 시도하던 중..

• format_list_bulleted LLM
• · 2024. 12. 16.
• textsms