튜닝 작업 관리
    • PDF

    튜닝 작업 관리

    • PDF

    기사 요약

    Classic/VPC 환경에서 이용 가능합니다.

    작업 관리에서는 튜닝 메뉴에서 작업을 생성하고 관리하는 방법과 학습 현황을 확인하는 방법을 설명합니다. 또한 학습이 완료된 작업의 성능 및 정확도를 테스트하기 위한 Inference Test 사용 방법과 테스트 앱을 생성하는 방법을 소개합니다.

    새 작업 생성

    새 작업을 생성하여 사전 학습된 모델의 일부를 사용자 데이터셋에 맞게 재학습하여 테스트할 수 있습니다. 튜닝 작업을 생성하려면 업로드 조건에 적합한 데이터셋이 필요하며, 데이터 건수가 많을수록 튜닝 결과물의 성능이 향상됩니다. 데이터셋에 관한 자세한 내용은 데이터셋 준비를 참고해 주십시오.

    주의

    정상적인 학습 진행 및 성능 보장을 위해 데이터셋 규격을 반드시 준수해 주십시오.

    새 작업을 생성하는 방법은 다음과 같습니다.

    1. 네이버 클라우드 플랫폼 콘솔에서 Services > AI Services > CLOVA Studio 메뉴를 차례대로 클릭해 주십시오.
    2. My Product 메뉴를 클릭한 후 [CLOVA Studio 바로가기] 버튼을 클릭해 주십시오.
    3. 튜닝 메뉴를 클릭해 주십시오.
    4. 작업할 종류의 [생성하기] 버튼을 클릭해 주십시오.
      • 직접 API를 호출하여 학습을 진행할 수 있습니다.
        참고

        API로 학습을 진행할 경우 API 가이드를 참고해 주십시오.
        학습 생성과 조회는 서비스 페이지에 안내된 API 명세대로 호출이 가능하나, 학습한 모델의 결괏값을 생성하기 위한 Chat Completion API, Completion API를 사용하기 위해서는 기존과 동일하게 테스트 앱을 생성해 주십시오.

    5. 팝업 창이 나타나면 모델 엔진을 선택한 후 [생성] 버튼을 클릭해 주십시오.
      • 모델 엔진은 추후 변경할 수 없습니다.
      • 모델 엔진에 관한 자세한 설명은 Engine을 참고해 주십시오.
    6. 작업 이름을 입력해 주십시오.
    7. 파일 업로드 영역을 클릭하여 개인 정보 및 유해 정보 안내 내용을 확인한 후 데이터셋을 업로드해 주십시오.
      • .csv 파일의 경우, 포맷 다운로드를 클릭하여 데이터셋 포맷 파일을 다운로드할 수 있습니다.
      • 데이터셋 업로드에 성공한 경우, 파일 업로드 영역에 데이터셋 파일명과 크기가 표시됩니다.
      • 데이터셋 업로드에 성공하더라도, 최적의 성능을 위해 개선이 권장될 경우 주의사항 확인을 클릭하여 주의 사항을 확인할 수 있습니다.
      • 데이터셋 업로드에 실패한 경우, 파일 업로드 영역에 파일명과 실패 사유 메시지가 표시됩니다. 상세보기를 클릭하여 ​구체적인 오류사항을 확인할 수 있습니다.
    8. [다음] 버튼을 클릭해 주십시오.
    9. 토큰 산정 팝업 창이 나타나면 예상 사용 토큰을 확인한 후 [학습] 버튼을 클릭해 주십시오.
    10. 학습 대기 중 팝업 창의 내용을 확인한 후 [확인] 버튼을 클릭해 주십시오.
      • 사용자명 > 내 작업 > [튜닝] 탭에서 학습 현황을 확인할 수 있습니다.
    주의
    • 데이터셋 내 토큰 수가 많을수록 튜닝에 시간이 더 오래 걸리고 더 많은 비용이 발생할 수 있습니다.
    • 학습 진행에 앞서, 학습을 위한 GPU 확보 및 데이터 전처리를 위해 학습 대기 시간이 최대 6시간 소요될 수 있습니다.

    학습 현황 확인

    학습 현황을 확인하는 방법은 다음과 같습니다.

    1. 네이버 클라우드 플랫폼 콘솔에서 Services > AI Services > CLOVA Studio 메뉴를 차례대로 클릭해 주십시오.
    2. My Product 메뉴를 클릭한 후 [CLOVA Studio 바로가기] 버튼을 클릭해 주십시오.
    3. 화면 우측 상단에 있는 사용자명을 선택한 후 내 작업 메뉴를 클릭해 주십시오.
    4. [튜닝] 탭을 클릭해 주십시오.
      clovastudio-tuning01-01-ko
      • 새 작업 생성하기: 클릭하면 [새 작업] 탭으로 이동
      • i-clovastudio_card / i-clovastudio_list: 클릭하여 정렬 방식 변경
      • 학습 대기중: 학습 대기 중인 상태이며, 클릭하면 학습 대기 중 팝업 창이 나타남
      • 학습 중: 학습을 진행 중인 상태이며, 클릭하여 예상 소요 시간 확인 가능
      • 학습 완료: 학습을 완료한 상태이며, 클릭하여 작업 정보 확인 및 테스트 가능
      • 학습 중단: 학습을 중단한 상태

    학습 완료 작업 정보 확인

    학습 완료한 작업을 클릭하면 작업 정보를 확인할 수 있습니다.
    clovastudio-tuning01-02-ko

    • 생성 일시: 새 작업 생성 일시
    • 학습 완료 일시: 학습을 완료한 일시
    • Workflow ID: 학습 중인 작업을 식별하는 ID
    • Problem Type: 작업 종류
    • Model Engine: 학습된 언어 모델의 종류
    • Dataset: 학습에 사용한 데이터셋 파일명
    • Train Loss: 모델이 데이터셋에 얼마나 적합한지를 알려주는 수치로, Train Loss가 낮을수록 정답과의 오차가 적음
    • Tokens Used: 실제 사용된 토큰 수
    참고
    • API로 호출한 경우에도 학습 현황을 확인할 수 있습니다.
    • 학습 중단 시 표시되는 토큰 수가 네이버 클라우드 플랫폼 콘솔에서 표시되는 토큰 수와 다를 수 있습니다.

    학습 중단

    학습을 중단하는 방법은 다음과 같습니다.

    주의
    • 학습 중인 작업의 학습을 중단할 경우, 학습 진행률에 따라 사용된 토큰에 대한 이용 요금이 발생할 수 있습니다.
    • 중단한 학습은 재개할 수 없습니다.
    • API로 학습한 경우도 동일하게 중단할 수 있습니다.
    참고

    학습 대기 중이거나 학습 진행 중인 작업만 중단할 수 있습니다.

    1. 네이버 클라우드 플랫폼 콘솔에서 Services > AI Services > CLOVA Studio 메뉴를 차례대로 클릭해 주십시오.
    2. My Product 메뉴를 클릭한 후 [CLOVA Studio 바로가기] 버튼을 클릭해 주십시오.
    3. 화면 우측 상단에 있는 사용자명을 클릭한 후 내 작업 메뉴를 클릭해 주십시오.
    4. [튜닝] 탭을 클릭해 주십시오.
    5. 학습을 중단할 작업을 클릭해 주십시오.
    6. [중단] 버튼을 클릭해 주십시오.
    7. 학습 중단 팝업 창의 내용을 확인한 후 [중단] 버튼을 클릭해 주십시오.
      • 대기 중인 학습을 중단한 경우, 기존에 업로드했던 데이터셋 파일이 모두 소실됩니다.
      • 진행 중인 학습을 중단한 경우, 기존에 업로드했던 데이터셋 파일 및 작업이 소실되며 작업 생성 시 고지하였던 토큰이 사용됩니다.

    학습 완료 작업 활용

    학습 완료된 작업의 테스트 앱을 생성하기 전에 성능 및 정확도를 테스트할 수 있도록 Inference Test를 수행할 수 있습니다. 테스트를 완료한 후 테스트 앱을 생성할 수 있으며, 공유 URL을 통해 작업을 공유할 수도 있습니다.

    Inference Test

    Inference Test 기능을 통해 테스트하는 방법은 다음과 같습니다.

    1. 네이버 클라우드 플랫폼 콘솔에서 Services > AI Services > CLOVA Studio 메뉴를 차례대로 클릭해 주십시오.
    2. My Product 메뉴를 클릭한 후 [CLOVA Studio 바로가기] 버튼을 클릭해 주십시오.
    3. CLOVA Studio 화면 우측 상단의 사용자명을 클릭한 후 내 작업 메뉴를 클릭해 주십시오.
    4. [튜닝] 탭을 클릭해 주십시오.
    5. 테스트할 작업을 클릭해 주십시오.
      • 학습 완료 상태인 작업만 테스트할 수 있습니다.
    6. 플레이그라운드로 이동하여 테스트해 주십시오.
      clovastudio-tuning01-02-ko
    참고
    • Input 영역에 입력할 값은 해당 작업에 사용된 데이터셋의 'Text'와 유사한 길이 및 형식으로 입력하는 것을 권장합니다.
    • 대화 Inference Test 시 다음과 같이 발화문을 입력해 주십시오.
      • 데이터셋의 'Text' 내 발화문과 동일한 개수, 동일한 패턴으로 발화문을 입력해 주십시오.
        <예시> 'Text' 내 발화문 개수가 3개인 경우, Input 영역에 3개의 발화문 입력
        InputOutput
        올바른 예시고객: 언제 배송되나요? 판매자: 고객님 어제 주문하신 건 말씀이시죠? 고객: 네 맞습니다.판매자: 내일 배송 예정입니다.
        잘못된 예시고객: 언제 배송되나요? 판매자: 내일 배송 예정입니다.판매자: 조금만 더 기다려주세요.
      • 발화 주체를 포함하여 데이터셋의 'Text' 내 발화문과 유사한 형식으로 발화문을 입력해 주십시오.
        <예시>
        InputOutput
        올바른 예시고객: 언제 배송되나요?판매자: 내일 배송 예정입니다.
        잘못된 예시언제 배송되나요?내일 배송 예정입니다.
    • 업로드한 데이터셋의 일부는 튜닝된 모델의 성능 검증에 사용되므로, Inference Test 결과가 사용자 데이터셋 내용과 일치하지 않을 수 있습니다.

    테스트 앱 생성

    테스트 앱을 생성하는 방법은 다음과 같습니다.

    1. 네이버 클라우드 플랫폼 콘솔에서 Services > AI Services > CLOVA Studio 메뉴를 차례대로 클릭해 주십시오.
    2. My Product 메뉴 > [CLOVA Studio 바로가기] 버튼을 클릭해 주십시오.
    3. 우측 상단에 있는 [사용자명] 을 선택한 후 [내 작업] > 튜닝 을 클릭해 주십시오.
    4. 테스트 앱을 생성할 작업을 클릭해 주십시오.
    5. [테스트 앱 생성] 버튼을 클릭해 주십시오.
    6. 테스트 앱 이름을 입력한 후 [생성] 버튼을 클릭해 주십시오.
      • 테스트 앱이 생성되며, 테스트 앱 팝업 창이 나타납니다.
        clovastudio-playground_testapp_ko
        • 테스트 앱의 API 정보를 확인할 수 있으며, AI Filter 사용 여부를 설정할 수 있습니다.(API에 관한 자세한 내용은 CLOVA Studio API 가이드 참조)
        • 코드 타입은 curlpython이 제공됩니다.
        • [복사] 버튼을 클릭하여 API 정보를 클립보드에 복사할 수 있습니다.
        • [재발급] 버튼을 클릭하여 API Gateway Key를 재발급할 수 있습니다.
        • 가이드 보기를 클릭하면 AI Filter 가이드를 확인할 수 있습니다.
    참고
    • 테스트 앱을 생성하여 사용에 문제가 없는지 확인한 후 서비스 앱을 신청할 수 있습니다. 서비스 앱을 신청하려면 서비스 앱 신청 양식을 작성해 주십시오. 서비스 앱 신청에 관한 자세한 내용은 서비스 앱 신청을 참고해 주십시오.
    • 앱 신청 현황을 확인하려면 앱 신청 현황 확인을 참고해 주십시오.

    이 문서가 도움이 되었습니까?

    Changing your password will log you out immediately. Use the new password to log back in.
    First name must have atleast 2 characters. Numbers and special characters are not allowed.
    Last name must have atleast 1 characters. Numbers and special characters are not allowed.
    Enter a valid email
    Enter a valid password
    Your profile has been successfully updated.