728x90 반응형 AI-LAB/회의록6 [회의록] 사투리번역 진행도3 - api 사용과 추가 연구에 대한 생각 사투리) 데이터셋에서 (표준어->영어) 번역 작업 중> 무료버전으로 하는 중이라 그런지 이틀째 실행 중인데 꽤 걸리는 것 같다.. 115000 문장 정도.... 진행하다가 생긴 질문인데 구글API도 무료버전이라 중간에 자꾸 끊기거나 에러가 많아서 sleep(0.3)을 추가하고 4개씩 병렬 작업 하게 하는 등 추가 코드를 많이 입력했는데 네이버나 chatGPT는 무료,유료 제약차이가 좀 큰 것 같다. chatGPT API 기준 요금이 많이 비싼 것 같진 않았는데 아직 실제로 돌려보진 않아서 체감이 잘 안된다 유료버전의 후기가 궁금하다. 그리고 데이터셋이 모두 만들어졌다는 가정하에 ..(네이버API) ..(구글API) ..(chatGPT API) 1) 아무작업없이 KoBART 기본모델에 (사투리->영어) 번.. 2023. 8. 27. [회의록] 사투리번역 진행도2 - 구글 trasnslate api 오류 'Translator' object has no attribute 'raise_Exception' "Translator' object has no attribute 'raise_Exception'"와 같은 오류는 코드에서 Google 번역기 객체를 잘못 사용했을 때 발생할 수 있습니다. 이 오류 메시지는 'raise_Exception'라는 속성이 Translator 객체에 존재하지 않는다는 것을 나타냅니다. 이러한 오류가 발생하는 원인은 다양할 수 있지만, 주로 다음과 같은 이유로 발생합니다. 버전 호환성 문제: 코드와 사용 중인 라이브러리/패키지 버전 간의 호환성 문제가 있을 수 있습니다. Google Translate API의 라이브러리가 업데이트되거나 변경될 때 코드와의 호환성 문제가 발생할 수 있.. 2023. 8. 26. [회의록] 사투리번역 진행도1 - 사투리를 영어로 바로 번역해보자 내가 진행하는 논문 주제는 트랜스포머를 이용한 사투리의 영어 번역 조사해본 바로는 사투리가 번역되려면 사투리 -> 표준어 -> 영어 이런 식으로 두 단계를 거쳐야 하는 걸로 알고 있다. 사투리 -> 영어로 바로 번역을 하는 방법이나 정확도를 높이기 위한 방법에 대해서 팀원과 연구해보고 있었다. 1차진행 데이터셋 : AI허브에서 사투리-표준어(경상도,전라도,강원도,제주도,충청도) 텍스트 자료를 이용하여 표준어 -> 번역모델( Helsinki-NLP/opus-mt-ko-en ) -> 영어 사투리 -> 번역모델( Helsinki-NLP/opus-mt-ko-en ) -> 영어 를 작업한 뒤 비교.. 애매했다 1차 자문 자연어처리 연구실 박사과정 대학원생분께 자문을 구함 1. 사투리 -> 영어 바로 번역하는 방법.. 2023. 8. 26. [회의록] 2023.07.10 질의응답모델 2023. 7. 10. 이전 1 2 다음 728x90 반응형
