kone
ainovel

ainovel

적정한 청크 수치라는게 있을까요?

01/15/2026, 00:32:30
질문
2017 views · 1 likes

주로 관능소설이나 라노벨을 위주로 돌리고 있고

원 소스가 epub가 많고 사용하기가 편해서

시마린 번역기에 제미나이 2.5pro,

프롬프트는 본 서브에서 본 누더기 프롬프트를 조금 손봐서 사용중입니다..


시마린의 기본 청크는 4096인데 저는 10000으로 사용중입니다.

근데 번역기 돌리다보면 꼭 사용자 사전에 등록한걸 까먹고 엉뚱한 명칭을 내놓을 때가 생기더라고요.


어디서 주어들은 바로는 청크를 줄이면 그런 문제를 좀 잡을 수 있다라고 들은 것도 같아서요

청크를 줄임으로서 그게 가능한지와

청크를 줄이면 사용량 증가로 인한 비용 증가도 있는지 궁금합니다.

1
5 comments
Sign in to comment
01/15
하루에 요청횟수가 정해져있기 때문에 gemini 해당 모델이 정해둔 횟수만 요청할 수 있습니다. 한번에 요청할 때에 너무 많이 하면 짤리고요. gemini가 처리하다가 토큰제한을 넘으면 에이 관둬 그러면서 누락하는 거죠. 하지만 적게 요청해도 짤리는 경우가 있습니다. 그래서 중요한 것은 chunk수는 확실히 토큰제한으로 짤리지 않을 정도(약2만)으로 해두고 누락되거나 오역되는 이름처리 같은 것들만 다 잡아내서 기록해두었다가 한번에 모아서 재번역하도록 하는 번역 알고리즘이 중요하죠. 예를들어서 번역 전에 소설 챕터 별로 (번역 시작) 그리고 끝에 (번역종료) 이런 태그를 추가하고 프롬프트에서 한글로된 이러한 태그를 누락하지 말라고 해두고...누락하면 프롬프트를 무시하고 번역했으므로 해당 화수는 통으로 재번역하면 오류를 줄일 수 있죠.
시마린은 용어집 아예 치환해버리던데? 그게 작동 안하고 있는거 아님? 번역 중간에 고유명사 치환되어 있는지 확인해보셈
시마린도 배치번역기도 검열 기본 전략은 청크 분할임 api가 검열 뱉으면 청크 둘로 쪼개버리기 때문에 청크 크기 늘린게 소용 없음 로그 보고 아예 검열을 안뱉도록 프롬프트 수정해야 함
청크분할하면 확실히 잡히긴 하는데 그래도 검열되는건 특정문단에 있더라고요 75청크까지도분할된거 본적있음 프롬포트가 검열 안먹게 하는게 관건이고 특정단어는 용어집으로 치환하는것도 방법입니다 그래도 검열은 걸릴수있으니 한무분할하게 되지만 그나마 나아집니다
이것저것 짜맞춰서 하고 있긴한데 개개인의 노하우가 중요하다보니 문외한인 저로서는 많이 어렵긴 하네요 더 알아봐야겠습니다 감사합니다
Sign in to comment
금서:어떤 크로스오버의 하느님의 오른쪽 자리 1-897 완결
[패러디]
DPTapt
04/27 2878 47
나루토 쌀먹 2026 4 27
[일반]
金日成綜合大學
04/27 3370 46
(복구)[역내청x다중]평온하지 않은 일상不平静的日常 완결
[복구]
hyun6871
04/27 3414 20
선협군방보 복구
[복구]
anstksruddmltjs1
04/27 1872 21
[명일방주] 누가 욕구불만이라는거야说谁X压抑呢!1-390
[패러디]
명일방주너무좋아광인
04/27 1604 30
빙봉마련(완)
[복구]
bizact
04/27 2311 29
금·토 영근으로 시작하는 장생지도 1-100
[선협]
야돈
04/26 2774 25
천재수선, 천령근도 별거 아니군 1-101
[선협]
야돈
04/26 3257 22
악녀수선,온 가족을 제물로 바치다 1-200
[선협]
야돈
04/26 3173 18
[영쉘든] 조지로 다시 환생하다 1-123
[패러디]
야돈
04/26 1690 16
[헌터X헌터] 무한 성장 1-518
[패러디]
야돈
04/26 2782 32
[학사신공] 대진뇌수 1-197
[패러디]
야돈
04/26 2401 19
[학사신공] 나는 검조가 되었다 1-172
[패러디]
야돈
04/26 1307 22
[코난] 코난 세계의 킬러퀸 1-100
[패러디]
야돈
04/26 2936 17
[주술회전] 천여주박이 약하다고?난 분노로 팔문둔갑을 연다! 1-196
[패러디]
야돈
04/26 3051 25
[원피스] 나 야마토, 효자 노릇은 안한다 1-154
[패러디]
야돈
04/26 1381 17
[워해머] 처음부터 시작하는 0호 프라이마크의 생활 1-53
[패러디]
야돈
04/26 2755 16
[신조협려] 칠 년이 지나서야 비로소 무협임을 알았다 1-198
[패러디]
야돈
04/26 2998 28
[나루토] 히나타:나뭇잎 마을은 이제 내 손아귀에 있다 1-30
[패러디]
야돈
04/26 1852 17
[나루토] 나뭇잎 일지 1-478
[패러디]
야돈
04/26 3116 35
[나루토] 나뭇잎 마을의 대검호 1-27
[패러디]
야돈
04/26 1345 20
붕괴 스타레일, 이세계에서 돌아왔다 1-480
[패러디]
tammy
04/26 2399 41
붕괴 스타레일, 시작부터 에이언즈 키레네를 줍다 1-248
[패러디]
tammy
04/26 2470 34
나루토 드림마스터 1ㅡ375
[패러디]
하이바라
04/26 1997 97
폐령근부터 시작하는 마도수행, 천생선종, 합환종의 노정으로 시작 죽을수록 강해진다, 프로의 주인 복구
[복구]
tassdar
04/26 2605 32
복구_뒤죽박죽 이세계에서 엄청 야한 슬로 라이프를 하려던 결과~0107
[복구]
nekoko01
04/26 2215 15
스피드 쌀먹 공유 모음 20260426
[일반]
tassdar
04/26 5620 107
[학원마스x걸밴크x뱅드림]아이돌마스터를 꿈꾸며憧憬成为偶像大师 1-172
[패러디]
hyun6871
04/26 1543 36
명일방주, 병약한 드라코도 여왕이 되려 한다 1-115
[패러디]
명일방주너무좋아광인
04/26 2488 20
[다중] '음지' 세계 여주인공 구원 시스템1-399
[패러디]
金日成綜合大學
04/26 2419 41