Last Translation Benchmark-ն առաջարկում է մեքենայական թարգմանության սխալների ստուգման նոր մոտեցում
Last Translation Benchmark պրեպրինտն առաջարկում է մուլտիմոդալ սխալների օրինակներ՝ ձեռքով կազմված ստուգման կանոններով՝ մեքենայական թարգմանության կոնկրետ խնդիրները բացահայտելու համար: arXiv-ը հաստատում է 1 տարբերակի պրեպրինտի առկայությունն ու ներկայացման ժամանակը, իսկ շտեմարանի բովանդակությունը, գրախոսման ընթացքը, հասանելիության պայմաններն ու արդյունքները տրամադրված տվյալներում մնում են չստուգված: [1]
Այս թողարկումն անցել է «Իմանանք»-ի հրապարակման ընդլայնված ստուգումները: Որոշ էական պնդումներ շարունակում են հստակ վերագրվել պաշտոնական կամ ընկերության աղբյուրներին, քանի որ այս թողարկմանը դեռ անկախ աղբյուր կցված չէ: Համակարգը շարունակում է ստուգել հաստատված աղբյուրները և անկախ հաստատումը կավելացնի միայն ամբողջական ստուգում անցած նոր թողարկմամբ:
arXiv-ում հրապարակված նոր պրեպրինտը ներկայացնում է Last Translation Benchmark-ը (LTB)՝ մեքենայական թարգմանության սխալների թիրախային օրինակների շտեմարան, որոնցից յուրաքանչյուրն ունի ստուգման առանձին կանոններ: Համակարգում այն գրանցված է որպես arXiv:2609.04173-ի 1 տարբերակ, որը ներկայացվել է 2026 թվականի սեպտեմբերի 3-ին: Նախաձեռնության և դրա հնարավորությունների մասին տեղեկությունները հիմնված են հեղինակների ամփոփագրի վրա. տրամադրված գրառումը տվյալների շտեմարանի կամ ստացված արդյունքների անկախ ստուգում չի պարունակում: [1]
01
Ինչ գիտենք այս պահին
- 01
arXiv-ի գրառումը «Last Translation Benchmark»-ը նշում է որպես arXiv:2609.04173-ի 1 տարբերակ Computation and Language բաժնում, որը ներկայացվել է 2026 թվականի սեպտեմբերի 3-ին՝ UTC ժամանակով 17:54:45-ին: [1]
- 02
Ամփոփագրում հեղինակները ներկայացնում են մուլտիմոդալ շտեմարան՝ կազմված մասնագետների հեղինակած ու գրախոսված օրինակներից և յուրաքանչյուր օրինակի համար ձեռքով սահմանված ստուգման կանոններից: [1]
- 03
Ամփոփագրում նշվում է, որ LTBv1-ն ներառում է մինչև 2026 թվականի սեպտեմբերի 1-ն ընդունված օրինակները, և նախատեսվում են նոր թողարկումներ: [1]
02
Պրեպրինտի կարգավիճակն ըստ arXiv-ի
arXiv-ը նշում է 1 տարբերակը Computation and Language բաժնում: Սա հաստատում է պրեպրինտի գրանցումը, այլ ոչ թե գրախոսումը կամ անկախ ստուգումը:Ներկայացման ամսաթիվն ու ժամը
Գրառումը պարունակում է 1 տարբերակի ներկայացման ճշգրիտ ժամանակը UTC ձևաչափով:Շտեմարանի վերջին տարբերակը
Ըստ հեղինակների ամփոփագրի՝ LTBv1-ն ներառում է մինչև 2026 թվականի սեպտեմբերի 1-ն ընդունված օրինակները:Հեղինակների նշած մոդալությունները
Հեղինակները նշում են տեքստ, պատկերներ, աուդիո և վիդեո պարունակող օրինակների մասին:Ինչ է հաստատում arXiv-ի գրառումը և ինչն է մնում չստուգված: [1]
03
Ինչ է առաջարկում պրեպրինտը
Հեղինակները LTB-ն ներկայացնում են որպես թարգմանության կոնկրետ սխալները բացահայտելու այլընտրանքային գործիք, որը չի սահմանափակվում միայն ընդհանուր գնահատման միավորներով: Ըստ նրանց՝ մեքենայական թարգմանության ստանդարտ բենչմարքերը մոտենում են իրենց հնարավորությունների սահմանին, իսկ ավտոմատ մետրիկաներն ու մարդկային ավանդական գնահատումն ունեն սահմանափակումներ: Սրանք հեղինակների գնահատականներն են, այլ ոչ թե անկախ աղբյուրներով հաստատված փաստեր: [1]
04
Ինչպես է նախատեսված գնահատման մոտեցումը
Որակի ընդհանուր գնահատական տալու փոխարեն՝ առաջարկվող մոտեցումը ստուգման կանոններ է կցում առանձին օրինակներին: Հեղինակների խոսքով՝ այդ կանոնները սահմանում են, թե տվյալ օրինակում որ դեպքն է համարվում սխալ: Սակայն գրառման մեջ բացակայում են բուն կանոնները, հրապարակված շտեմարանի հղումը կամ գործնականում դրանց արդյունավետությունը փաստող տվյալները: [1]
05
Ինչն է հնարավոր հաստատել այս պահին
arXiv-ը «Last Translation Benchmark» վերնագրով աշխատությունը գրանցել է Computation and Language բաժնում որպես 1 տարբերակ, որը ներկայացվել է 2026 թվականի սեպտեմբերի 3-ին՝ UTC ժամանակով 17:54:45-ին: Սա հաստատում է միայն պրեպրինտի գոյությունն ու գրանցման ժամանակը, բայց ինքնին չի փաստում բենչմարքի բովանդակությունը, նշված գրախոսումը, հասանելիությունը կամ արդյունավետությունը գնահատման այլ մեթոդների համեմատ: [1]
06
Ինչու պետք է տարբերակել առաջարկը փաստերից
Թարգմանչական համակարգեր գնահատող մասնագետների համար կոնկրետ սխալների վրա կենտրոնացող այս մոտեցումը կարող է ուշագրավ լինել: Սակայն գործնական կիրառումը կախված է այն մանրամասներից, որոնք բացակայում են տրամադրված գրառման մեջ՝ օրինակների և կանոնների հասանելիություն, արտոնագրում, լեզվական ու մոդալ ծածկույթ, նոր տվյալների ներկայացման կարգ և համեմատական արդյունքներ: Քանի դեռ դրանք հնարավոր չէ ուսումնասիրել, LTB-ն ճիշտ է դիտարկել որպես հեղինակների առաջարկած պրեպրինտ-բենչմարք, այլ ոչ թե անկախ ստուգված ստանդարտ: Սկզբնաղբյուրի գրառումը հասանելի է https://arxiv.org/abs/2609.04173v1 հասցեով: [1]
07
Ինչ պետք է ստուգել օգտագործելուց առաջ
arXiv-ի գրանցումը փաստում է միայն պրեպրինտի առկայությունն ու հեղինակների առաջարկը, սակայն չի պարունակում բենչմարքի անկախ ստուգման տվյալներ: [1]
- 01
Բենչմարքը որպես գնահատման ստանդարտ ընդունելուց առաջ ծանոթացեք arXiv-ի սկզբնական գրառմանը և հասանելիության դեպքում՝ կցված հոդվածին: [1]
- 02
Ստուգեք տվյալների շտեմարանի (dataset) տեղակայումը, արտոնագիրը, հասանելիության պայմաններն ու նոր օրինակներ ներկայացնելու կարգը, որոնք նշված չեն arXiv-ի այս գրառման մեջ: [1]
- 03
Եզրակացություններ անելուց առաջ պարզեք բենչմարքում ընդգրկված լեզուները, օրինակների քանակը, փորձարկված համակարգերն ու համեմատական արդյունքները, քանի որ ներկայացված աղբյուրում այդ մանրամասները բացակայում են: [1]
08
Այս թողարկման սահմանափակումները
Տրամադրված տեղեկությունը հիմնված է arXiv-ի մեկ պրեպրինտի վրա: Այն չի փաստում հոդվածի գրախոսված լինելը և անկախ աղբյուրներով չի ստուգում հեղինակների պնդումները բերված օրինակների, դրանց գրախոսման կամ մոդելների սխալների վերաբերյալ: [1]
Նշված էջում առկա չեն շտեմարանի տեղակայման հասցեն, արտոնագիրը, հասանելիության պայմանները կամ նոր օրինակներ ներկայացնելու ընթացակարգը: [1]
Աղբյուրում բացակայում են օրինակների քանակի, ներառված լեզուների, փորձարկված համակարգերի կամ համեմատական էմպիրիկ արդյունքների վերաբերյալ տվյալները: [1]
SRC
Աղբյուրների բաժին
Ուղիղ հղումներ այս ընտրանու հիմքում եղած նյութերին: Աղբյուրը տեսնելը նույնքան կարևոր է, որքան սինթեզն ընթերցելը:
Շարունակել ընթերցումը
30 օգս, 2026 թ.
WikiSkill-ն առաջարկում է գիտելիքի կայուն շերտ AI գործակալների հմտությունների զարգացման համար
WikiSkill-ը arXiv-ի նախատպվածք է, որի հեղինակներն առաջարկում են AI գործակալների աշխատանքային փորձը համախմբել կայուն վիքիում, որն այնուհետև կուղղորդի հմտությունների թարմացումը: Նրանք նշում են համեմատվող մեթոդների և ելակետային տարբերակների նկատմամբ գրանցված առավելությունների, մեծ մոդելներում ավելի նկատելի օգուտների, առանց հմտությունների մեծ մոդելներին գերազանցող հմտություններով փոքր մոդելների և միջմոդելային փոխանցման մասին, որտեղ այլ մոդելի հմտությունները կարող են գերազանցել ինքնուրույն զարգացրածներին: Առկա ամփոփագրում բացակայում են այդ պնդումները հաստատելու համար անհրաժեշտ գնահատման մանրամասներն ու անկախ ստուգումը:
3 սեպ, 2026 թ.
Նախատպագիր հոդվածը նկարագրում է ամփոփագրերի սխալներից մինչև LLM գնահատական տանող երկփուլ ուղին
Նախատպագիր հոդվածը հայտնում է, որ ամփոփագրեր գնահատող երկու մոդել attention-ի սկզբնական շերտերն օգտագործում են սխալների ազդանշանները համեմատելու և ուղղորդելու համար, որից հետո MLP-ի ավելի բարձր շերտերն այդ ազդանշանները միավորում են գնահատականների մեջ։ Llama-3-8B հիմնային ստուգիչ մոդելը պահպանել է ուղղորդումն ու բյուրեղացումը, սակայն ոչ նույն փուլային տարանջատումը․ հեղինակներն այս տարբերությունը վերագրում են լրացուցիչ ուսուցման կոնկրետ հետևանքներին։ Այս արդյունքները հեղինակային պնդումներ են կոնկրետ մոդելների համար և տրամադրված նյութերում անկախ ստուգում չեն անցել։
18 օգս, 2026 թ.
2026 թ. AI Index-ը՝ ինը կարևոր ազդակով
Փաստերի վրա հիմնված ուղեցույց՝ հնարավորությունների, ներդրման, կրթության և ենթակառուցվածքների փոփոխությունների մասին՝ չափման սահմանափակումների հաշվառմամբ: