Тэг: моўныя мадэлі
- У жніўні мой кантроль прачытаў файл 4 з 4. У кастрычніку ён сказаў "файла няма" і меў рацыю
- Claude 5.5 кажа, што ведае свет да чэрвеня 2026. Ніводнага рэлізу з сакавіка 2026 ён не адгадаў
- 2 спісы па 30 тэставых імёнаў ад адной мадэлі Claude супадаюць хаця б адным імем да 98% пар. У Faker 1,29%
- Адно і тое ж пытанне да opus 5 дало 21 розны адказ за 64 выклікі. Я пайшоў шукаць, дзе пачынаецца розніца
- На сярэдзіне апгрэйда палова маёй калекцыі набрала 0
- Haiku 4.5 знайшла ключ 243 разы з 245 у промптах да 96 тысяч токенаў. На ключ, якога не было, яна вярнула значэнне 12 разоў з 20.
- Please каштуе 24 даляры на мільён выклікаў. Гэта нішто. Just the answer каштавала мне 32.5 бала дакладнасці
- 2 радкі каментара ператварылі 62 знаходкі ў 0
- Крытык прапускае 13 з 16 чарнавікоў, якія завальвае механіка
- Мадэль, якая прачытала мае эсэ, вяртае 2 правілы з 16
- Студзеньскі і снежаньскі venv далі GPT-2 тыя ж 20 000 токенаў. Лагіты паміж імі змяніліся
- Flan-T5 адказала на 2000 выклікаў кодам 200 OK і памылілася ў 161 суме з 600
- Мадэль за маімі рэгуляркамі для выпісак ператварыла 300 гучных збояў у 249 ціхіх памылак
- Flan-T5 правільна прачытала 1393 радкі рахункаў з 1413 і правільна падлічыла вынік 1 рахунку з 400
- GPT-3 чытае беларускую ў 6,5 раза даражэй за англійскую
- Я задаў сваім нататкам 15 пытанняў без адказу і атрымаў 13 адказаў
- Найбольшая мадэль эмбедынгаў OpenAI каштуе ў 75 разоў даражэй за найменшую і прайгравае на ArguAna мадэлі на 22 мільёны параметраў
- Я прымусіў GPT-2 трымацца схемы JSON, а з USD 11,113.79 выйшла 11
- Я дадаў "none of the above" і мадэль адмаўлялася гэтак жа часта, але на трэці пытанняў адказ памяняўся
- Я папрасіў GPT-2 распісаць рашэнне, а яна паверыла сваёй няправільнай арыфметыцы
- Я праверыў парады па промптах на GPT-2 і парадак прыкладаў аказаўся важнейшым за іх усе
- Чат-бот назваў Маскву сталіцай Ганы і на пытанне, ці ўпэўнены ён, адказаў "так"
- Я навучыў мадэль узнагароды на 16 000 галасоў з Reddit. Даўжыню яна любіць больш, чым самі тыя, хто галасаваў