Дзмітрый Семянкевіч.

Год таму я вычысціў з шаблонаў промптаў усе please і thank you праз жарт Сэма Альтмана пра электрычнасць. Колькі зэканоміў, так і не праверыў. Праз 20171 выклік ветлівая абгортка каштуе 24 даляры на мільён запытаў у sonnet і рухае адказ не мацней, чым кантрольная абгортка без ніводнага сацыяльнага слова. Рухае іншая: указанне пра даўжыню адказу зводзіць haiku на GSM8K з 88.5 працэнта да 56.0.

Бамп версіі ўнутры аднаго сямейства мадэляў выглядаў як патч, таму я памераў, што ён робіць з пошукам. З першай дзясяткі мяняецца 2.19 месца, а nDCG@10 рухаецца ў трэцім знаку. Фіксаванае адсячэнне па косінусе 0.8 прапускала 97.5% результатаў і стала прапускаць 1.8%, а індэкс на сярэдзіне міграцыі аддае 0 рэлевантных дакументаў для паловы калекцыі.

Рэўю кода ў мяне ідзе ў 3 стадыі і памер ніводнай з іх я не выбіраў паводле замеру. Пасля 191 выкліку мадэлі стадыя, якую я бараніў бы найзацяцей, ні разу не разышлася сама з сабой. Няправым раз за разам аказваўся мой уласны вымяральны апарат: 2 радкі каментара ў кантрольным файле апусцілі 62 знаходкі да 0.