Slajd, który sklasyfikował rywala

Kierowniczka zakupów we Wrocławiu spędziła marzec na równoległym uruchamianiu Claude i Copilota na tych samych umowach, a potem napisała staranną rekomendację. W lipcu przyjechał zespół handlowy Microsoftu ze slajdem, który rozstrzygał to samo pytanie w jednej linijce: rywal był wolniejszy, mniej dokładny i brakowało mu właściwych integracji bezpieczeństwa. Slajd okazał się szybszy niż test porównawczy, a jego wytworzenie nie kosztowało nic.

Dlaczego to ważne: ta linijka nie wyszła z laboratorium. Wyszła z wewnętrznego spotkania sprzedaży i została napisana po to, żeby ci ją powtórzono.

Co twierdzono i kto to twierdził

Bloomberg doniósł, że Microsoft wykorzystał wewnętrzne spotkanie w tym tygodniu, zapowiedziane jako sesja strategiczna na nowy rok obrotowy, do szkolenia handlowców w niekorzystnym porównywaniu konkurencyjnych produktów sztucznej inteligencji z własnymi. Wymienieni rywale to OpenAI, Google i Anthropic.

Jacob Andreou, wiceprezes wykonawczy odpowiedzialny za Copilota, przedstawił bezpośrednie porównanie z Claude firmy Anthropic i stwierdził, że wewnątrz aplikacji biurowych Microsoftu konkurencyjny model był "wolniejszy i mniej dokładny oraz brakowało mu właściwych integracji bezpieczeństwa". Jay Parikh, również wiceprezes wykonawczy, wręczył handlowcom ich narrację: "Wszyscy inni sprzedają części - my sprzedajemy kompletny system od początku do końca. To jest ta opowieść, którą wszyscy musimy wynieść na zewnątrz i opowiadać w roku obrotowym 27."

Przeczytaj drugi cytat jeszcze raz. To nie jest twierdzenie o wydajności. To instrukcja dotycząca narracji, i wymienia rok obrotowy, któremu ma służyć.

Drugi fakt, który zmienia pierwszy

Osobny raport z tego miesiąca ustalił, że Microsoft usuwa modele OpenAI i Anthropic z kluczowych aplikacji takich jak Word i Excel, zastępując je własnymi, a jako motyw wskazał koszty. Postaw oba fakty obok siebie, a porównanie przestaje wyglądać jak ustalenie produktowe.

Dostawca, który i tak już wymienia cudzy model, żeby chronić własną marżę, ma powód, by klasyfikować ten model nisko, i poinstruował swoich handlowców dokładnie w tym duchu. Klasyfikacja i podmiana wskazują w tę samą stronę, a tą stroną jest linia kosztów Microsoftu, nie twoje obciążenie pracą.

Copilot może naprawdę być lepszy wewnątrz Worda. Nic na tamtym spotkaniu tego nie dowodzi, a strona najbardziej zainteresowana odpowiedzią jest jedyną, która przeprowadziła test.

Tak, ale: każdy dostawca sprzedaje przeciw rywalom

Tak, ale: sprzedaż konkurencyjna nie jest skandalem, a branie jej za skandal to osobny błąd. Materiały handlowe klasyfikują rywali odkąd istnieją kategorie produktowe, a Microsoft ma prawo twierdzić, że zintegrowany system bije stos poskładanych części.

Zmieniła się postać produktu. Kiedy klasyfikowanym obiektem jest model, który twój dostawca zarazem odsprzedaje, hostuje i może podmienić pod twoimi aplikacjami, porównanie przestaje być argumentem sprzedażowym i staje się zapowiedzią tego, który model ostatecznie będziesz uruchamiać, wybrany według cudzej marży.

Cztery pytania, zanim twierdzenie dotrze do oceny

Zapytaj, którą wersję modelu testowano, na jakim zestawie zadań, w jakiej dacie i kto go przeprowadził. Porównanie, któremu brakuje choćby jednej z tych czterech rzeczy, jest ozdobą, a każdy zespół handlowy dostarczy je w jeden dzień, jeśli test faktycznie istnieje.

Potem wyprowadź pytanie całkowicie poza salę konferencyjną. Pracuj dwa tygodnie na własnych dokumentach, własnym wyszukiwaniu informacji i własnym przeglądzie bezpieczeństwa, i sam wystaw ocenę. Jedynym punktem odniesienia, który przeżywa rok obrotowy dostawcy, jest ten przyłożony do twojej własnej pracy.

Wniosek: wprowadź tożsamość modelu do umowy. Nazwij model, zażądaj pisemnego uprzedzenia przed każdą podmianą i trzymaj jedno rozwiązanie zapasowe, które naprawdę przetestowałeś. Prezentacja handlowa jest przepisywana każdego lipca; twoja zależność nie powinna.

Czytaj dalej: Dwaj giganci AI chcą być twoim integratorem  |  Dopasuj poziom modelu do zadania