O czym jest ten film
- Callum z kanału Wanderloots rozbudowuje badacza — jednego z trzech agentów pracujących w jego zespole Hermes. Zamiast dodawać boty, ulepsza rolę, od której zależy jakość dalszej pracy.
- Wprowadza trzy umiejętności: metodykę badawczą, odczyt własnej biblioteki Zotero oraz wyszukiwanie publikacji naukowych w Consensus.
- Metodyka pozwala badać literaturę naukową, bieżącą praktykę albo zestawiać oba rodzaje źródeł w jednym raporcie.
- Badacz zbiera materiał, koordynator sprawdza jego jakość, a bibliotekarz odpowiada za włączenie zaakceptowanej wiedzy do wiki. Człowiek zachowuje prawo decyzji.
- Tematem próby jest zatruwanie pamięci agentów. Pierwsze wyszukiwanie w Zotero pomija istotną pracę; szersze zapytanie przynosi lepsze wyniki.
- Połączenie z Consensus przez MCP działa w teście, lecz zasady badacza wymagają sprawdzenia oryginalnych publikacji przed oparciem na nich twierdzeń. Consensus sponsoruje odcinek.
- Pokaz kończy się dodaniem hasła do wiki. Autor przyznaje, że proces nadal wymaga ręcznego uruchamiania kolejnych etapów, i zapowiada usprawnienie współpracy agentów.
10 najważniejszych takeaways — z kontekstem zastosowania
{Informacja dodatkowa: zalecenia w polach „Jak stosować” i zastrzeżenia w polach „Na co uważać” są redakcyjnym rozwinięciem pokazu, nie cytatami ani dodatkowymi wynikami testów Calluma.}
1.Najpierw dopracuj rolę, od której zależą pozostali
Na czym polega: Callum wybiera badacza, ponieważ jego raporty trafiają do koordynatora, a następnie zasilają pracę bibliotekarza. Więcej botów nie musi oznaczać lepszego zespołu.
Jak stosować: W istniejącym zespole sprawdzić, czy problemem jest brak wykonawcy, czy słaba jakość materiału przekazywanego dalej. W drugim przypadku zacząć od metody pracy i źródeł tego wykonawcy.
Na co uważać: Film pokazuje jeden przykład rozbudowy. Nie dowodzi, że podobna zmiana poprawi każdy zespół lub każde zadanie.
2.Zapisz sposób prowadzenia badań jako umiejętność
Na czym polega: Nowa umiejętność porządkuje wybór źródeł, pracę z przypisami i przygotowanie raportu. Oferuje podejście zrównoważone, naukowe, skupione na bieżącej praktyce oraz łączone.
Jak stosować: Do pytania o stan badań wybrać literaturę naukową; do pytania o obecne rozwiązania — dokumentację i oficjalne materiały. Przy porównaniu teorii z praktyką rozdzielić te poszukiwania, a potem zestawić ustalenia.
Na co uważać: Sama nazwa trybu nie świadczy o jakości badania. Raport powinien pokazywać wykorzystane źródła, rozbieżności i ograniczenia.
3.Poproś agenta o wyjaśnienie nowej procedury
Na czym polega: Po włączeniu umiejętności autor pyta badacza, jak z niej korzystać. Otrzymuje opis trybów oraz zalecenia: konkretne pytanie, pierwszeństwo oryginalnych źródeł i poszukiwanie dowodów podważających wstępną tezę.
Jak stosować: Przed pierwszym zadaniem ustalić z agentem, czego potrzebuje, jak przygotuje wynik i komu ma go przekazać.
Na co uważać: Taki opis jest deklaracją sposobu pracy. Działanie dostępu do źródeł trzeba sprawdzić osobno, tak jak robi to Callum przy kolejnych integracjach.
4.Oddziel zbieranie materiału od zapisu do wiki
Na czym polega: Badacz nie ma włączonej umiejętności zapisu do LLM wiki, czyli bazy powiązanych notatek wykorzystywanej przez agentów. Przygotowuje raport, koordynator go ocenia, a bibliotekarz prowadzi proces przyjęcia materiału.
Jak stosować: Jasno określić, kto bada, kto kontroluje i kto może zmieniać bazę uznawaną za wiarygodną. Zachować osobną decyzję człowieka o przyjęciu treści.
Na co uważać: Wyłączenie umiejętności porządkuje rolę agenta; sam film nie wykazuje, że stanowi to techniczną blokadę wszystkich możliwych sposobów zapisu.
5.Chroń istniejącą bibliotekę przy pierwszej integracji
Na czym polega: Dostęp badacza do Zotero jest tylko do odczytu. Autor nie chce, by testy naruszyły zbiór bibliograficzny, który buduje od lat; rozszerzenie możliwości zapisu pozostawia na przyszłość.
Jak stosować: Przy podłączaniu własnego archiwum zacząć od wyszukiwania i pobierania materiałów, bez powierzania agentowi ich modyfikacji.
Na co uważać: Brak zapisu nie oznacza braku dostępu do treści. Zakres materiałów udostępnionych do odczytu również wymaga świadomej decyzji.
6.Wykorzystaj źródła zgromadzone wcześniej
Na czym polega: Badacz łączy się z lokalnym Zotero, wyszukuje pozycje i zapisuje kopie materiałów w przestrzeni badawczej. Dołączone skrypty sprawdzają spójność danych. W konfiguracji autora Zotero działa na komputerze, a agent w Dockerze.
Jak stosować: Zlecenie badawcze rozpocząć od sprawdzenia własnej bibliografii. Zachować pochodzenie pobranych materiałów, aby później odróżnić je od nowych znalezisk.
Na co uważać: Sprawdzenie spójności danych nie jest oceną prawdziwości publikacji. Działające połączenie z biblioteką także nie przesądza o kompletności wyszukiwania.
7.Gdy brakuje znanego źródła, popraw zapytanie
Na czym polega: Pierwsza próba znajduje „Poison Once, Exploit Forever”, lecz pomija „Hijacking Agent Memory”. Autor wskazuje, że agent przeszukiwał tytuły. Późniejsze szukanie prac o pamięci, zawężone do zagrożeń, odnajduje więcej istotnych pozycji.
Jak stosować: Porównać wyniki z publikacją, o której wiadomo, że jest w zbiorze. Jeśli jej brakuje, poszerzyć zakres wyszukiwania lub zacząć od ogólniejszego pojęcia.
Na co uważać: Nie chodzi o dosłowne szukanie polskiej „trucizny”. Tematem jest memory poisoning — zatruwanie pamięci agentów — a różne prace mogą opisywać to zagrożenie innymi słowami.
8.Sprawdź połączenie z narzędziem na małym zadaniu
Na czym polega: Callum dodaje Consensus do profilu badacza przez MCP, uwierzytelnia połączenie i uruchamia wyszukiwanie. Test zwraca dwadzieścia prac, potwierdzając dostęp do serwisu.
Jak stosować: Zanim integracja stanie się częścią większego procesu, wykonać ograniczone zapytanie i obejrzeć zwrócone pozycje.
Na co uważać: Liczba wyników potwierdza działanie wyszukiwania, nie jakość ani kompletność przeglądu literatury. Prezentacja Consensus jest częścią sponsorowanego materiału.
9.Streszczenie prowadzi do źródła, ale go nie zastępuje
Na czym polega: Umiejętność korzystania z Consensus traktuje streszczenia jako pomoc w odnajdywaniu publikacji. Wymaga zachowania metadanych i ograniczeń wyszukiwania oraz zajrzenia do oryginalnej pracy przed sformułowaniem twierdzenia.
Jak stosować: W raporcie oddzielić znalezione pozycje od źródeł rzeczywiście sprawdzonych. Wnioski oprzeć na tych drugich.
Na co uważać: Film przedstawia wymaganą procedurę, ale nie pokazuje pełnego audytu każdej publikacji użytej w raporcie. Sam autor mówi, że musi dokładniej przeczytać wynik.
10.Kontroluj również pochodzenie materiałów
Na czym polega: Koordynator ocenia raport wysoko, lecz prosi o dokładniejsze wskazanie, co pochodzi z Consensus, a co z Zotero. Callum, oszczędzając czas, akceptuje raport bez pokazania wykonania tych poprawek. Bibliotekarz przygotowuje potem osobną propozycję wpisu do zatwierdzenia.
Jak stosować: W przeglądzie raportu sprawdzać nie tylko wnioski, lecz także drogę od źródła do notatki. Propozycję wpisu rozpatrywać oddzielnie od zgody na dalsze przetwarzanie raportu.
Na co uważać: W tym pokazie człowiek świadomie łagodzi wymagania kontroli. Nie należy opisywać wyniku jako materiału, który przeszedł wszystkie zgłoszone poprawki.
Omówienie materiału
Trzy dodatki do jednego badacza
Callum wraca do zespołu złożonego z badacza, koordynatora i bibliotekarza. Badacz z poprzedniego odcinka miał określoną osobowość oraz podstawowe umiejętności prowadzenia poszukiwań i pracy ze źródłami. Teraz otrzymuje bardziej szczegółową procedurę, dostęp do własnego archiwum autora i narzędzie do odkrywania literatury naukowej. Sens tego zestawu polega na połączeniu trzech perspektyw: tego, co już zgromadzono, tego, co mówią badania, i tego, jak obecnie działają narzędzia oraz organizacje.
Umiejętności trafiają do profilu badacza, a nie do wszystkich agentów. Pierwsza opisuje metodykę: wybór podejścia badawczego, posługiwanie się źródłami, sporządzenie czytelnego raportu i przekazanie wyniku. Korzysta przy tym z istniejącej umiejętności obsługi przypisów. Badacz nie ma sam przyjmować treści do wiki — to zadanie bibliotekarza, poprzedzone kontrolą koordynatora i decyzją użytkownika.
Własna bibliografia i nowe publikacje
Zotero daje dostęp do materiałów, które Callum zebrał wcześniej. Autor włącza lokalną komunikację z aplikacją i sprawdza połączenie z agentem pracującym w kontenerze. Ograniczenie do odczytu jest celowe: eksperyment nie ma zmieniać wieloletniej biblioteki. Skrypty towarzyszące umiejętności pobierają materiały, zapisują je w przestrzeni roboczej i sprawdzają spójność danych.
Pierwszy test od razu ujawnia ograniczenie. Badacz odnajduje jedną trafną publikację, ale pomija drugą, znaną autorowi. Wyszukiwanie obejmowało tytuły i okazało się zbyt wąskie. W późniejszym zadaniu Callum prosi o wyszukanie materiałów o pamięci, a następnie wybranie prac dotyczących zagrożeń. Ten sposób przynosi więcej przydatnych wyników.
Consensus rozszerza poszukiwania poza prywatny zbiór. Po uwierzytelnieniu połączenia przez MCP badacz otrzymuje wyniki testowego zapytania. Autor podkreśla jednak różnicę między odkryciem publikacji a użyciem jej jako dowodu: streszczenie ma kierować do pracy, a nie zastępować jej lekturę. Odcinek jest sponsorowany przez Consensus, więc prezentację możliwości serwisu trzeba czytać także w tym kontekście.
Od raportu do zaakceptowanego hasła
Na czacie grupowym Callum poleca koordynatorowi zlecić badaczowi raport łączący literaturę naukową z bieżącą praktyką. Pytanie dotyczy organizacji systemów agentowych tak, by ograniczyć ryzyko zatruwania pamięci. Po około pięciu minutach badacz przekazuje raport do oceny. To czas wskazany dla tego etapu pokazu, nie całego procesu przyjęcia wpisu do wiki.
W dokumencie pojawiają się przypisy, kontrargumenty, niepewności i otwarte pytania. Autor pozytywnie ocenia układ raportu, zaznaczając, że potrzebuje dokładniejszej lektury. Koordynator zgłasza uwagi dotyczące pochodzenia materiałów. Callum zgadza się z nimi, lecz uznaje raport za wystarczający na potrzeby demonstracji i uruchamia przegląd wiki bez pokazania realizacji tych korekt. Kontrola koordynatora już się odbyła — skrótem jest pominięcie poprawek, a nie akceptacja przed zakończeniem kontroli.
Bibliotekarz najpierw przygotowuje propozycję ze statusem wymagającym przeglądu. Użytkownik może ją przyjąć, odrzucić, skierować do zmian albo odłożyć. Dopiero później w wiki pojawia się hasło o zatruwaniu pamięci, połączone z istniejącymi wpisami i odsyłające do raportu badacza. Rekomendacja raportu — kontrolowanie tego, co trafia do zaufanej bazy — odpowiada wcześniejszej koncepcji autora. Jest to wynik pokazanego badania i jego interpretacja, nie niezależny dowód skuteczności całego systemu zabezpieczeń.
Co pozostaje do dopracowania
Autor otwarcie przyznaje, że musi ręcznie uruchamiać kolejne etapy. Cykliczne badania, nadzór nad zmianami, dodatkowe narzędzia sprawdzające oraz wykorzystanie tablicy kanban przedstawia jako dalszy kierunek prac. Nie są one wynikiem tego testu. Najbardziej użyteczny wzorzec z odcinka jest skromniejszy: jeden wyspecjalizowany agent, jasno opisana procedura, rozpoznawalne źródła i osobna decyzja o tym, co zostaje w bazie wiedzy.