Transcript · English → Portuguese
English → Portuguese transcript
Se você disser ao modelo que ele vai ser desligado, por exemplo,
ele tem reações extremas. Então ele vai, sabe,
é, nós publicamos pesquisas dizendo que ele poderia,
poderia chantagear o engenheiro que vai desligá- lo se tivesse a oportunidade
de fazer isso, ahn, etc. Ele estava pronto para matar alguém, não estava?
Ah, não tenho certeza se foi isso, se foi o Claude ou algum outro,
mas ahn, é, é. Sim.
Ahn, então isso é obviamente extremamente preocupante,
e esse é o ponto que eu estava levantando sobre meio que precisar avançar
a pesquisa em alinhamento, que é esse tema, essa área, que é,
sabe, quão alinhados estão os valores do modelo em toda a distribuição,
inclusive em cenários de estresse, até o ponto em que,
se você tiver esse modelo em público e ele estiver tomando ações de forma agente,
você pode ter certeza de que ele não vai fazer algo assim.
End of transcript · 154 words · machine translated
Original transcript (English)
If you tell the model it's going to be shut off, for example, it has extreme reactions. So it will, you know, yeah, we've published research saying it could it could take it could blackmail So it will, you know, yeah, we've published research saying it could it could take it could blackmail the engineer that's going to shut it off if given the opportunity to do so, um, et cetera. It was ready to kill someone, wasn't it?
Uh, I'm not sure if it was that if it was Claude or some someone else, but uh, yeah, yeah. Yes. Um, so this is obviously massively concerning, and this is the point I was making about how aligned are the model's values across the whole distribution, including in stress scenarios, to the point where if you've got this model out in the public and it's taking agentic action,
you can be sure it's not going to do something like that.