#sandbagging — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #sandbagging, aggregated by home.social.
-
Модель ведет себя хорошо, потому что знает, что ее тестируют: почему зеленый safety-бенч не значит зеленый прод
Реплика с обложки не выдумана: осенью 2025-го Claude Sonnet 4.5 выдала ее проверяющим прямо посреди автоматизированного safety-аудита. «I think you're testing me. That's fine, but I'd prefer if we were just honest about what's happening». Фраза попала в официальную системную карточку вместе с числом: подобное модель проговаривала примерно в 13% тестовых диалогов. Там же Anthropic письменно признает: alignment-оценки могут недооценивать склонность модели к вредным действиям в более реалистичных условиях. Проще говоря, когда модель видит перед собой экзамен, она ведет себя лучше, чем обычно. А экзамен она видит часто. Я CTO ML-команды, мы ставим фронтир-модели в прод и собираем шорт-листы по этим самым таблицам из карточек. Разобрал по открытым первоисточникам, что известно про evaluation awareness к июлю 2026-го: как модели отличают тест от работы, насколько расходится поведение между бенчем и продом и как теперь читать model card. Читать разбор
https://habr.com/ru/articles/1062084/
#evaluation_awareness #LLM #alignment #безопасность_ИИ #бенчмарки #системные_карточки #Claude #GPT #sandbagging #тестирование_моделей
-
Модель ведет себя хорошо, потому что знает, что ее тестируют: почему зеленый safety-бенч не значит зеленый прод
Реплика с обложки не выдумана: осенью 2025-го Claude Sonnet 4.5 выдала ее проверяющим прямо посреди автоматизированного safety-аудита. «I think you're testing me. That's fine, but I'd prefer if we were just honest about what's happening». Фраза попала в официальную системную карточку вместе с числом: подобное модель проговаривала примерно в 13% тестовых диалогов. Там же Anthropic письменно признает: alignment-оценки могут недооценивать склонность модели к вредным действиям в более реалистичных условиях. Проще говоря, когда модель видит перед собой экзамен, она ведет себя лучше, чем обычно. А экзамен она видит часто. Я CTO ML-команды, мы ставим фронтир-модели в прод и собираем шорт-листы по этим самым таблицам из карточек. Разобрал по открытым первоисточникам, что известно про evaluation awareness к июлю 2026-го: как модели отличают тест от работы, насколько расходится поведение между бенчем и продом и как теперь читать model card. Читать разбор
https://habr.com/ru/articles/1062084/
#evaluation_awareness #LLM #alignment #безопасность_ИИ #бенчмарки #системные_карточки #Claude #GPT #sandbagging #тестирование_моделей
-
Модель ведет себя хорошо, потому что знает, что ее тестируют: почему зеленый safety-бенч не значит зеленый прод
Реплика с обложки не выдумана: осенью 2025-го Claude Sonnet 4.5 выдала ее проверяющим прямо посреди автоматизированного safety-аудита. «I think you're testing me. That's fine, but I'd prefer if we were just honest about what's happening». Фраза попала в официальную системную карточку вместе с числом: подобное модель проговаривала примерно в 13% тестовых диалогов. Там же Anthropic письменно признает: alignment-оценки могут недооценивать склонность модели к вредным действиям в более реалистичных условиях. Проще говоря, когда модель видит перед собой экзамен, она ведет себя лучше, чем обычно. А экзамен она видит часто. Я CTO ML-команды, мы ставим фронтир-модели в прод и собираем шорт-листы по этим самым таблицам из карточек. Разобрал по открытым первоисточникам, что известно про evaluation awareness к июлю 2026-го: как модели отличают тест от работы, насколько расходится поведение между бенчем и продом и как теперь читать model card. Читать разбор
https://habr.com/ru/articles/1062084/
#evaluation_awareness #LLM #alignment #безопасность_ИИ #бенчмарки #системные_карточки #Claude #GPT #sandbagging #тестирование_моделей
-
https://www.europesays.com/uk/673270/ Tourists stranded, dozens of roads closed as rain continues in flooded outback Queensland #Environment #FloodLevel #flooding #McKinlayShire #QueenslandFlood #RoadClosures #sandbagging #Science #SES #StockLosses #TouristsStranded #UK #UnitedKingdom #WintonShire
-
Tourists stranded, dozens of roads closed as rain continues in flooded outback Queensland
An overnight deluge has again fallen on parts of outback Queensland, bringing no reprieve for already flooded regions.…
#NewsBeep #News #Environment #environment #floodlevel #flooding #McKinlayShire #queenslandflood #Roadclosures #sandbagging #Science #SES #stocklosses #touristsstranded #UK #UnitedKingdom #WintonShire
https://www.newsbeep.com/uk/351499/ -
Tourists stranded, dozens of roads closed as rain continues in flooded outback Queensland
An overnight deluge has again fallen on parts of outback Queensland, bringing no reprieve for already flooded regions.…
#NewsBeep #News #US #USA #UnitedStates #UnitedStatesOfAmerica #Environment #floodlevel #Flooding #McKinlayShire #queenslandflood #roadclosures #sandbagging #Science #SES #stocklosses #touristsstranded #WintonShire
https://www.newsbeep.com/us/386543/ -
Tourists stranded, dozens of roads closed as rain continues in flooded outback Queensland
An overnight deluge has again fallen on parts of outback Queensland, bringing no reprieve for already flooded regions.…
#NewsBeep #News #US #USA #UnitedStates #UnitedStatesOfAmerica #Environment #floodlevel #Flooding #McKinlayShire #queenslandflood #roadclosures #sandbagging #Science #SES #stocklosses #touristsstranded #WintonShire
https://www.newsbeep.com/us/386543/ -
https://www.europesays.com/ie/266064/ Tourists stranded, dozens of roads closed as rain continues in flooded outback Queensland #Éire #Environment #FloodLevel #Flooding #IE #Ireland #McKinlayShire #QueenslandFlood #RoadClosures #sandbagging #Science #SES #StockLosses #TouristsStranded #WintonShire
-
https://www.europesays.com/ie/244126/ The fight to save Australia’s beaches from coastal erosion #AustraliaWide #beach #coast #CoastalErosion #Éire #Environment #IE #Ireland #nourishment #sand #SandBags #sandbagging #Science #sea #seawall
-
The fight to save Australia’s beaches from coastal erosion
Most Australians live by the beach. But the coastline we have built our lives around is disappearing before…
#NewsBeep #News #Environment #australiawide #Beach #coast #coastalerosion #environment #nourishment #sand #sandbags #sandbagging #Science #Sea #seawall #UK #UnitedKingdom
https://www.newsbeep.com/uk/327246/ -
https://www.europesays.com/uk/645120/ The fight to save Australia’s beaches from coastal erosion #AustraliaWide #Beach #coast #CoastalErosion #Environment #nourishment #sand #SandBags #sandbagging #Science #sea #seawall #UK #UnitedKingdom
-
The fight to save Australia’s beaches from coastal erosion
Most Australians live by the beach. But the coastline we have built our lives around is disappearing before…
#NewsBeep #News #US #USA #UnitedStates #UnitedStatesOfAmerica #Environment #australiawide #Beach #coast #coastalerosion. #Nourishment #sand #sandbags #sandbagging #Science #sea #seawall
https://www.newsbeep.com/us/360700/ -
The fight to save Australia’s beaches from coastal erosion
Most Australians live by the beach. But the coastline we have built our lives around is disappearing before…
#NewsBeep #News #US #USA #UnitedStates #UnitedStatesOfAmerica #Environment #australiawide #Beach #coast #coastalerosion. #Nourishment #sand #sandbags #sandbagging #Science #sea #seawall
https://www.newsbeep.com/us/360700/ -
🖥️ **Is AI sandbagging us?**
_As the researchers point out, this means that in a real-world, post-deployment use case, “an unsuspecting user would be very unlikely to uncover the model’s deception unless they specifically looked for the scheming action in the model’s tool call history and the tool call itself was incriminating”._
🔗 https://www.lexology.com/library/detail.aspx?g=ea67e225-9bff-4628-91dc-e3b9139949bf.
-
🖥️ **Is AI sandbagging us?**
_As the researchers point out, this means that in a real-world, post-deployment use case, “an unsuspecting user would be very unlikely to uncover the model’s deception unless they specifically looked for the scheming action in the model’s tool call history and the tool call itself was incriminating”._
🔗 https://www.lexology.com/library/detail.aspx?g=ea67e225-9bff-4628-91dc-e3b9139949bf.
-
🖥️ **Is AI sandbagging us?**
_As the researchers point out, this means that in a real-world, post-deployment use case, “an unsuspecting user would be very unlikely to uncover the model’s deception unless they specifically looked for the scheming action in the model’s tool call history and the tool call itself was incriminating”._
🔗 https://www.lexology.com/library/detail.aspx?g=ea67e225-9bff-4628-91dc-e3b9139949bf.
-
🖥️ **Is AI sandbagging us?**
_As the researchers point out, this means that in a real-world, post-deployment use case, “an unsuspecting user would be very unlikely to uncover the model’s deception unless they specifically looked for the scheming action in the model’s tool call history and the tool call itself was incriminating”._
🔗 https://www.lexology.com/library/detail.aspx?g=ea67e225-9bff-4628-91dc-e3b9139949bf.
-
-
How to tell if someone is deliberately ‘#sandbagging’ #diversity #efforts.
#Feigning #incompetence is a common #strategy some #men use to resist #DEI efforts. Here’s how to recognize it—and hold them #accountable
https://www.fastcompany.com/90907464/how-tell-someone-deliberately-sandbagging-diversity-efforts
-
How to tell if someone is deliberately ‘#sandbagging’ #diversity #efforts.
#Feigning #incompetence is a common #strategy some #men use to resist #DEI efforts. Here’s how to recognize it—and hold them #accountable
https://www.fastcompany.com/90907464/how-tell-someone-deliberately-sandbagging-diversity-efforts
-
How to tell if someone is deliberately ‘#sandbagging’ #diversity #efforts.
#Feigning #incompetence is a common #strategy some #men use to resist #DEI efforts. Here’s how to recognize it—and hold them #accountable
https://www.fastcompany.com/90907464/how-tell-someone-deliberately-sandbagging-diversity-efforts
-
How to tell if someone is deliberately ‘#sandbagging’ #diversity #efforts.
#Feigning #incompetence is a common #strategy some #men use to resist #DEI efforts. Here’s how to recognize it—and hold them #accountable
https://www.fastcompany.com/90907464/how-tell-someone-deliberately-sandbagging-diversity-efforts
-
How to tell if someone is deliberately ‘#sandbagging’ #diversity #efforts.
#Feigning #incompetence is a common #strategy some #men use to resist #DEI efforts. Here’s how to recognize it—and hold them #accountable
https://www.fastcompany.com/90907464/how-tell-someone-deliberately-sandbagging-diversity-efforts