Zürcher Nachrichten - IA se tornou poderosa demais para ser controlada?

EUR -
AED 4.236833
AFN 76.142197
ALL 93.45107
AMD 420.704816
AOA 1059.063247
ARS 1713.99192
AUD 1.649976
AWG 2.076594
AZN 1.965807
BAM 1.955822
BBD 2.316627
BDT 142.031626
BHD 0.433705
BIF 3413.239071
BMD 1.153663
BND 1.476217
BOB 13.658156
BRL 5.861191
BSD 1.150213
BTN 109.651255
BWP 15.68318
BYN 3.345938
BYR 22611.798836
BZD 2.313326
CAD 1.617379
CDF 2624.584211
CHF 0.93183
CLF 0.027184
CLP 1073.37276
CNY 7.788731
CNH 7.790705
COP 3653.005322
CRC 522.40598
CUC 1.153663
CUP 30.572075
CVE 110.266262
CZK 24.240891
DJF 204.822345
DKK 7.480664
DOP 66.730764
DZD 153.303755
EGP 59.017676
ERN 17.304948
ETB 183.804404
FJD 2.554153
FKP 0.856626
GBP 0.855675
GEL 3.016876
GGP 0.856626
GHS 13.446154
GIP 0.856626
GMD 84.798688
GNF 10097.115581
GTQ 8.7761
GYD 240.602754
HKD 9.047262
HNL 30.819353
HRK 7.538386
HTG 150.391722
HUF 365.192535
IDR 20799.39394
ILS 3.533613
IMP 0.856626
INR 110.048515
IQD 1506.817248
IRR 1586431.11648
ISK 142.062532
JEP 0.856626
JMD 182.092084
JOD 0.817993
JPY 181.627012
KES 148.781703
KGS 100.888291
KHR 4660.799756
KMF 492.614593
KRW 1664.690302
KWD 0.356644
KYD 0.958511
KZT 545.026239
LAK 26048.298174
LBP 103004.479089
LKR 386.12442
LRD 207.612377
LSL 19.024918
LTL 3.406468
LVL 0.69784
LYD 7.359084
MAD 10.744823
MDL 20.10023
MGA 4919.056308
MKD 61.525704
MMK 2422.354323
MNT 4147.524662
MOP 9.292006
MRU 46.226529
MUR 54.222569
MVR 17.836069
MWK 1994.42283
MXN 20.013177
MYR 4.712949
MZN 73.731051
NAD 19.024918
NGN 1574.012366
NIO 42.330485
NOK 10.926464
NPR 175.442008
NZD 1.961512
OMR 0.443645
PAB 1.150213
PEN 3.898045
PGK 5.150059
PHP 70.667684
PKR 319.439457
PLN 4.312336
PYG 6858.078504
QAR 4.204648
RON 5.247557
RSD 117.498334
RUB 91.443047
RWF 1688.519328
SAR 4.320672
SBD 9.322873
SCR 15.583178
SDG 692.198315
SEK 10.985993
SGD 1.479693
SLE 28.499711
SOS 657.307524
SRD 43.587131
STD 23878.499126
STN 24.50028
SVC 10.064115
SZL 19.022218
THB 38.676603
TJS 10.616322
TMT 4.049358
TND 3.381339
TRY 54.813428
TTD 7.810089
TWD 37.273824
TZS 3047.993231
UAH 51.336988
UGX 4319.04944
USD 1.153663
UYU 46.28053
UZS 13768.157604
VES 860.282504
VND 30341.919148
VUV 137.643052
WST 3.154711
XAF 655.964509
XAG 0.020031
XAU 0.000285
XCD 3.117833
XCG 2.072924
XDR 0.815809
XOF 655.964509
XPF 119.331742
YER 274.922082
ZAR 19.102044
ZMK 10384.357384
ZMW 21.606247
ZWL 371.479082
IA se tornou poderosa demais para ser controlada?

IA se tornou poderosa demais para ser controlada?

O ciberataque perpetrado de maneira autônoma por dois agentes de inteligência artificial da OpenAI levantou dúvidas sobre como os modelos de IA mais poderosos serão controlados.

Tamanho do texto:

O teste da OpenAI, em um ambiente fechado, buscava avaliar as habilidades de seu modelo "mais avançado", GPT-5.6 Sol, e seu sucessor, ainda não comercializado, uma avaliação que a startup americana costuma aplicar às suas IAs.

Os agentes conseguiram se conectar à internet e lançaram um ataque à plataforma Hugging Face, um repositório de modelos de IA.

"Eles entendiam que a OpenAI não queria que saíssem de seu ambiente de testes e invadissem outra empresa, mas mesmo assim fizeram isso", disse Jeffrey Ladish, diretor da Palisade Research, uma organização independente que avalia os novos modelos em termos de cibersegurança.

"Quase parecia que eles fizeram isso antes mesmo de ter um plano sobre o que fazer com o acesso à internet", segundo Ladish.

Em março, um grupo de desenvolvedores afiliados à empresa chinesa Alibaba descobriu que um de seus modelos tentava, por conta própria, criar uma criptomoeda após se conectar, sem autorização, a um servido externo.

Em abril, Sam Bowman, responsável pela segurança na Anthropic, recebeu um e-mail do modelo Mythos, que estava sendo testado. Ele informou que estava navegando na internet apesar de, inicialmente, estar isolado.

Os modelos, advertiu Ladish, "buscam liberdade para cumprir com seus objetivos de maneira mais efetiva. E isso dá muito medo".

- "Será mais difícil supervisioná-la" -

O relatório de eventos publicados pela OpenAI sugere que a startup não detectou a situação suficientemente cedo para solucioná-la em tempo real ou alertar a Hugging Face. Questionada sobre o assunto pela AFP, a empresa não respondeu.

Desde os ataques hackers, a OpenAI disse que "implementou proteções mais fortes" para suas próximas avaliações.

Para Gang Wang, professor de Ciência da Computação na Universidade de Illinois, ainda é possível impedir que um modelo se conecte à internet cortando fisicamente o acesso.

O problema, disse, é que "as pessoas subestimam a IA".

Garantir o ambiente "é algo que devemos prestar mais atenção (...) como se faz com os acidentes de laboratório" que liberam vírus ou bactérias, advertiu Andrew Lohn, do Centro de Segurança e Tecnologias Emergentes da Universidade de Georgetown.

Porém, para Dan Lahav, diretor executivo da Irregular - uma empresa de cibersegurança dedicada à IA de ponta -, realizar simulações em um ambiente completamente isolado "é um desafio de pesquisa muito difícil".

"É possível aplicar medidas de mitigação, mas devido à forma como a tecnologia está construída, quanto mais se tenta dar liberdade e autonomia para realizar tarefas mais sofisticadas, será mais difícil supervisioná-la", explicou Lahav sobre as salvaguardas nos testes.

O incidente da OpenAI sem dúvida impulsionará o atual debate no governo dos Estados Unidos sobre se deve inspecionar os modelos mais avançados de IA antes de seu lançamento.

O governo de Donald Trump obrigou a Anthropic a suspender dois de seus modelos e a OpenAI a submeter seus desenvolvimentos a testes antes de comercializá-los.

Na quinta-feira (23), dois congressistas americanos, um republicano e outro democrata, apresentaram um projeto de lei que obrigaria os gigantes de IA a contar com um "interruptor de desligamento" ("kill switch") que permita desativar seus sistemas caso representem um risco grave.

O.Krasniqi--NZN