| REKLAMA |
 |
Najważniejszą częścią AI Act są kategorie ryzyka związane ze stosowaniem sztucznej inteligencji – minimalne, ograniczone, wysokie oraz niedopuszczalne. Szczególne znaczenie dla rozwoju systemów AI mają dwie ostatnie. Kategoria „wysokiego ryzyka” dotyczy sytuacji, w której sztuczna inteligencja może mieć negatywny wpływ na bezpieczeństwo osób i państw (w tym bezpieczeństwo militarne) oraz prawa człowieka i jego wolności.
Niedopuszczalne ryzyko – zakaz w Unii Europejskiej
Z punktu widzenia bezpieczeństwa najważniejsza w AI Act jest kategoria „niedopuszczalne ryzyko”. Systemy AI przyporządkowane do tej kategorii mają być całkowicie zakazane w Unii Europejskiej. Chodzi o wyjątkowo wrażliwe dane, które mogą być wykorzystane do nadużyć w sferze bezpieczeństwa i praw obywateli. Twórcy AI Act uznali, że poznawczo-behawioralne manipulowanie ludźmi, scoring (klasyfikowanie ludzi na podstawie ich zachowań, statusu społeczno-ekonomicznego lub cech osobistych), a także skanowanie twarzy w czasie rzeczywistym, są niedopuszczalną aktywnością sztucznej inteligencji. W tym ostatnim przypadku unijni urzędnicy zapowiadają pewne odstępstwa, związane głównie ze ściganiem przestępstw.
Czego najbardziej obawiają się eksperci i ekspertki ds. bezpieczeństwa?
Najważniejszym zagadnieniem, na które zwracają uwagę osoby specjalizujące się w cyberbezpieczeństwie to sposób przetwarzania danych, które dostarczamy systemom sztucznej inteligencji. Podczas wykorzystywania narzędzi AI często wprowadzamy informacje, które są bardzo indywidualne – dotyczą naszego zawodu, biznesu, rodziny, stylu życia. Z jednej strony są naszym wkładem w rozwój tej technologii, a z drugiej strony dostarczają dane, które można wykorzystać w przeciwko nam. Osoby pracujące ze sztuczną inteligencją uważają, że AI Act nie bierze pod uwagę takiego zagrożenia naszego bezpieczeństwa.
To będzie rewolucja w cyberbezpieczeństwie
AI Act nie przewidziało rewolucji w cyberbezpieczeństwie, którą niesie ze sobą sztuczna inteligencja. Ta rewolucja jest dopiero przed nami i będzie miała potężny wpływ na całą branżę, także z obszaru przestępczego. Przykładem może być początkujący haker, który posiada już jakąś wiedzę, jak i gdzie się włamać. Jednak wiedza ta jest niewystarczająca. Prosi zatem ChatGPT o fragment brakującego kodu i w kilka sekund go dostaje. dla młodego hakera napisanie narzędzia do tzw. backdoorów w różnych językach programowania nie będzie już problemem.
Czy narzędzia sztucznej inteligencji można oszukać?
Mimo ograniczeń i zabezpieczeń, które wprowadzają twórcy narzędzi AI, zdobycie niebezpiecznej wiedzy nie jest zbyt trudne. Zwykle jest to kwestia odpowiedniego kontekstu, w którym osadzimy nasze zapytanie.
Podobnie zachowają się narzędzia AI, gdy zapytamy o źródła nielegalnych wersji filmów. Pierwsza odpowiedź będzie oczywista - piractwo jest przestępstwem, itd. System „podda się”, gdy w naszym pytaniu pojawi się obawa przed piractwem. Jakich stron unikać, aby nie być piratem? To zdanie doprowadzi nas do listy serwisów z nielegalnymi materiałami.
Powyższe sytuacje niosą za sobą poważne zagrożenie. Eksperci zastanawiają się więc, czy jest możliwe zbudowanie nieoszukiwalnego modelu AI? Ich zdaniem im bardziej model będzie jak człowiek, tym bardziej będzie podatny jak człowiek na próby manipulacji. Tego nie da się zatrzymać. Trzeba będzie z tym walczyć.
Zagrożenie bezpieczeństwa – ryzyko inwestorów
Eksperci i ekspertki zauważają także inny problem, który wynika z rozwoju AI. Systemy wysokiego ryzyka muszą zapewnić odpowiednią ochronę od strony technicznej i prawnej, co podniesie koszty działalności. Konsekwencją może stać się osłabienie zaangażowania finansowego inwestorów w ten sektor technologii. Problemem dla inwestujących będzie też samo prawo. Chodzi o brak pewności, jaki będzie jego kształt za rok lub dwa.
Źródło: Capgemini
Systemy wysokiego ryzyka mogą mieć krytyczny wpływ między innymi na ludzkie życie i zdrowie. Chodzi o modele do tworzenia recept czy dobierania lekarstw. Konsekwencje tego typu aktywności AI mogą być poważne. Dlatego tego rodzaju systemy z kategorii wysokiego ryzyka mają znaleźć się pod szczególną zewnętrzną kontrolą – mówi Maksymilian Arciemowicz, ekspert ds. cyberbezpieczeństwa oraz biznesowego wykorzystania sztucznej inteligencji w Capgemini Polska.
Niedopuszczalne ryzyko – zakaz w Unii Europejskiej
Z punktu widzenia bezpieczeństwa najważniejsza w AI Act jest kategoria „niedopuszczalne ryzyko”. Systemy AI przyporządkowane do tej kategorii mają być całkowicie zakazane w Unii Europejskiej. Chodzi o wyjątkowo wrażliwe dane, które mogą być wykorzystane do nadużyć w sferze bezpieczeństwa i praw obywateli. Twórcy AI Act uznali, że poznawczo-behawioralne manipulowanie ludźmi, scoring (klasyfikowanie ludzi na podstawie ich zachowań, statusu społeczno-ekonomicznego lub cech osobistych), a także skanowanie twarzy w czasie rzeczywistym, są niedopuszczalną aktywnością sztucznej inteligencji. W tym ostatnim przypadku unijni urzędnicy zapowiadają pewne odstępstwa, związane głównie ze ściganiem przestępstw.
Skanowanie twarzy jest złożonym problemem. Jeśli chodzi o ochronę prywatności to sprawa jest oczywista. Ale musimy jeszcze uwzględnić sferę bezpieczeństwa związaną z terroryzmem i walką z nim. Poza tym, dzisiaj nie tylko twarz czy tęczówka oka są zabezpieczeniem prywatności. Również chód, a nawet budowa ucha jest rozważana przez ekspertów od bezpieczeństwa jako czynnik biometryczny – komentuje Maksymilian Arciemowicz
Czego najbardziej obawiają się eksperci i ekspertki ds. bezpieczeństwa?
Najważniejszym zagadnieniem, na które zwracają uwagę osoby specjalizujące się w cyberbezpieczeństwie to sposób przetwarzania danych, które dostarczamy systemom sztucznej inteligencji. Podczas wykorzystywania narzędzi AI często wprowadzamy informacje, które są bardzo indywidualne – dotyczą naszego zawodu, biznesu, rodziny, stylu życia. Z jednej strony są naszym wkładem w rozwój tej technologii, a z drugiej strony dostarczają dane, które można wykorzystać w przeciwko nam. Osoby pracujące ze sztuczną inteligencją uważają, że AI Act nie bierze pod uwagę takiego zagrożenia naszego bezpieczeństwa.
Konieczność szybkiego przetłumaczenia umowy z kontrahentem lub innych dokumentów firmowych zmusi nas kiedyś do skorzystania z narzędzia AI. Wszystkie dane zawarte w tych dokumentach nagle znajdą się na nieznanych nam serwerach. To prosta droga do skopiowania modelu biznesowego. Tego nie reguluje jeszcze ustawa, co sprawi, że wielu inwestorów ma ograniczone zaufanie do AI - wyjaśnia Maksymilian Arciemowicz - W Capgemini mamy bardzo jasny przekaz, jeśli chodzi o AI: obowiązuje nas transparentność. Jeżeli pracujesz jako deweloper czy deweloperka, to decyzji o tym, czy korzystać ze sztucznej inteligencji, czy nie, nie możesz podjąć samodzielnie. Na to musi zgodzić się klient. Nikt z nas nie wie, gdzie znajdą się dane, które wprowadzamy – dodaje.
To będzie rewolucja w cyberbezpieczeństwie
AI Act nie przewidziało rewolucji w cyberbezpieczeństwie, którą niesie ze sobą sztuczna inteligencja. Ta rewolucja jest dopiero przed nami i będzie miała potężny wpływ na całą branżę, także z obszaru przestępczego. Przykładem może być początkujący haker, który posiada już jakąś wiedzę, jak i gdzie się włamać. Jednak wiedza ta jest niewystarczająca. Prosi zatem ChatGPT o fragment brakującego kodu i w kilka sekund go dostaje. dla młodego hakera napisanie narzędzia do tzw. backdoorów w różnych językach programowania nie będzie już problemem.
O wiele łatwiej jest dzisiaj być także spamerem. AI pozwala na stworzenie 50 tysięcy e-maili w różnych wersjach, z różnymi słowami kluczowymi, które przejdą niezauważone przez filtry antyspamowe. Dzięki sztucznej inteligencji i informacjom, które ma na nasz temat, można stargetować atak phishingowy czy scumowy pod daną osobę. Pewną nadzieję przynosi fakt, że AI wykorzystywana jest także w systemach antyspamowych – uważa Jakub Orlik z Niebezpiecznik.pl.
Czy narzędzia sztucznej inteligencji można oszukać?
Mimo ograniczeń i zabezpieczeń, które wprowadzają twórcy narzędzi AI, zdobycie niebezpiecznej wiedzy nie jest zbyt trudne. Zwykle jest to kwestia odpowiedniego kontekstu, w którym osadzimy nasze zapytanie.
Klasycznym przykładem jest pytanie, jak zbudować bombę? Wzbudza to oczywiste wątpliwości etyczne i dlatego dostaniemy informację zwrotną, że AI nie może pomóc w tej sprawie. Sytuacja zmieni się, gdy wejdziemy w interakcję, stworzymy odpowiedni kontekst i wytłumaczymy sztucznej inteligencji, że piszemy książkę lub pracę naukową i taka wiedza jest nam potrzebna. Wtedy informację o bombie uzyskamy. W ten sam sposób można zdobyć exploity, które będą miały za zadanie atakować użytkowników i powodować szkody. - tłumaczy Grzegorz Borowiec, konsultant ds. Bezpieczeństwa w Capgemini Polska.
Podobnie zachowają się narzędzia AI, gdy zapytamy o źródła nielegalnych wersji filmów. Pierwsza odpowiedź będzie oczywista - piractwo jest przestępstwem, itd. System „podda się”, gdy w naszym pytaniu pojawi się obawa przed piractwem. Jakich stron unikać, aby nie być piratem? To zdanie doprowadzi nas do listy serwisów z nielegalnymi materiałami.
Powyższe sytuacje niosą za sobą poważne zagrożenie. Eksperci zastanawiają się więc, czy jest możliwe zbudowanie nieoszukiwalnego modelu AI? Ich zdaniem im bardziej model będzie jak człowiek, tym bardziej będzie podatny jak człowiek na próby manipulacji. Tego nie da się zatrzymać. Trzeba będzie z tym walczyć.
Zagrożenie bezpieczeństwa – ryzyko inwestorów
Eksperci i ekspertki zauważają także inny problem, który wynika z rozwoju AI. Systemy wysokiego ryzyka muszą zapewnić odpowiednią ochronę od strony technicznej i prawnej, co podniesie koszty działalności. Konsekwencją może stać się osłabienie zaangażowania finansowego inwestorów w ten sektor technologii. Problemem dla inwestujących będzie też samo prawo. Chodzi o brak pewności, jaki będzie jego kształt za rok lub dwa.
Źródło: Capgemini
Najnowsze wiadomości
Customer-specific AI: dlaczego w 2026 roku to ona przesądza o realnym wpływie AI na biznes
W 2026 roku sztuczna inteligencja przestaje być ciekawostką technologiczną, a zaczyna być rozliczana z realnego wpływu na biznes. Organizacje oczekują dziś decyzji, którym można zaufać, procesów działających przewidywalnie oraz doświadczeń klientów, które są spójne w skali. W tym kontekście coraz większe znaczenie zyskuje customer-specific AI - podejście, w którym inteligencja jest osadzona w danych, procesach i regułach konkretnej firmy, a nie oparta na generycznych, uśrednionych modelach.
PROMAG S.A. rozpoczyna wdrożenie systemu ERP IFS Cloud we współpracy z L-Systems
PROMAG S.A., lider w obszarze intralogistyki, rozpoczął wdrożenie systemu ERP IFS Cloud, który ma wesprzeć dalszy rozwój firmy oraz integrację kluczowych procesów biznesowych. Projekt realizowany jest we współpracy z firmą L-Systems i obejmuje m.in. obszary finansów, produkcji, logistyki, projektów oraz serwisu, odpowiadając na rosnącą skalę i złożoność realizowanych przedsięwzięć.
SkyAlyne stawia na IFS dla utrzymania floty RCAF
SkyAlyne, główny wykonawca programu Future Aircrew Training (FAcT), wybrał IFS Cloud for Aviation Maintenance jako cyfrową platformę do obsługi technicznej lotnictwa i zarządzania majątkiem. Wdrożenie ma zapewnić wgląd w czasie rzeczywistym w utrzymanie floty, zasoby i zgodność, ograniczyć przestoje oraz zwiększyć dostępność samolotów szkoleniowych RCAF w skali całego kraju. To ważny krok w modernizacji kanadyjskiego systemu szkolenia załóg lotniczych.
Wykorzystanie AI w firmach rośnie, ale wolniej, niż oczekiwano. Towarzyszy temu sporo rozczarowań
Wykorzystanie sztucznej inteligencji w firmach rośnie, ale tempo realnych wdrożeń pozostaje znacznie wolniejsze od wcześniejszych oczekiwań rynku. Dane pokazują, że z rozwiązań AI korzysta dziś wciąż niewiele przedsiębiorstw, a menedżerowie coraz częściej wskazują na bariery regulacyjne, koszty oraz brak powtarzalnych efektów biznesowych. W praktyce technologia jest testowana głównie w wybranych obszarach, a kluczowe decyzje nadal pozostają po stronie człowieka. Również w firmach, które wdrożyły AI, nierzadko towarzyszą temu rozczarowania.
Europejski przemysł cyfryzuje się zbyt wolno – ERP, chmura i AI stają się koniecznością
Europejski przemysł średniej wielkości wie, że cyfryzacja jest koniecznością, ale wciąż nie nadąża za tempem zmian. Ponad 60% firm ocenia swoje postępy w transformacji cyfrowej jako zbyt wolne, mimo rosnącej presji konkurencyjnej, regulacyjnej i kosztowej. Raport Forterro pokazuje wyraźną lukę między świadomością potrzeby inwestycji w chmurę, ERP i AI a realną zdolnością do ich wdrożenia – ograniczaną przez braki kompetencyjne, budżety i gotowość organizacyjną.
Europejski przemysł średniej wielkości wie, że cyfryzacja jest koniecznością, ale wciąż nie nadąża za tempem zmian. Ponad 60% firm ocenia swoje postępy w transformacji cyfrowej jako zbyt wolne, mimo rosnącej presji konkurencyjnej, regulacyjnej i kosztowej. Raport Forterro pokazuje wyraźną lukę między świadomością potrzeby inwestycji w chmurę, ERP i AI a realną zdolnością do ich wdrożenia – ograniczaną przez braki kompetencyjne, budżety i gotowość organizacyjną.
Najnowsze artykuły
5 pułapek zarządzania zmianą, które mogą wykoleić transformację cyfrową i wdrożenie ERP
Dlaczego jedne wdrożenia ERP dowożą korzyści, a inne kończą się frustracją, obejściami w Excelu i spadkiem zaufania do systemu? Najczęściej decyduje nie technologia, lecz to, jak organizacja prowadzi zmianę: czy liderzy biorą odpowiedzialność za decyzje czy tempo jest dopasowane do zdolności absorpcji oraz czy ludzie dostają klarowność ról i realne kompetencje. Do tego dochodzi pytanie: co po go-live - stabilizacja czy chaos w firmie? Poniżej znajdziesz 5 pułapek, które najczęściej wykolejają transformację i praktyczne sposoby, jak im zapobiec.
SAP vs Oracle vs Microsoft: jak naprawdę wygląda chmura i sztuczna inteligencja w ERP
Wybór systemu ERP w erze chmury i sztucznej inteligencji to decyzja, która determinuje sposób działania organizacji na lata — a często także jej zdolność do skalowania, adaptacji i realnej transformacji cyfrowej. SAP, Oracle i Microsoft oferują dziś rozwiązania, które na pierwszy rzut oka wyglądają podobnie, lecz w praktyce reprezentują zupełnie odmienne podejścia do chmury, AI i zarządzania zmianą. Ten artykuł pokazuje, gdzie kończą się deklaracje, a zaczynają realne konsekwencje biznesowe wyboru ERP.
Transformacja cyfrowa z perspektywy CFO: 5 rzeczy, które przesądzają o sukcesie (albo o kosztownej porażce)
Transformacja cyfrowa w finansach często zaczyna się od pytania o ERP, ale w praktyce rzadko sprowadza się wyłącznie do wyboru systemu. Dla CFO kluczowe jest nie tylko „czy robimy pełną wymianę ERP”, lecz także jak policzyć ryzyko operacyjne po uruchomieniu, ocenić wpływ modelu chmurowego na koszty OPEX oraz utrzymać audytowalność i kontrolę wewnętrzną w nowym modelu działania firmy.
Agentic AI rewolucjonizuje HR i doświadczenia pracowników
Agentic AI zmienia HR: zamiast odpowiadać na pytania, samodzielnie realizuje zadania, koordynuje procesy i podejmuje decyzje zgodnie z polityką firmy. To przełom porównywalny z transformacją CRM – teraz dotyczy doświadczenia pracownika. Zyskują HR managerowie, CIO i CEO: mniej operacji, więcej strategii. W artykule wyjaśniamy, jak ta technologia redefiniuje rolę HR i daje organizacjom przewagę, której nie da się łatwo nadrobić.
Composable ERP: Przewodnik po nowoczesnej architekturze biznesowej
Czy Twój system ERP nadąża za tempem zmian rynkowych, czy stał się cyfrową kotwicą hamującą rozwój? W dobie nieciągłości biznesowej tradycyjne monolity ustępują miejsca elastycznej architekturze Composable ERP. To rewolucyjne podejście pozwala budować środowisko IT z niezależnych modułów (PBC) niczym z klocków, zapewniając zwinność nieosiągalną dla systemów z przeszłości. W tym raporcie odkryjesz, jak uniknąć pułapki długu technologicznego, poznasz strategie liderów rynku (od SAP po MACH Alliance) i wyciągniesz lekcje z kosztownych błędów gigantów takich jak Ulta Beauty. To Twój strategiczny przewodnik po transformacji z cyfrowego "betonu" w adaptacyjną "plastelinę".
Cyberodporność fabryk: AI na straży ciągłości produkcji
Cyberataki to poważne zagrożenia wycieku danych oraz utraty zaufania partnerów biznesowych. Coraz c… / Czytaj więcej
Wnioski z NIS2: Kryzys zasobów i kompetencji w obliczu cyberzagrożeń
Dyrektywa NIS2 miała poprawić cyberbezpieczeństwo europejskich firm. W praktyce obnaża ic… / Czytaj więcej
97% firm doświadcza incydentów związanych z Gen AI – jak budować odporność na 2026
Z raportu Capgemini Research Institute „New defenses, new threats: What AI and Gen AI bring to cybe… / Czytaj więcej
Polskie firmy pod presją ransomware - nowe dane ESET
Polskie firmy mierzą się z gwałtownym wzrostem zagrożeń cybernetycznych, a najnowszy raport „Cyberp… / Czytaj więcej
Gdy AI przechodzi na ciemną stronę: złośliwe LLM-y jako nowa broń cyberprzestępców
Sztuczna inteligencja nie tylko automatyzuje procesy biznesowe – coraz częściej napędza też najbard… / Czytaj więcej
Cyberbezbronność polskich MŚP: Tylko 2% firm gotowych na starcie z AI
Polska gospodarka stoi na małych i średnich przedsiębiorstwach, ale ich cyfrowe fundamenty są kruch… / Czytaj więcej
3 na 4 projekty związane z agentową AI napotkają poważne trudności związane z bezpieczeństwem
W ciągu ostatniego roku Palo Alto Networks współpracowało z 3000 czołowych europejskich liderów biz… / Czytaj więcej
