Video AI tiến hóa để kích hoạt tối đa các vùng não mục tiêu
(nevo-project.epfl.ch)- NEvo dùng digital twin của não dự đoán phản ứng của các vùng thị giác làm mô hình phần thưởng, rồi tiến hóa các video trong môi trường in silico nhằm tối đa hóa mức kích hoạt dự đoán của một vùng cụ thể
- Biểu diễn chủ thể, ánh sáng, chuyển động và bầu không khí như các gene, rồi lặp lại qua nhiều thế hệ các bước tạo, đánh giá, chọn lọc, lai ghép và đột biến video ứng viên
- Để giảm chi phí tính toán, hệ thống dùng cách tiếp cận 2 giai đoạn: trước tiên tìm ảnh tĩnh mạnh nhất, sau đó khám phá chuyển động riêng để biến nó thành video 2 giây
- Video tổng hợp phù hợp với tính chọn lọc theo từng vùng đã biết, như khuôn mặt ở FFA, địa điểm ở PPA và chuyển động ở MT; đồng thời ghi nhận mức kích hoạt cao hơn video localizer thủ công và các video tự nhiên hàng đầu
- Dọc theo đường dẫn thị giác bên từ V1 đến aSTS, kích thích được ưa thích chuyển từ mẫu đơn giản và chuyển động sang con người, khuôn mặt và tương tác xã hội, trong khi đặc trưng xã hội và động ngày càng mạnh hơn
Tiến hóa video dùng digital twin làm phần thưởng
- Huấn luyện digital twin, một mô hình mã hóa của não, để dự đoán phản ứng của từng vùng thị giác trước video bất kỳ, rồi dùng phản ứng dự đoán của vùng được chọn làm phần thưởng cho NEvo
- Mỗi video được mô tả bằng một số ít gene như chủ thể, ánh sáng, chuyển động và bầu không khí
- Tạo một lô video ứng viên rồi dùng digital twin để tính điểm
- Giữ lại các ứng viên đạt điểm cao và thực hiện lai ghép, đột biến
- Lặp lại quá trình này qua nhiều thế hệ để nâng mức kích hoạt dự đoán
- Để tránh chi phí của việc tìm kiếm đồng thời cả ảnh và video, hệ thống thực hiện tìm kiếm 2 giai đoạn
- Trước tiên tìm một ảnh tĩnh đơn lẻ mạnh nhất
- Sau đó khám phá chuyển động để hoạt họa ảnh đó thành video 2 giây
- Tổng hợp kích thích cho các vùng quan tâm (ROI) chuẩn trên bề mặt vỏ não và từng vùng searchlight dày đặc
- Ví dụ PPA đạt điểm 0.767, tương ứng bách phân vị 100.0 so với ảnh tự nhiên
- Ví dụ searchlight
rh_5đạt điểm 1.124, tương ứng bách phân vị 100.0 so với ảnh tự nhiên
Tính chọn lọc theo vùng và thay đổi trên đường dẫn thị giác bên
- Video 2 giây được tổng hợp cho từng vùng phù hợp với những kích thích mà vùng đó được biết là ưa thích
- FFA phản ứng với khuôn mặt, PPA với địa điểm, EBA với cơ thể
- MT ưa thích chuyển động, còn V1·V3A ưa thích mẫu hình
- pSTS·aSTS phản ứng với các cảnh xã hội sinh động
- Video NEvo tạo ra mức kích hoạt cao hơn video localizer thủ công và các video tự nhiên mạnh nhất trên hầu hết các vùng
- Ở mọi vùng, video chuyển động tạo phản ứng cao hơn khung hình đầu tiên cố định của cùng video, xác nhận sự ưa thích đối với kích thích động
- Khi di chuyển searchlight từ V1 về phía aSTS, các kích thích tổng hợp và word cloud tự động tạo chuyển từ mẫu hình đơn giản và chuyển động sang con người, khuôn mặt và tương tác xã hội
- Dọc theo đường dẫn thị giác bên xuất hiện một gradient trong đó đặc trưng xã hội và động tăng dần
- Trong thí nghiệm bắt đầu từ các đĩa xếp chồng trừu tượng, các đặc trưng ưa thích theo từng vùng cũng được tách biệt
- Tối ưu hóa pSTS tạo ra các nhân vật trông giống khuôn mặt và tương tác với nhau
- Tối ưu hóa MT tạo ra chuyển động thuần túy
1 bình luận
Ý kiến trên Hacker News
Giờ đây, với AI, họ có thể tạo ra video gây nghiện cá nhân hóa nhấn chính xác mọi công tắc trong não người xem để giữ họ như zombie suốt nhiều ngày. Mong rằng quy định pháp lý sẽ gây áp lực thật mạnh lên các mạng xã hội để họ thậm chí không dám triển khai loại công nghệ này
Xu hướng nịnh nọt của GPT-4o và cuộc khủng hoảng loạn thần do AI gây ra có thể chỉ là trailer báo trước, nhưng ngay cả thế cũng mới chỉ là tối ưu hóa mức độ tương tác
Nhưng tôi không thấy họ có xác nhận rằng video được tạo ra thật sự tạo nên mẫu kích hoạt não giống như bản sao số khi đo MRI trên người thật hay không. Tôi hoài nghi liệu bản thân một mô hình có thể dự đoán ổn định hoạt động não từ video hay không
Về mặt phương pháp, họ khớp V-JEPA2 với dữ liệu fMRI bằng hồi quy ridge theo từng voxel, tức giả định phản ứng thị giác tác động độc lập lên từng voxel. Mô hình theo từng voxel tốt cho suy luận thống kê, nhưng lại yếu cho dự đoán và mô hình hóa vì não không hoạt động như tập hợp các vùng độc lập. Tín hiệu BOLD là loại dữ liệu cực kỳ nhiễu, nên thiết kế này có vẻ quá đơn giản để phản ánh thực tế
Đầu vào cảm giác thực, hồi tưởng, ảo và tưởng tượng được xử lý rất khác nhau trong não và trong các bước hậu xử lý cảm giác. Bản sao số chỉ có một phần dữ liệu nên nhiều khả năng chỉ tái tạo các mẫu bề mặt, và nếu lặp lại phơi nhiễm đủ nhiều thì những mạch vốn từng cùng phát hỏa có thể bị tái nối lại theo cách khó nhận ra. Dù vậy, bản thân bài báo cũng gần như thừa nhận các giới hạn này bằng ngôn ngữ khoa học, điều đó khá thú vị
B. Bản sao số là một lĩnh vực mô phỏng não đang phát triển, có thể xấp xỉ các mẫu hoạt động não ở quy mô lớn, nhưng chưa ở mức mô phỏng nguyên xi não thật. Thường nó dùng các mô hình neuron xấp xỉ kiểu tích phân-phát hỏa cùng cân bằng giữa các quần thể kích thích và ức chế, và tăng độ chính xác bằng cách ước lượng kết nối sợi trục chất trắng của từng đối tượng bằng ảnh khuếch tán. Nó cũng ngày càng được dùng để mô hình hóa ảnh hưởng của phẫu thuật lên sự lan truyền cơn động kinh trước mổ. Về chủ đề này, tập The Virtual Brain trong podcast Theoretical Neuroscience rất hay
C. Việc kiểm chứng mới chỉ được thực hiện một phần. NEVO chỉ tối ưu phản ứng thần kinh bên trong mô hình mã hóa bản sao số, và bản sao số đó được cho là đã cho thấy độ giá trị dự đoán đáng kể, nhưng nó khác với mô hình Virtual Brain đã nói ở trên. Đầu ra có vẻ hợp lý về mặt thần kinh sinh học, nhưng không có mô hình độc lập hay kết quả fMRI mới nào chứng minh rằng kích thích đã tối ưu thật sự kích hoạt vùng mục tiêu ngoài đời thực. Vì đây là nghiên cứu thực hiện trên dữ liệu fMRI sẵn có, nên kiểm chứng đầy đủ hiển nhiên là bước tiếp theo, và bài báo lần này có thể giúp họ xin được kinh phí nghiên cứu cần thiết
D. Trung bình mà nói, từ lâu người ta đã có thể tạo ra các kích thích tĩnh làm hoạt hóa một số vùng não nhất định vượt mức nền. Tùy cặp kích thích-vùng não mà khác biệt cá nhân sẽ khác nhau; vùng mặt thoi (FFA) nhỏ nên phải tìm bằng kích thích khuôn mặt theo từng cá nhân thay vì cách tiếp cận vùng quan tâm đơn giản, nhưng nhìn chung vẫn có thể xác định vị trí khá ổn định. Việc đo hoạt động não rất thô, như voxel 3×3×3mm của fMRI với phản ứng huyết động có tự tương quan không gian lớn, hay trường thụ cảm khoảng 400mm² của EEG. Bản sao số mô hình hóa động lực học ở độ phân giải này khá tốt, và ở mức này lượng thông tin không nhiều, nên việc tự động hóa bằng video cũng không phải là một bước nhảy quá phi lý
Sau khi cho đối tượng xem nhiều video trong máy quét suốt vài giờ, mô hình tạo ra biểu diễn riêng của dữ liệu và tìm đầu vào khiến khu vực cụ thể phản ứng mạnh nhất. Có thể xem đây là sự khái quát hóa của nghiên cứu não bộ truyền thống, vốn trình bày kích thích rồi ghi lại phản ứng não để hiểu con người và nhận thức là gì
Bản thân Distractatron không quá thú vị, nhưng có thể cải thiện nội dung bằng cách tìm ra chính xác thời điểm sự tập trung bị đứt quãng. Bài viết của New York Times và bài viết của New Yorker nói khá chi tiết về điều này
Vì phải cảnh giác liên tục suốt hơn một năm, 7 ngày một tuần, do lo dì có thể làm những việc nguy hiểm như bật bếp gas, hệ thống cảnh giới nguy hiểm trong não ông đã bị bào mòn không ngừng. Tôi thừa nhận nghiên cứu này là khoa học, nhưng nếu không kiểm soát chặt, chắc chắn sẽ có công ty tìm cách tung ra những cuộc tấn công kiểu Rowhammer lên não người
Nhìn lại quá khứ, có thể đã từng có những giai đoạn hưng cảm nhẹ như giảm ngủ, hoang tưởng nhẹ, hoặc năng suất tăng vọt từng lúc. Nếu đây là chuyện mới xảy ra thì mong là ông đã hồi phục tốt; các thuốc thế hệ mới để phòng ngừa và điều trị hưng cảm đã cải thiện đáng kể so với trước kia
Tuy vậy, trong vòng 20 năm, việc tăng cường não bộ bằng cách kết hợp chip cấy có gắn điện cực thần kinh với tính toán AI qua mạng, vượt xa điện cực EEG trên da đầu, có thể là khả thi. Ban đầu não sẽ dùng giao diện đó để tăng cường trí tuệ, nhưng nếu đảo chiều hướng điều khiển bằng thao tác từ xa, kiểu thao túng não đáng lo kia có thể trở thành hiện thực. Tuy nhiên nghiên cứu này còn cách kịch bản đó cả năm ánh sáng, nên nếu không phản đối mọi công nghệ thì rất khó nối hai thứ đó với nhau
Nó gợi nhớ tới kích thích siêu chuẩn và truyện BLIT. Một trong các hoạt ảnh V3A có hơi giống thứ tôi từng nhìn thấy vào ban đêm ngay trước khi ngủ hồi nhỏ, dù khi đó hình dạng có vẻ gần với hình tròn hơn
Trong thực tế chăm sóc người khuyết tật trí tuệ, người ta dùng ánh sáng mạnh và các kích thích khác để trấn an và kiểm soát, và tôi biết rằng người tự kỷ bị kích thích rất mạnh bởi màu sắc rực rỡ. Cũng không thể chắc rằng những người còn lại không dễ bị tổn thương trước các kích thích mang tính kiểm soát như vậy
Họ có thể tung ra ReMind Long-term để tạo ký ức dài hạn phục vụ quảng cáo, theo hướng gây ấn tượng kiểu “chấn thương”, và ReMind Short-term cho khuyến mãi ngắn hạn, hoạt động như phiên bản thị giác của một bài hát vướng mãi trong đầu. Một tương lai tươi sáng nơi các hãng quảng cáo đặt hàng hàng chục nghìn lượt và chúng được triển khai ngay lập tức ở siêu thị, thang máy, trạm xăng, giải trí trên máy bay và bảng quảng cáo công cộng
Có những nhà nghiên cứu không nhận ra rằng mình đang dần trở thành Fritz Haber
Nhóm tập trung trong quảng cáo phát triển thành thử nghiệm A/B để tìm ra sở thích bộc lộ ra ngoài, còn nghiên cứu về chất béo, muối và đường đã sinh ra đồ ăn nhanh gần như gây nghiện. Công nghệ này chỉ là bước tiếp theo hợp logic mà thôi