神经科学与心理学2018biorxiv.org
从人类大脑活动中深度重建图像(2017)
Deep image reconstruction from human brain activity (2017)
进阶 · 约 60 分钟读完前置知识:fMRI 基础、深度神经网络、图像生成/优化基础
导读
这篇论文(神谷之康实验室)研究如何从人类大脑活动(fMRI 信号)重建出可识别的图像。核心做法是用深度神经网络解码大脑活动特征,并通过深度图像重建算法优化生成与被试所见图像匹配的图片,重建结果在视觉上与原始刺激相当接近。
HN 关注点:'读心'式脑活动解码的技术进展,讨论焦点包括想象图像为何难以重建、以及代码数据开源等。
HN 评论精选
这几条评论里:补充 4
补充猜测想象重建效果差是因为人们普遍'能认不能画',建议用视觉专家重复实验
(作者自认不懂心理学或神经科学)有趣的是,当只让被试想象图片时,他们无法提取出好的图像。我猜测是因为绝大多数人能识别图像,却不能生成图像。举个例子:试着画一辆自行车——车轮、车架、踏板、车把等,你会发现非常困难。我很想看到他们在专攻写实主义的画家等专家身上重复实验,或让某领域的专家想象该领域的事物(比如让小提琴手想象小提琴),看结果是否比让普通研究生想象狮子的脸更可辨认。
gamegoblin查看英文原文
Acknowledging that I know nothing about psychology or neuroscience... It's interesting that they were not able to extract good images from the test when they just asked the subjects to imagine the pictures. I speculate that is because the vast majority of people are able to recognize images of things, but not produce those images. For a simple example, see this article about people trying to draw a bicycle. Before clicking, try to draw a 2D representation of a bicycle -- the wheels, the frame, pedals, handlebars, etc. You'd be surprised how difficult it is. https://road.cc/content/blog/90885-science-cycology-can-you-draw-bicycle I would be very interested to see them repeat the experiment on e.g. artists who specialize in photorealism, or asking an expert on a very particular thing to imagine that particular thing (e.g. ask a violinist to imagine a violin). I wonder if that would yield more recognizable results than asking a random grad student to visualize a lion's face.
补充补充:代码和数据已开源,代码质量高
这些惊人结果的代码和数据已慷慨地开源在此:https://github.com/KamitaniLab/DeepImageReconstruction。代码是注释详尽的 Python,读起来很愉快。
randomdrake查看英文原文
The code and data for these amazing results have been generously made available here: https://github.com/KamitaniLab/DeepImageReconstruction The code is well-commented Python and a pleasure to read.
补充补充:论文 PDF 直链
给没看到的人:完整论文 PDF 在页面右侧有链接:https://www.biorxiv.org/content/biorxiv/early/2017/12/28/240317.full.pdf
sdinsn查看英文原文
For those who don't see it, the full paper is linked on the right side (PDF): https://www.biorxiv.org/content/biorxiv/early/2017/12/28/240317.full.pdf
补充补充:作者推文串链接
关于这项工作的更多信息见此推文串:https://twitter.com/ykamit/status/1039672289413844993
hardmaru查看英文原文
More information on this thread: https://twitter.com/ykamit/status/1039672289413844993
相关资源
从这篇论文所有 HN 讨论帖的全部评论里整理出来的链接。
历次讨论
- 2018Hacker News 讨论帖288 分 · 85 评
同领域还值得读
神经科学家能理解微处理器吗?(2017)
Could a Neuroscientist Understand a Microprocessor? (2017)
提出一个思想实验:把神经科学常用的分析方法(损伤实验、电生理、功能定位等)应用到一个我们完全了解其原理的工程系统——6502 微处理器(运行游戏)上,检验这些方法能否真正“理解”…
神经科学与心理学2017 · 411 分 · 135 评进阶 · 约 60 分钟编辑精选大脑衰老呈现非线性转变,提示中年“关键窗口”
Brain aging shows nonlinear transitions, suggesting a midlife "critical window"
这篇 PNAS 论文研究大脑衰老的非线性变化,发现大脑老化并非匀速进行,而是在中年(约 40-60 岁)存在一个关键的"临界窗口期",此时干预可能有效。
神经科学与心理学2025 · 295 分 · 159 评进阶 · 约 75 分钟编辑精选社交网络中大规模情绪传染的证据(2014)
Evidence of massive-scale emotional contagion through social networks (2014)
这篇 2014 年发表于 PNAS 的论文研究了 Facebook 上约 70 万用户的信息流中,减少正面或负面内容是否会传染性地影响用户自己发布内容的情绪。
神经科学与心理学2020 · 285 分 · 72 评入门 · 约 45 分钟编辑精选裸盖菇素使人类大脑去同步化
Psilocybin desynchronizes the human brain
这篇 Nature 研究用个体化的 fMRI 精密成像追踪受试者服用裸盖菇素(psilocybin)前后的脑功能连接变化,发现药物会造成大范围的脑网络「去同步化」,尤其是默认模式…
神经科学与心理学2024 · 273 分 · 259 评进阶 · 约 60 分钟编辑精选对智力的赞扬会削弱儿童的动机与表现(1998)
Praise for Intelligence Can Undermine Children's Motivation (1998)
这篇 1998 年的经典论文(Dweck 等人)通过实验研究表扬方式对儿童动机的影响:夸孩子“聪明”(表扬智力)会让他们回避挑战、害怕失败,而表扬努力则更能培养坚持性。
神经科学与心理学2016 · 253 分 · 155 评入门 · 约 45 分钟编辑精选