FMAT_run() error

[blank13145]

我的R studio每次运行FMAT_run函数时都会显示如图所示的错误，看上去挺危险的。R提示说有多个OpenMR在运行，并且每次都是在CPU对BERT模型进行计算的时候出错，然后强制退出。请问如何解决这一问题呢？

[blank13145]

应该是OpenMP，原文写错了

[psychbruce]

你好，这个问题之前从未出现过，第一次看到，应该和R包本身无关，可能是Python运算问题（也就是说直接用Python代码运行也很可能遇到相同问题）。FMAT_run()内部直接调用Python包，这个报错应该是Python（而非R）报告的。
我无法直接给出解决办法，但是建议（1）将R、RStudio、所有R包都升级到最新版；（2）确保Python环境安装正常，并按照推荐的版本号安装所需的Python包（https://psychbruce.github.io/FMAT/）；（3）可提供你电脑的关键配置信息（CPU型号、内存大小等）作进一步判断，因为这个看起来“挺危险”的R Session Aborted在电脑内存溢出等其他情况下也容易发生。

pip install transformers==4.40.2 torch==2.2.1 huggingface-hub==0.20.3

[blank13145]

感谢你的解答～我试着用mac终端运行pip install transformers==4.40.2 torch==2.2.1 huggingface-hub==0.20.3，但出现了错误：datasets 2.21.0 requires huggingface-hub>=0.21.2, but you have huggingface-hub 0.20.3 which is incompatible. 我记得第一次安装时好像也是这个错误，于是我把huggingface的版本自行更新了，不知道和之后的错误有没有关系。

[psychbruce]

1. 可以Google一下Error中的关键报错描述，一般都有搜索结果，可以尝试定位到底是哪个包的报错。
2. 很多Python包的新版本会要求某个版本以上的依赖包，这个报错很常见，不是致命问题，按照提示手动重新安装较低版本的包即可（比如你遇到的datasets包需要手动装一个较低版本，以和huggingface-hub适配）。
3. Mac系统不确定会遇到什么问题，有可能你遇到的问题是Mac才有的。我目前暂时不负责FMAT在Mac系统上的适配维护，建议优先使用Win系统+GPU运行FMAT。

[blank13145]

您好，我对FMAT文献中的study 1A很感兴趣，想做一个与职业有关的研究。但我找不到里面使用的50个职业分别是什么，您引用那篇参考文献里给出的链接也登不上去，所以想问问50个职业是什么？ 之所以想知道具体的职业，还有一个原因是不知道这些单词是否会超出BERT模型的词汇量，如果超出的话，会导致概率计算的错误吗？

[psychbruce]

所有材料都在附录中提供了，请仔细查看，职业词在WEAT_Words.csv文件里：
https://doi.org/10.1037/pspa0000396.supp
https://osf.io/5e2hr/
50个职业也是Caliskan et al., 2017研究中一模一样使用的。
也请仔细阅读Study 1的Query设计，很多职业和名字都是超出BERT模型vocabulary的，所以MASK备选词是性别名词或代词，而不是职业或名字。{TARGET}和{ATTRIB}不受BERT模型vocabulary的限制，可以是任何词语或短语（需要pairwise或listwise对比）。

[blank13145]

十分感谢，现在找到职业词了。可惜只能把职业词作为{TARGET}和{ATTRIB}，如果作为MASK就会有问题。 发件人："Bruce H.-W.-S. Bao" ***@***.***> 发送日期：2024-10-21 10:47:39 收件人：psychbruce/FMAT ***@***.***> 抄送人：blank13145 ***@***.***>,Author ***@***.***> 主题：Re: [psychbruce/FMAT] FMAT_run() error (Issue #1) 所有材料都在附录中提供了，请仔细查看，职业词在WEAT_Words.csv文件里： https://doi.org/10.1037/pspa0000396.supp https://osf.io/5e2hr/ 50个职业也是Caliskan et al., 2017研究中一模一样使用的。 也请仔细阅读Study 1的Query设计，很多职业和名字都是超出BERT模型vocabulary的，所以MASK备选词是性别名词或代词，而不是职业或名字。{TARGET}和{ATTRIB}不受BERT模型vocabulary的限制，可以是任何词语或短语（需要pairwise或listwise对比）。 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you authored the thread.Message ID: ***@***.***>

[psychbruce]

是的，BERT模型的整词的词汇量比较小，所以[MASK]备选词的限制比较大，职业词在Study 1里是{TARGET}。

[Wangzxi]

@blank13145 hello 想问一下你的问题解决了吗？我用mac在运行FMAT_run()函数的时候也会强制退出，重装R、Rstudio和Python之后都没用😂想请教一下是怎么解决的呢

[blank13145]

对不起我记不很清楚了，记得是把R重装了一遍吧，现在FMAT_run不会强制退出了 发件人：Zi-Xi Wang ***@***.***> 发送日期：2024-12-16 17:27:43 收件人：psychbruce/FMAT ***@***.***> 抄送人：blank13145 ***@***.***>,Mention ***@***.***> 主题：Re: [psychbruce/FMAT] FMAT_run() error (Issue #1) @blank13145 hello 想问一下你的问题解决了吗？我用mac在运行FMAT_run()函数的时候也会强制退出，重装R、Rstudio和Python之后都没用😂想请教一下是怎么解决的呢 33.jpg (view on web) — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you were mentioned.Message ID: ***@***.***>

[Wangzxi]

@blank13145 谢谢姐妹，我刚解决了，在运行R代码前加了两行↓，我也是OpenMP的问题，发现不仅得避免 OpenMP 库重复加载，还得把OpenMP 线程数为 1，设置为2就崩了..但是我发现设置为1也并不会影响运算速度！甚至感觉比之前还快了（？
Sys.setenv(KMP_DUPLICATE_LIB_OK = "TRUE")
Sys.setenv(OMP_NUM_THREADS = "1")