TOPIC

LLM合成被试与实验研究

站内已收录 23 篇相关论文。你可以继续按方法和解读深度缩小范围。

显示方式
LLM合成被试与实验研究23 条记录

题目 · 作者 · 年份 · 发表来源 · 原始摘要 · AI导读

PAPER RECORDABSTRACT VERIFIED

12 Best Practices for Leveraging Generative AI in Experimental Research

Samuel Chang · Andrew Kennedy · Aaron Leonard · John List

National Bureau of Economic Research

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:结合因果识别的四项排除限制,将相关原则细化为涵盖模型记录、合成样本独立性和结果复现等环节的操作指南。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDINDEXED ABSTRACT COPY

A Taxonomy of AI Experiments

Aleksandr Alekseev · Christina Strobel

Journal of Behavioral and Experimental Economics

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。根据三个问题对AI实验进行分类:实验是否实际部署AI,AI是否为该研究专门开发,以及实验是否在AI的真实使用环境中开展。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Agentsociety: Large-scale simulation of llm-driven generative agents advances understanding of human behaviors and society

Jinghua Piao · Yuwei Yan · Jun Zhang · Nian Li · Junbo Yan · Xiaochong Lan · Zhihong Lu · Zhiheng Zheng · Jing Yi Wang · Di Zhou

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:在大语言模型方向,EconAgent利用LLM驱动异质智能体模拟宏观经济行为,AgentSociety支持万级以上LLM驱动的智能体的社会经济仿真。本综述将其作为AI经济主体与决策求解文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

AITurk: Using ChatGPT for social science research

Xin Qin · Mingpeng Huang · Jie Ding

Center for Open Science

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。论文以大语言模型智能体为主要切入点,连接具体研究任务、模型设定与可检验结果。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Can Large Language Models Serve as Rational Players in Game Theory? A Systematic Analysis

Caoyun Fan · Jindou Chen · Yaohui Jin · Hao He

Proceedings of the AAAI Conference on Artificial Intelligence

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。则从动态博弈出发,将理性分解为偏好遵循、信念识别和多步行动三个维度。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Cfgpt: Chinese financial assistant with large language model

Jiangtong Li · Yuxuan Bian · Guoxuan Wang · Yang Lei · Dawei Cheng · Zhijun Ding · Changjun Jiang

arXiv preprint arXiv:2309.10654

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:面向中文金融场景的DISC-FinLLM和CFGPT等模型也相继出现。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Disc-finllm: A chinese financial large language model based on multiple experts fine-tuning

Wei Chen · Qiushi Wang · Zefei Long · Xianyin Zhang · Zhongtian Lu · Bingxuan Li · Siyuan Wang · Jiarong Xu · Xiang Bai · Xuanjing Huang

arXiv preprint arXiv:2310.15205

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:面向中文金融场景的DISC-FinLLM和CFGPT等模型也相继出现。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Do LLM Agents Exhibit Social Behavior?

Yan Leng · Yuan Yuan

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。使用SUVA框架分析8个LLM在五种社会偏好博弈中的决策及其思维链(Chain-of-Thought,CoT)文本。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Exploring the Sensitivity of LLMs' Decision-Making Capabilities: Insights from Prompt Variations and Hyperparameters

Manikanta Loya · Divya Sinha · Richard Futrell

Findings of the Association for Computational Linguistics: EMNLP 2023

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:发现,仅改变一句提示词就可能改变甚至逆转实验结论;进一步分析了角色设定、对话模式和回答格式等设计选择的影响。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Generation Next: Experimentation with AI

Gary Charness · Brian Jabarian · John A. List

National Bureau of Economic Research

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。较早系统讨论了LLM在实验设计、实施与分析中的作用。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Generative Agents: Interactive Simulacra of Human Behavior

Joon Sung Park · Joseph C. O'Brien · Carrie J. Cai · Meredith Ringel Morris · Percy Liang · Michael S. Bernstein

Proceedings of the 36th Annual ACM Symposium on User Interface Software and Technology

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:随着智能体技术的发展,部分架构进一步引入反思(reflection)、规划(planning)、工具调用(tool)与技能(skill)等模块,持续增强LLM智能体的经济决策能力。本综述将其作为AI经济主体与决策求解文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

HumanStudy-Bench: Towards AI Agent Design for Participant Simulation

Xuan Liu · Haoyang Shang · Zizhang Liu · Xinyan Liu · Yunze Xiao · Yiwen Tu · Haojian Jin

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。发现LLM的经济行为更多取决于主体架构设计而非模型能力本身,表明LLM智能体建模自身的标准化与规范化同样亟待推进。本综述将其作为AI经济主体与决策求解文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED
AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。综合已有方法建议,可信且可复现的LLM实验至少应报告以下信息:模型名称与版本、完整提示文本和采样参数(如温度与top-p);通过多次独立运行评估输出变异性,相关细节见原文。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED
AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。采用另一种个体化方法,通过世界观、社会身份和心理情境三个层次为LLM设定人格。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

LLM Agents Grounded in Self-Reports Enable General-Purpose Simulation of Individuals

Joon Sung Park · Carolyn Q. Zou · Jonne Kamphorst · Niles Egan · Aaron Shaw · Benjamin Mako Hill · Carrie Cai · Meredith Ringel Morris · Percy Liang · Robb Willer · Michael S. Bernstein

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。第二,将个体行为预测从横截面验证扩展到动态追踪,检验模型能否跟踪真实个体的态度与行为变化。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

LLM Economist: Large Population Models and Mechanism Design in Multi-Agent Generative Simulacra

Seth Karten · Wenzhe Li · Zihan Ding · Samuel Kleiner · Yu Bai · Chi Jin

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。在税收机制设计中采用LLM与RL的融合架构:下层LLM劳动者依画像与税制情境生成劳动供给决策,上层规划者通过上下文内强化学习搜索最优税率,将行为生成能力与策略优化能力结合于同一框架。本综述将其作为AI经济主体与决策求解文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

LLMs Model Non-WEIRD Populations: Experiments with Synthetic Cultural Agents

Augusto Gonzalez-Bonorino · C. Monica Capra · Emilio Pantoja

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:通过检索增强生成注入民族志知识,在考察的15个小规模社会中部分恢复了跨文化差异,但这种改善依赖外部知识补充。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED
AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。则发现,LLM在独裁者博弈中倾向于平均分配,比例远高于人类的20–30%;在囚徒困境中的合作率约为65%,也高于人类的约37%。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Playing Repeated Games with Large Language Models

Elif Akata · Lion Schulz · Julian Coda-Forno · Seong Joon Oh · Matthias Bethge · Eric Schulz

Nature Human Behaviour

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。通过LLM与真实人类的多轮博弈进一步说明了这种差异。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

The Emergence of Economic Rationality of GPT

Yiting Chen · Tracy Xiao Liu · You Shan · Songfa Zhong

Proceedings of the National Academy of Sciences

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:第三,LLM作为被试具有系统性行为偏差:相较于人类,其行为更亲社会,偏好异质性更低,且静态优化能力强于动态交互能力。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

When AI Meets Finance (StockAgent): Large Language Model-Based Stock Trading in Simulated Real-World Environments

Chong Zhang · Xinyi Liu · Zhongmou Zhang · Mingyu Jin · Lingyao Li · Zhenting Wang · Wenyue Hua · Dong Shu · Suiyuan Zhu · Xiaobo Jin · Sujian Li · Mengnan Du · Yongfeng Zhang

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。在StockAgent中引入多源信息,并采用时间切分降低前视信息泄漏风险。本综述将其作为AI经济主体与决策求解文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

When Experimental Economics Meets Large Language Models: Evidence-Based Tactics

Shu Wang · Zijun Yao · Shuhuai Zhang · Jianuo Gai · Tracy Xiao Liu · Songfa Zhong

arXiv

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。相关研究脉络指出:发现,仅改变一句提示词就可能改变甚至逆转实验结论;进一步分析了角色设定、对话模式和回答格式等设计选择的影响。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。

PAPER RECORDABSTRACT VERIFIED

Which Humans?

Mohammad Atari · Mona J. Xue · Peter S. Park · Damian Ezequiel Blasi · Joseph Henrich

Center for Open Science

AI READING NOTE

该文聚焦LLM合成被试与实验研究,重点考察模型生成的选择能否复现人类行为,以及提示、画像和实验流程如何影响有效性。发现,GPT的回答分布偏向WEIRD国家,使用非英语提示词也未能消除这一倾向,说明偏差可能来自训练数据的文化构成。本综述将其作为AI研究工具文献收录;主要结论和适用边界应以英文摘要及原始研究设计为准。