大模型“玩”Excel更6了，微软搞的

虎嗅APP07-16

本文来自微信公众号：量子位（ID：QbitAI），作者：金磊，题图来自：视觉中国大模型理解、推理Excel，现在变得更加精准了。这就是来自微软的一项最新研究——SPREADSHEETLLM，主打的就是让大模型有条不紊地处理各种电子表格任务。例如在下面这张图中，如果用传统的大模型方法，会直接忽略掉“R5:R14”这列数据。然而，这一列数据其实是与左侧单元格有着较强的语义关系，表示这些值在左侧单元格...

网页链接

免责声明：本文观点仅代表作者个人观点，不构成本平台的投资建议，本平台不对文章信息准确性、完整性和及时性做出任何保证，亦不对因使用或信赖文章信息引发的任何损失承担责任。

精彩评论

我们需要你的真知灼见来填补这片空白

发表看法

{"i18n":{"language":"zh_CN"},"isChannel":false,"data":{"share":"https://www.laohu8.com/m/news/2451960307?lang=zh_CN&edition=full","thumbnail":"","is_english":false,"pubTime":"2024-07-16 18:08","share_image_url":"https://static.laohu8.com/9a95c1376e76363c1401fee7d3717173","id":"2451960307","market":"us","top_or_hot":-1,"title":"大模型“玩”Excel更6了，微软搞的","media":"虎嗅APP","content":"<div>\n<p>本文来自微信公众号：量子位 （ID：QbitAI），作者：金磊，题图来自：视觉中国大模型理解、推理Excel，现在变得更加精准了。这就是来自微软的一项最新研究——SPREADSHEETLLM，主打的就是让大模型有条不紊地处理各种电子表格任务。例如在下面这张图中，如果用传统的大模型方法，会直接忽略掉“R5:R14”这列数据。然而，这一列数据其实是与左侧单元格有着较强的语义关系，表示这些值在左侧单元格...</p>\n\n<a href=\"http://gu.qq.com/resources/shy/news/detail-v2/index.html#/?id=nesSN202407161846429f558e33&s=b\">网页链接</a>\n\n</div>\n","source":"tencent","html":"<!DOCTYPE html>\n<html>\n<head>\n<meta http-equiv=\"Content-Type\" content=\"text/html; charset=utf-8\" />\n<meta name=\"viewport\" content=\"width=device-width,initial-scale=1.0,minimum-scale=1.0,maximum-scale=1.0,user-scalable=no\"/>\n<meta name=\"format-detection\" content=\"telephone=no,email=no,address=no\" />\n<title>大模型“玩”Excel更6了，微软搞的</title>\n<style type=\"text/css\">\na,abbr,acronym,address,applet,article,aside,audio,b,big,blockquote,body,canvas,caption,center,cite,code,dd,del,details,dfn,div,dl,dt,\nem,embed,fieldset,figcaption,figure,footer,form,h1,h2,h3,h4,h5,h6,header,hgroup,html,i,iframe,img,ins,kbd,label,legend,li,mark,menu,nav,\nobject,ol,output,p,pre,q,ruby,s,samp,section,small,span,strike,strong,sub,summary,sup,table,tbody,td,tfoot,th,thead,time,tr,tt,u,ul,var,video{ font:inherit;margin:0;padding:0;vertical-align:baseline;border:0 }\nbody{ font-size:16px; line-height:1.5; color:#999; background:transparent; }\n.wrapper{ overflow:hidden;word-break:break-all;padding:10px; }\nh1,h2{ font-weight:normal; line-height:1.35; margin-bottom:.6em; }\nh3,h4,h5,h6{ line-height:1.35; margin-bottom:1em; }\nh1{ font-size:24px; }\nh2{ font-size:20px; }\nh3{ font-size:18px; }\nh4{ font-size:16px; }\nh5{ font-size:14px; }\nh6{ font-size:12px; }\np,ul,ol,blockquote,dl,table{ margin:1.2em 0; }\nul,ol{ margin-left:2em; }\nul{ list-style:disc; }\nol{ list-style:decimal; }\nli,li p{ margin:10px 0;}\nimg{ max-width:100%;display:block;margin:0 auto 1em; }\nblockquote{ color:#B5B2B1; border-left:3px solid #aaa; padding:1em; }\nstrong,b{font-weight:bold;}\nem,i{font-style:italic;}\ntable{ width:100%;border-collapse:collapse;border-spacing:1px;margin:1em 0;font-size:.9em; }\nth,td{ padding:5px;text-align:left;border:1px solid #aaa; }\nth{ font-weight:bold;background:#5d5d5d; }\n.symbol-link{font-weight:bold;}\n/* header{ border-bottom:1px solid #494756; } */\n.title{ margin:0 0 8px;line-height:1.3;color:#ddd; }\n.meta {color:#5e5c6d;font-size:13px;margin:0 0 .5em; }\na{text-decoration:none; color:#2a4b87;}\n.meta .head { display: inline-block; overflow: hidden}\n.head .h-thumb { width: 30px; height: 30px; margin: 0; padding: 0; border-radius: 50%; float: left;}\n.head .h-content { margin: 0; padding: 0 0 0 9px; float: left;}\n.head .h-name {font-size: 13px; color: #eee; margin: 0;}\n.head .h-time {font-size: 11px; color: #7E829C; margin: 0;line-height: 11px;}\n.small {font-size: 12.5px; display: inline-block; transform: scale(0.9); -webkit-transform: scale(0.9); transform-origin: left; -webkit-transform-origin: left;}\n.smaller {font-size: 12.5px; display: inline-block; transform: scale(0.8); -webkit-transform: scale(0.8); transform-origin: left; -webkit-transform-origin: left;}\n.bt-text {font-size: 12px;margin: 1.5em 0 0 0}\n.bt-text p {margin: 0}\n</style>\n</head>\n<body>\n<div class=\"wrapper\">\n<header>\n<h2 class=\"title\">\n大模型“玩”Excel更6了，微软搞的\n</h2>\n\n<h4 class=\"meta\">\n\n\n2024-07-16 18:08 北京时间&nbsp;&nbsp;&nbsp;<a href=http://gu.qq.com/resources/shy/news/detail-v2/index.html#/?id=nesSN202407161846429f558e33&s=b><strong>虎嗅APP</strong></a>\n\n\n</h4>\n\n</header>\n<article>\n<div>\n<p>本文来自微信公众号：量子位 （ID：QbitAI），作者：金磊，题图来自：视觉中国大模型理解、推理Excel，现在变得更加精准了。这就是来自微软的一项最新研究——SPREADSHEETLLM，主打的就是让大模型有条不紊地处理各种电子表格任务。例如在下面这张图中，如果用传统的大模型方法，会直接忽略掉“R5:R14”这列数据。然而，这一列数据其实是与左侧单元格有着较强的语义关系，表示这些值在左侧单元格...</p>\n\n<a href=\"http://gu.qq.com/resources/shy/news/detail-v2/index.html#/?id=nesSN202407161846429f558e33&s=b\">网页链接</a>\n\n</div>\n\n\n</article>\n</div>\n</body>\n</html>\n","isBrief":false,"type":0,"news_type":1,"symbol":"IE00B3SWFQ91.USD","symbol_name":"PIMCO BALANCED INCOME AND GROWTH \"E\" (USD) INC","start_time":0,"source_url":"http://gu.qq.com/resources/shy/news/detail-v2/index.html#/?id=nesSN202407161846429f558e33&s=b","article_id":"2451960307","we_media_id":null,"thumbnails":[],"rights":{"source":"tencent","url":"http://gu.qq.com/resources/shy/news/detail-v2/index.html#/?id=nesSN202407161846429f558e33&s=b","rn_cache_url":null,"customStyle":"body{padding-top:10px;}#news_title{font-weight:bold;#titleStyle#;}#news_description span{font-size:12px;#descriptionStyle#;}.footer-note{#statement#}","selectors":".mod-LoadTzbdNews, body","filters":".relate-stock, .hot-list, .recom-box, .wx-sou","directOrigin":true},"url":"https://stock-news.laohu8.com/highlight/detail?id=2451960307","pubTimestamp":1721124482,"sourceInfo":{"source_id":"tencent","name":"腾讯"},"weMediaInfo":null,"summary":"本文来自微信公众号：量子位 ，作者：金磊，题图来自：视觉中国大模型理解、推理Excel，现在变得更加精准了。不过也有网友认为微软用大模型新研究“整治”Excel……问答准确率提高了22%在回答这个问题之前，我们先来了解一下传统大模型在处理Excel等电子表格任务时存在的问题。在确定了相关表格后，下一步是生成对查询的准确响应。总而言之，大模型现在处理Excel等电子表格这事儿，确实是变得更6了。","collect":0,"end_time":0,"defaultTopTitle":"qq.com","property":[],"viewcount":null,"language":"zh","relate_stocks":{"IE00B3SWFQ91.USD":"PIMCO BALANCED INCOME AND GROWTH \"E\" (USD) INC","IE0034235303.USD":"PINEBRIDGE US RESEARCH ENHANCED CORE EQUITY \"A\" (USD) ACC","IE0009356076.USD":"JANUS HENDERSON GLOBAL TECHNOLOGY AND INNOVATION \"A2\" (USD) ACC","IE00B4JS1V06.HKD":"JANUS HENDERSON BALANCED \"A2\" (HKD) ACC","BK4581":"高盛持仓","BK4504":"桥水持仓","IE00B5TLWC47.USD":"BNY MELLON LONG-TERM GLOBAL EQUITY \"B\" (USD) ACC","IE00BLSP4452.SGD":"Legg Mason ClearBridge - Tactical Dividend Income A Mdis SGD-H Plus","BK4588":"碎股","IE0004086264.USD":"BNY MELLON GLOBAL OPPORTUNITIES \"A\" (USD) ACC","IE00BFSS7M15.SGD":"Janus Henderson Balanced A Acc SGD-H","IE00BLSP4239.USD":"Legg Mason ClearBridge - Tactical Dividend Income A Mdis USD Plus","IE00B3S45H60.SGD":"Neuberger Berman US Multicap Opportunities A Acc SGD-H","BK4548":"巴美列捷福持仓","IE0004091025.USD":"BNY MELLON GLOBAL OPPORTUNITIES \"B\" (USD) ACC","IE00B4YYXB79.USD":"PIMCO BALANCED INCOME AND GROWTH \"E\" (USD) ACC","BK4587":"ChatGPT概念","GB00B4QBRK32.GBP":"FUNDSMITH EQUITY \"R\" (GBP) INC","BK4503":"景林资产持仓","OLB":"OLB Group Inc","BK4227":"交易和支付处理服务","BK4106":"数据处理与外包服务","BK4528":"SaaS概念","GB00B4LPDJ14.GBP":"FUNDSMITH EQUITY \"R\" (GBP) ACC","BK4532":"文艺复兴科技持仓","IE00BKDWB100.SGD":"PINEBRIDGE US LARGE CAP RESEARCH ENHANCED \"A5H\" (SGDHDG) ACC","IE00BMPRXN33.USD":"NEUBERGER BERMAN 5G CONNECTIVITY \"A\" (USD) ACC","IE00BBT3K403.USD":"LEGG MASON CLEARBRIDGE TACTICAL DIVIDEND INCOME \"A(USD) ACC","BK4592":"伊斯兰概念","BK4534":"瑞士信贷持仓","IE00BDRTCR15.USD":"PINEBRIDGE GLOBAL DYNAMIC ASSET ALLOCATION \"ADC\" (USD) INC A","IE00BKPKM429.USD":"NEUBERGER BERMAN GLOBAL SUSTAINABLE EQUITY \"A\" (USD) ACC","IE0005OL40V9.USD":"JANUS HENDERSON BALANCED \"A6M\" (USD) INC","BK4533":"AQR资本管理(全球第二大对冲基金)","IE000W1ABFV2.USD":"PIMCO BALANCED INCOME AND GROWTH \"R\" (USD) INC","IE00BK4W5L77.USD":"HSBC GLOBAL FUNDS ICAV US EQUITY INDEX \"HC\" (USD) ACC","BK4525":"远程办公概念","IE00BK4W5M84.HKD":"HSBC GLOBAL FUNDS ICAV US EQUITY INDEX \"HC\" (HKD) ACC","IE00B19Z9505.USD":"美盛-美国大盘成长股A Acc","IE0004445239.USD":"JANUS HENDERSON US FORTY \"A2\" (USD) ACC","BK4577":"网络游戏","BK4527":"明星科技股","IE00B1BXHZ80.USD":"Legg Mason ClearBridge - US Appreciation A Acc USD","IE0003U64NQ7.SGD":"PIMCO BALANCED INCOME AND GROWTH \"M\" (SGDHDG) ACC","BK4579":"人工智能","IE00BMPRXQ63.HKD":"NEUBERGER BERMAN NEXT GENERATION CONNECTIVITY FUND \"A\" (HKDHDG) ACC","IE000KEQY171.SGD":"PIMCO BALANCED INCOME AND GROWTH \"M\" (SGDHDG) INC","IE00BFSS8Q28.SGD":"Janus Henderson Balanced A Inc SGD-H","IE00B7KXQ091.USD":"Janus Henderson Balanced A Inc USD","MSFT":"微软"},"translate_title":"The large model \"plays\" with Excel is updated to 6, Microsoft is doing it","themeId":null,"isJumpTheme":false,"ttsUrl":null,"symbols_score_info":{"OLB":1,"MSFT":1},"content_text":"本文来自微信公众号：量子位 （ID：QbitAI），作者：金磊，题图来自：视觉中国大模型理解、推理Excel，现在变得更加精准了。这就是来自微软的一项最新研究——SPREADSHEETLLM，主打的就是让大模型有条不紊地处理各种电子表格任务。例如在下面这张图中，如果用传统的大模型方法，会直接忽略掉“R5:R14”这列数据。然而，这一列数据其实是与左侧单元格有着较强的语义关系，表示这些值在左侧单元格中的百分比。现在有了SPREADSHEETLLM，这种有难度的推理任务已经是可以轻松应对了。再如当Excel表格里存在结构稀疏或者有大量空格单元的时候，大模型在识别任务上也会出错，最终导致结果的错误：而SPREADSHEETLLM就能让大模型更加精准地“看清”Excel：可以识别并保留表格的关键结构信息，同时去除多余的空单元格和行。这项研究目前已经引来了不少网友们的围观，有人认为它将对那些跟数据打交道的打工人造成不小的冲击。不过也有网友认为微软用大模型新研究“整治”Excel……也挺合理。那么这项研究是如何让大模型处理Excel的能力Pro Max的？我们继续往下看。问答准确率提高了22%在回答这个问题之前，我们先来了解一下传统大模型在处理Excel等电子表格任务时存在的问题。首先就是tokens的限制。众所周知，大部分的大模型在处理任务的时候都存在这方面的限制；而电子表格往往因为存在大量的二维网格和复杂的结构而超出了这个限制。加之传统的电子表格编码方法，如HTML、XML由于需要重复使用标签来表示数据结构，也会导致tokens的消耗较高。即使是Markdown的编码方法可以节省tokens，但它缺乏明确的单元格地址信息，导致在索引特定单元格位置时容易出错。其次还存在像结构锚点识别的问题。在没有有效方法来识别电子表格中的结构锚点（如表格边界的行和列）之前，即便是GPT-4也难以理解电子表格的布局和结构。为了解决上述的问题，微软团队首先提出了一个叫做SheetCompressor的编码框架，主要包含三大模块：结构锚点压缩（structural-anchor-based compression）反向索引转换（inverse index translation）数据格式感知聚合（data-format-aware aggregation）结构锚点压缩的目的是识别电子表格中的结构锚点，即在表格边界处的非同质行和列。这一步骤主要是通过识别和提取这些结构锚点，然后移除远离锚点的同质行和列，生成一个精简版的“骨架”电子表格。这种方法有效地减少了需要处理的数据量，同时保留了对理解表格结构至关重要的信息。反向索引转换的目的是提高tokens的使用效率，特别是在处理包含大量空单元格和重复值的电子表格的时候。与传统的逐行逐列的序列化方法不同，反向索引转换采用无损的JSON格式的反向索引翻译方法。通过创建一个字典，将非空单元格文本作为键，将具有相同文本的地址合并，优化了tokens的使用，同时保持了数据的完整性。而数据格式感知聚合，则是为了简化对数值单元格的理解，因为相邻的数值单元格通常具有相似的数字格式。它先是提取单元格的数字格式字符串和数据类型，然后将具有相同格式或类型的相邻单元格进行聚类。通过这种方法，可以使用统一的格式字符串和数据类型来表示矩形区域，简化了对数值数据分布的理解，减少了大量的tokens支出。在实验结果来看，SheetCompressor将tokens使用量减少了96%，并且与原始数据上微调的相同模型相比，性能提高了27%，在表格检测任务上的F1分数达到了约79%。除此之外，微软团队在这项研究中还提出了Chain of Spreadsheet（CoS）的框架。它是用来扩展SPREADSHEETLLM的应用范围，特别是在处理电子表格的下游任务的时候。首先，CoS需要确定与特定任务查询相关的表格，并确定相关内容的确切边界；这一步确保了只有相关数据在后续分析中被考虑，优化了处理效率和焦点。在确定了相关表格后，下一步是生成对查询的准确响应。CoS通过将处理过程分解为可管理的部分，有效地处理了复杂的电子表格，从而实现了精确且上下文感知的响应。从结果上来看，CoS方法显著提高了大模型在问答方面的准确性。例如，与基线GPT-4模型相比，CoS方法的准确度提高了22%。微调模型在电子表格检测任务上的表现也证明了CoS的泛化能力，微调后的模型在问答任务上的准确度提高了6%。总而言之，大模型现在处理Excel等电子表格这事儿，确实是变得更6了。参考链接[1]https://arxiv.org/abs/2407.09025[2]https://x.com/emollick/status/1812684733538541694本文来自微信公众号：量子位 （ID：QbitAI），作者：金磊本内容为作者独立观点，不代表虎嗅立场。未经允许不得转载，授权事宜请联系hezuo@huxiu.com如对本稿件有异议或投诉，请联系tougao@huxiu.comEnd想涨知识 关注虎嗅视频号！","kind":null,"is_publish_news":true,"is_publish_highlight":false,"is_publish_live":false,"is_publish_wemedia":null,"editions":null,"column":"","sentiment":"0","news_tag":"","news_rank":0,"symbols":[],"gpt_button":1},"commentList":[],"isCommentEnd":true,"newsSizeData":{"likeSize":0,"commentSize":0,"repostSize":0,"favoriteSize":0,"likeStatus":false,"favoriteStatus":false},"APP":{"userAgent":"Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)","isDev":false,"isTTM":false,"deviceId":"web-server-community-laohu8-v3","version":"4.26.2","shortVersion":"4.26.2","platform":"web","vendor":"web","appName":"laohu8","isIOS":false,"isAndroid":false,"isTiger":false,"isTHS":false,"isWeiXin":false,"isWeiXinMini":false,"isWeiBo":false,"isQQ":false,"isBaiduSwan":false,"isBaiduBox":false,"isDingTalk":false,"isToutiao":false,"isOnePlus":false,"isHuaWei":false,"isXiaomi":false,"isXiaomiWebView":false,"isOppo":false,"isVivo":false,"isSamsung":false,"isMobile":false},"href":"/m/news/2451960307"}