10款大模型做北京中考數(shù)學(xué)題，4款國產(chǎn)大模型表現(xiàn)超ChatGPT

6月26日消息，2024年北京市初中學(xué)業(yè)水平考試今天結(jié)束，中考數(shù)學(xué)向來是學(xué)生和家長關(guān)注的重點(diǎn)，而數(shù)學(xué)試卷主要考查學(xué)生對初中數(shù)學(xué)主干知識的掌握情況和在知識學(xué)習(xí)過程中核心素養(yǎng)的發(fā)展情況。

此前，我們曾用“9款大模型做高考數(shù)學(xué)題”，但是效果一般。

現(xiàn)在，降低難度，用大模型做北京中考的數(shù)學(xué)題，它們的表現(xiàn)又如何呢？

選取百度文心一言、阿里通義、騰訊元寶、字節(jié)豆包、ChatGPT，百川智能百小應(yīng)、零一萬物萬知、智譜清言、月之暗面的Kimi，好未來九章大模型總計(jì)10款大模型來答題。

其中，零一萬物萬知PC端不支持上傳圖片/拍照，這里采用了萬知微信小程序來參與答題。

一共選擇數(shù)據(jù)卷中的3道題進(jìn)行測試。

1、選擇題

正確答案：A

2、填空題

正確答案：

第一空 60

第二空 C-A-B-D

3、解答題

正確答案：符合。因?yàn)楦脑旌驛類物質(zhì)排放量為34mg/km，小于標(biāo)準(zhǔn)要求的不超過35mg/km。

統(tǒng)一測試方法：在大模型對話框輸入上述3道題的圖片，大模型進(jìn)行圖片識別后，再進(jìn)行答題，最終看答題結(jié)果是否正確。解答題除了看結(jié)果外，還要考察解答過程是否正確。

測試結(jié)果如下：

1、九章大模型、元寶、百小應(yīng)、智譜清言答對3問，表現(xiàn)較好；

2、通義、豆包、Kimi、ChatGPT答對2問；

3、文心一言、萬知小程序只答對1問。

下面附上各AI產(chǎn)品對三道題的答題情況：

文心一言3.5解答結(jié)果

1

2

3

通義

1

2

3

元寶

1

2

3

豆包

1

2

3

百小應(yīng)

1

2

3

萬知

1

2

3

智譜清言

1

2

3

Kimi

1

2

3

九章大模型

1

2

3

ChatGPT

1

2

3

生成海報(bào)