手機拍照搜題最準確的軟體(拍照搜題用什麼軟體最好)
網際網路教育研究院測評中心
一、 測評背景
網際網路科技與教育的結合,一方面使學習者獲取資源變得容易,同時也創造出了簡單高效的學習方式。如拍照搜題,基於系統內海量的題庫和圖片識別技術,當學生遇到學習難題,只需要用手機拍下問題的照片,提交給系統後很快就能得到解答。高效的應答為學生的課外學習提供了極大的方便,而且將答疑變成了一件隨時隨地的事情。
拍照搜題(簡稱“拍搜”)產品自2013年興起後,其滿足了學生學習問答的剛性需求,受到資本的熱烈追捧,各路豪傑紛紛加入了拍搜的行列,其中也不乏佼佼者獲得了風險投資,出現了不下十家同類產品。網際網路教育研究院測評中心耗時半個多月,對下載量比較高的五款拍照搜題APP做了測評,做出的此次測評,供業界人士參考。
名稱 | APP1 | APP2 | APP3 | APP4 | APP5 |
APP store | 394 | 2191 | 0 | 1832 | 990 |
百度手機助手 | 2585 | 4896 | 963 | 2162 | 0 |
安卓應用市場 | 353.9 | 3814.6 | 670.4 | 2372.6 | 6.8347 |
應用寶 | 362 | 3880 | 674 | 2534 | 1528 |
豌豆莢 | 125 | 480 | 72 | 5807 | 196 |
安智市場 | 20 | 600 | 40 | 100 | 100 |
魅族應用商店 | 154.2079 | 590.9602 | 34.9828 | 330.5247 | 174.6703 |
華為應用市場 | 122.4644 | 1643.46 | 98.2497 | 900.7298 | 388.5067 |
合計 | 4116.5723 | 18096.0202 | 2552.6325 | 16038.8545 | 3384.0117 |
表1:五款下載量比較高的APP 單位:萬次
一、 測評環境
1、測評所用手機
SAMSUNG-note2、小米1s、華為p7、iPhone5S。
2、測試所在環境
日光燈下、太陽光下、陰暗房間中。
3、測試所用軟體
從諸多同類產品中做了預篩選,排除了一些識別率低的產品,最後選取了五款拍搜APP軟體作為測試物件(排名不分先後)。
4、教材版本
初中和高中的人教版、蘇教版、北師版。
5、題型
選擇題、填空題、計算題、解答題。
二、 拍搜準確率測試結果
1、試題覆蓋率測試結果
由於初高中學生面臨升學壓力,對答疑的需求非常強烈,目前市面上的拍照搜題軟體面向的主要也是這個市場,因此我們選擇了中學階段的試題作為試題源,試題源來自百度文庫對應版本的試題。
為了觀察各拍搜APP在初中、高中兩個階段的題庫覆蓋率以及搜答案的正確率,我們分別在初中、高中3個版本的教材中選擇了436道題目進行了拍照搜題測試,下表是測試結果。
學段 | 拍搜A | 拍搜B | 拍搜C | 拍搜D | 拍搜E |
初中 | 85.19% | 85.65% | 83.33% | 91.67% | 92.13% |
高中 | 88.19% | 83.33% | 76.39% | 95.83% | 90.28% |
表2 各APP初中和高中拍搜正確率
從綜合表現來看,拍搜APP能夠達到宣稱的準確率和覆蓋率,對要搜答案的使用者來說,此類APP已經具備了實用價值。但各家拍搜APP對於初中和高中的題庫覆蓋面表現不一,最高可以達到95.83%,,最低的只有76.39%。
從測試的準確率上來看,拍搜APP呈現出梯隊效應。拍搜D和拍搜E位居第一梯隊,但兩者的綜合實力也在伯仲之間,實在難分高下。另外幾款APP在準確率上顯示要稍遜於前兩位。
2、 各教材版本的搜題結果
全國各省市中學使用的教材不盡相同,在不同版本的教材對應的練習題是否都能搜到?為了檢驗各拍搜APP的題庫是否能全面覆蓋各版本教材,不同版本教材的題目是否得到正確的答案,我們選取了人教版、蘇教版、北師大版三種教材,每個版本教材挑選了幾十道經典題目進行測試,以下是測試結果。
版本 | 拍搜A | 拍搜B | 拍搜C | 拍搜D | 拍搜E |
人教版 | 90.28% | 85.42% | 81.25% | 95.14% | 94.44% |
蘇教版 | 86.11% | 80.56% | 79.17% | 90.97% | 87.50% |
北師大版 | 86.11% | 77.78% | 69.44% | 88.89% | 88.89% |
綜合 | 87.50% | 81.25% | 76.62% | 91.67% | 90.28% |
表3 不同版本的拍搜正確率
從正確率的對照結果中,我們可以看出,各家APP對三個版本的教材基本全面覆蓋。其中人教版的搜題正確率最高,也說明了各家APP對於人教版教材的題目覆蓋率最高。綜合來看,各家對於各版本的教材覆蓋率上,拍搜D和拍搜E處於領先地位,其他三家尾隨其後。
3、不同題型的測試結果
一個優秀的拍照搜題APP應當能應對選擇題、填空題、計算題、解答題等多種題型,這取決於各家APP對於各類題型的覆蓋情況。為了能綜合反映各APP對各科不同題型的應對情況,我們將各科題目綜合分成選擇題、計算題、解答題三類,使用五款APP對題目進行了多次測試,以下是測試結果。
圖1 對不同題型的拍搜正確率
資料顯示,在各題型上,五家APP的覆蓋率都算不錯。在選擇題上,拍搜D和拍搜E並駕齊驅,正確率高達93%。拍搜A、拍搜B和拍搜C比起前兩者稍遜風騷。在計算題上,仍是拍搜D處於領先地位,後面的拍搜E緊隨機後。另外三者稍遜風騷。而在解答題上,拍搜A、拍搜D和拍搜E三雄爭霸,正確率都高達93%,另外兩者仍處於追趕階段。
4、綜合準確率測試結果
在測評過程中我們發現,各家拍搜APP在拍照搜題的結果上可以歸為以下三種:(1)正確答案:即正確搜到與原題完全對應的答案;(2)模糊答案:即搜到的結果包括了原題的答案,雖然搜到的試題答案並不完全對應於原題,但對解題仍有幫助,因此我們將其定義模糊答案;(3)錯誤答案:原試題與搜到的試題對應不上,或者答案有錯誤。
本報告將搜題三種結果對比搜題總數的概率分別稱為“正確率”、“模糊率”和“錯誤率”。在綜合年級、教材版本、題型三種因素的測試結果,通過正確率、模糊率、錯誤率應該就可以反映各家APP的綜合指標。以下是綜合各項資料的測試結果圖。
APP | 正確率 | 錯誤率 | 模糊率 |
拍搜D | 92.59% | 6.02% | 1.39% |
拍搜E | 90.97% | 7.64% | 1.39% |
拍搜A | 86.34% | 11.34% | 2.31% |
拍搜B | 83.56% | 13.89% | 2.55% |
拍搜C | 78.70% | 19.91% | 1.39% |
表4 五款APP拍搜正確率指標
各款APP除了比的是拍照識別的技術以外,也同時比拼的是在試題數量、機器學習、大資料處理等方面的實力,測試結果表明,不同的產品的確有差距:五款APP拍搜正確率最高的為92.59%(拍搜D),最低的僅有78.70%(拍搜C),中間位置的產品也有一些差別。這說明主流拍搜APP在準確率上,已經拉開很大的差距。
5、不同光線下的測試結果
照片識別是一門高階技術,識別的效能將直接影響到拍照搜題的正確率。為了檢驗在不同光照度對拍照搜題是否會產生影響,我們選擇了在三種照度下對五家APP進行了拍照搜題測試。
首先我們從已經測試過的題目中抽取10道所有APP都能搜到的題作為測試用題,摒除題目因素的干擾。其次準備了一部拍照效果相對較好的三星note2作為測試裝置,摒除照片質量因素的干擾。最後我們分別在白天日光、夜晚開燈、昏暗不開燈的三種室內環境下進行測試工作,以下是測試結果。
光照條件 | 拍搜A | 拍搜B | 拍搜C | 拍搜D | 拍搜E |
在8lux照度下(非常昏暗) | 100.00% | 100.00% | 100.00% | 100.00% | 100.00% |
在167lux照度下(白熾燈下) | 100.00% | 100.00% | 100.00% | 100.00% | 100.00% |
在10560lux照度(室內陽光下) | 100.00% | 100.00% | 100.00% | 100.00% | 100.00% |
(照度計型號:TES 1332A lux:勒克斯為照度單位)
上表5 在不同照度下各APP的正確率
對照表格反應,各家拍搜APP在三種照度環境下拍照搜題的正確率均為100%,可以得出結論:在不同照度下,五家拍搜APP表現優秀,這也說明了在照度不同的情況下,拍搜APP的正確率基本不受光照影響。
6、系統穩定性測試結果
在軟體的穩定性測試方面,我們對該五款拍照搜題APP進行了系統測試。其中包括對五款軟體是否出現閃退、有無bug、系統有無反應、安裝、啟動、執行解除安裝方面的測試,還對在執行系統時接打電話、收發簡訊等對使用的影響測試。
(1)在是否出現閃退、有無bug、系統有無反應方面的測試
APP | 所出現問題 | 安裝/啟動/解除安裝 |
拍搜A | 系統反應良好、無閃退現象 | 良好 |
拍搜B | 出現無論拍什麼都出現同一個答案的bug | 良好 |
拍搜C | 系統反應較慢、無閃退現象 | 良好 |
拍搜D | 系統反應良好、無閃退現象 | 良好 |
拍搜E | 系統反應良好、無閃退現象 | 良好 |
表6 各APP執行穩定性對比
從上述測試中發現:拍搜B在測試過程中出現了bug現象,在多次拍攝同一問題時,之前拍攝出答案全部正確,而後再次拍攝出現了搜尋不出答案現象;拍搜C在此次測試中系統反應較慢;而其他APP在測試過程中都無出現閃退及bug現象。
(2)在執行系統時接打電話、發簡訊時對使用的影響
我們對五款軟體在每款逐一執行期間打電話,發簡訊,來檢測它們是否對系統有所影響。在系統執行測試時,我們在開啟軟體、拍攝問題、進行答案解答等時刻,對這每一個環節進行打電話,發簡訊各三次,來觀測它們是否對軟體有所影響。經過測試,這五款軟體執行狀況良好,沒有出現異常。
一、 其他指標測評結果
除了拍照搜題功能外,測評人員還對各APP的其他效能指標,如互動設計、操作效能、核心和高階功能進行了測評,以下是測評結果。
測評指標 | 滿分值 | 拍搜A | 拍搜B | 拍搜C | 拍搜D | 拍搜E | |
圖示設計符合產品特性 | 3 | 2 | 2 | 3 | 2 | 2 | |
介面設計美觀度 | 3 | 3 | 3 | 2 | 3 | 3 | |
操作是否符合使用者習慣 | 5 | 4 | 4 | 3 | 4 | 4 | |
不同移動裝置是否有適配 | 4 | 4 | 4 | 3 | 4 | 4 | |
下載安裝是否方便 | 2 | 2 | 2 | 2 | 2 | 2 | |
註冊登入是否方便 | 3 | 3 | 3 | 3 | 3 | 3 | |
啟動速度快慢 | 5 | 4 | 4 | 3 | 4 | 3 | |
操作是否流暢 | 5 | 5 | 5 | 3 | 5 | 5 | |
是否有答題記錄功能 | 4 | 3 | 3 | 4 | 3 | 3 | |
基本功能是否滿足要求 | 6 | 5 | 5 | 5 | 5 | 5 | |
是否有意見反饋功能 | 5 | 4 | 4 | 3 | 4 | 4 | |
拍照搜題是否便捷 | 12 | 11 | 11 | 9 | 10 | 10 | |
搜題的速度 | 10 | 9 | 9 | 7 | 9 | 8 | |
搜題的正確率 | 17 | 16 | 16 | 14 | 16 | 15 | |
答案是否詳細專業 | 16 | 15 | 15 | 13 | 15 | 15 | |
總分 | 100 | 90 | 90 | 77 | 89 | 86 |
表7 各APP綜合評分指標
在軟體互動設計上,各APP均表現優異,而在提升使用者體驗上都或多或少有進步的空間。在答題的高階功能——人工答題上,此項功能尚待開發,不在評述之列。另外四款軟體中拍搜A和拍搜E具有更好的使用者體驗,拍搜B和拍搜C在體驗和服務上有待提升。
二、 測評總結
通過對五款拍搜APP的系統測試,我們發現各家APP在功能上基本能滿足學生答疑解難的剛性需求,而在一些高階功能和軟體細節上還有待完善。
測試資料顯示,各家APP的綜合答題正確率有高有低,從78.70%到92.59%不一。部分軟體在題庫的題目數量上有待提升,因為題目的數量直接影響著答題的正確率,而答題正確率是考驗拍搜APP實力的核心指標。
在系統穩定上看,個別軟體有小問題需要改進,大多數軟體均表現良好,答題的穩定性不受光照和手機其他應用執行的影響。在互動設計方面,各家表現優異,頁面設計和佈局基本符合使用者美感和習慣,而在線上實時答疑的使用者體驗和服務上,均有上升的空間。
通過測評的結果,各家的綜合實力讓我們看到了線上答疑市場的希望。拍搜APP為學生的完成課外作業提供了有效的工具,同時也因為工具強大,導致學校和教師對此類產品的排斥,禁止學生使用此類產品。但是技術上的革命引發學習方式的變革不可避免,是大勢所趨勢。
三、 未來展望
拍照搜題切中使用者剛性需求、場景明確、技術門檻高,成為2014年和2015線上教育行業的熱點。從本測評報告的結果來看,在拍搜的賽道上,競爭選手之間的差距正在拉大。可以預測這個領域未來必然是寡頭遊戲,只有少數企業才具備角逐老大的實力,其他企業如無資金和技術支撐,淘汰出局是必然。
但是這並不說明正確率沒有排在前列,就沒有競爭優勢。除了技術優勢以外,還有市場推廣、資本實力等諸多原因,比如某APP具有BAT級別的優勢資源,在技術上未必領先,但是不可或缺的戰略資源帶來了海量使用者,這也是同類產品不可比擬的優勢。
拍照搜題僅僅是獲取流量的入口,還沒有形成完整的商業模式閉環。K12線上教育雖然競爭激烈,但是還遠沒有到沒有產品和技術無法創新的程度,只要真正懂教育和網際網路,是可以找到新的需求熱點,避免產品同質化競爭,從而把高科技在教育中的應用推向新的高度。
網際網路教育研究院測評中心(www.medu.org.cn)
網際網路教育研究院(網址:http://www.medu.org.cn)是專注於中國網際網路教育產業的研究、諮詢、服務機構,主要承擔以下職能:
Ø 專案諮詢:提供網際網路教育產業諮詢服務
Ø 研究報告:撰寫行業研究報告,提供權威行業研究成果
Ø 技術培訓:為網際網路教育培育人才
Ø 學術論壇:組織大中型網際網路教育論壇,促進產業發展
Ø 產品研究:對最新網際網路教育產品和技術進行研究和測評
Ø 交流活動:組織各種交流活動,推進線上教育行業交流
網際網路教育研究院自成立以來,先後撰寫並發表了100餘篇線上教育相關文章和2本專著(《中國線上教育產業藍皮書》、《線上教育微課修煉之道》)、3本研究報告(《中小學線上教育產業研究報告》、《線上職業教育產業研究研究報告》、《線上語言學習產業研究報告》等),對中國網際網路教育行業產生了深遠的影響。
網際網路教育研究院先後組織和參與了100多場網際網路教育教育相關論壇與會議,曾接受CCTV、《重慶衛視》、《中國企業家》、《21世紀經濟報道》、《中國經營報》、《北京商報》、《中國教育電視臺》等數十家媒體的採訪和報道,相關報道閱讀量數百萬人次。
網際網路教育研究院公眾號:eduforum,分享原創深度網際網路教育文章。