2023年3月MD benchmark測試最終章

——關(guān)于“跑經(jīng)典MD的計算機到底選什么配置”的終極討論

[本文首發(fā)于計算化學(xué)公社(http://bbs.keinsci.com/thread-35988-1-1.html)?| 文 熵增焓減 | yult-entropy@qq.com | 2023-03]

0? 寫在前面

為防止太早過時，本文不會給出具體的配置單，然而本文所寫的方案框架也只是基于近期硬件行情得出的，半年到一年后本文所寫的方案依然可能過時，故此類內(nèi)容會不定期更新，歡迎持續(xù)關(guān)注。

1? GMX

GMX機子的配置方案是最復(fù)雜、最值得仔細(xì)考慮的，GMX中的GPU加速在去年10月的文章中已經(jīng)有所介紹，且GMX手冊中寫得更詳細(xì)，這次就不贅述了。需要注意，下面會出現(xiàn)同樣的CPU搭配不同數(shù)量的GPU，或同樣數(shù)量的GPU搭配不同CPU的情況，歸根結(jié)底是每塊GPU分到的CPU資源不同，以及部署密度不同，這需要諸位明確自己的需求和預(yù)算，并參考本文測試結(jié)果來做選擇。不過這些方案使用的GPU都是4090，且分給每塊4090的CPU資源不會少得太極端，故不同方案之間單個模擬性能的差距不會超過20%，后文雷達(dá)圖中單個模擬性能的差距看上去很大是為了方便區(qū)分。

1.1? MD計算節(jié)點配置

1.1.1? 純消費級平臺

13900KF + 1 / 2RTX4090（DIY參考單價￥22000/36500）、7950X + 1 / 2RTX4090（DIY參考單價￥21000/35500）都是較優(yōu)的方案。

13900KF + RTX4090和7950X + RTX4090在常規(guī)用法下具有極致的單個模擬性能，性價比很高，且自己組裝很簡單，如果必須采購品牌整機，也非常容易采購到性價比較高者（一些品牌電競整機）。

13900KF + 2*RTX4090以及7950X + 2*RTX4090是向極致的整體性價比妥協(xié)的產(chǎn)物，稍微犧牲了一點單個模擬性能，且須DIY，把PCIe x16拆分為2個PCIe x8（轉(zhuǎn)接套件在TB上有現(xiàn)貨，前提是主板支持此拆分模式），還要自己想辦法穩(wěn)妥地安放兩塊4090（現(xiàn)有的支持顯卡豎裝的機箱只能支持1塊顯卡豎裝，另一塊怎么放要自己想辦法）。或許可以選擇板載2個CPU直出且支持配置成x8 / x8模式的PCIe x16 slot的主板（例如微星Z690 Carbon、微星X670E Carbon），再選擇水冷或渦輪（離心風(fēng)扇）散熱的4090，這樣直接裝就行，不需要多折騰，也可能更美觀，但會導(dǎo)致整機多花5000~6000元，偏離了極致性價比的初衷，適合懶癌患者。

另外，7950X + 2*RTX4090和13900KF + 2*RTX4090相比有個隱藏的優(yōu)點，即前者2塊4090分到的CPU資源基本相同，故同時進(jìn)行的2個參數(shù)相同的模擬的速度也基本相同，可以同步得到結(jié)果，更便于調(diào)度和使用；而后者一塊4090用8個P-Core，另一塊4090用16個E-Core，根據(jù)測試，GPU-resident模式下16個E-Core比8個P-Core慢5~10%。此外，有些人預(yù)算很有限，需要讓同一臺機器做各種類型的計算，涉及到一些純CPU并行的計算，此時線程間負(fù)載更均衡、不必?fù)?dān)心調(diào)度問題的7950X就有明顯優(yōu)勢。

1.1.2? 專業(yè)工作站平臺

2495X + 3 / 4*RTX4090、3475X + 4 / 5 / 6*RTX4090、3495X + 5 / 6*RTX4090都是較優(yōu)的方案，需注意CPU必須超頻使用，參考上一篇文章。

對于2495X，主板可使用華碩Pro WS W790-ACE，但ACE無BMC/IPMI功能，若對此功能有剛需，需要另購華碩IPMI擴展卡，而若將此擴展卡插在板載PCIe slot上，則第4塊4090只能獲得PCIe4.0 x8速率，故建議自行從板載SlimSAS接口轉(zhuǎn)出1個PCIe slot用于安裝IPMI擴展卡（轉(zhuǎn)接套件在TB上有現(xiàn)貨）。也可以使用華碩Pro WS W790E-SAGE SE，主要好處是不需要另外轉(zhuǎn)接IPMI擴展卡，且可以直接在主板上插4塊雙寬4090，不是必須用定制機箱+PCIe延長線乃至分體水冷方案。

對于3475X和3495X，主板應(yīng)使用華碩Pro WS W790E-SAGE SE。若預(yù)算極高，達(dá)到百萬級別，建議使用3475X + 6*RTX4090或3495X + 6*RTX4090作為MD計算節(jié)點搭建集群，主板上剩余的1個CPU直出PCIe x8 slot用于安裝56G IB卡；若要用100G IB卡，應(yīng)當(dāng)選擇支持PCIe 4.0者，否則插在PCIe x8 slot上無法跑滿100G，不過目前支持PCIe 4.0的100G IB卡還比較貴。

最后，根據(jù)筆者的了解，這些專業(yè)工作站平臺的方案都有對應(yīng)的品牌整機產(chǎn)品正在開發(fā)（包括塔式和機架式），且性價比不會比自行組裝差太多，適合必須采購整機者，也適合需要大規(guī)模采購并部署集群者，但如果是某些暴利服務(wù)器/工作站品牌，性價比直接歸零（個別品牌方利潤率甚至超過60%），建議抵制此類產(chǎn)品。不過，需要注意的是，由于一些特殊原因，對于3475X + 5 / 6*RTX4090、3495X + 5 / 6*RTX4090這4個配置，在品牌整機中只能使用分體水冷，因此售價相對較高，但其中6*4090配置的部署密度達(dá)到了極致，故對于需要大規(guī)模采購和部署者仍然非常推薦，當(dāng)然，這種情況下5*4090就完全不推薦了，因為這僅僅是給預(yù)算“剛好”只夠買這套單機且有條件DIY者準(zhǔn)備的方案。

1.1.3 各配置的直觀對比

此雷達(dá)圖以5分為基準(zhǔn)，若某個配置的某個方面低于5分則可認(rèn)為這是一個明顯的缺點。不難發(fā)現(xiàn)，有些配置看起來似乎平平無奇、不上不下，甚至有明顯缺點，但仍然作為推薦的配置，這是因為許多時候采購經(jīng)費是固定的，要盡可能多花又不能花超，所以需要在性價比合理的前提下給出更多整機單價不同的配置方案。值得一提的是，每個配置的具體方案都有許多，這些具體方案的某些指標(biāo)可能會與雷達(dá)圖有區(qū)別。例如13900KF + 2*RTX4090和7950X + 2*RTX4090，若用前文所述“美觀”的方案，則“整體性價比”、“部署密度”和“適合的采購規(guī)?！边@3項指標(biāo)與雷達(dá)圖中有顯著區(qū)別（下調(diào)1.5格、上調(diào)0.5格、上調(diào)1.5格）。又例如3475X + 6*RTX4090和3495X + 6*RTX4090，若用品牌整機方案，則“整體性價比”和“適合的采購規(guī)?！边@2項指標(biāo)與雷達(dá)圖中有顯著區(qū)別（下調(diào)2格、上調(diào)1格）。

1.2? 整體方案（按預(yù)算討論）

1.2.1? 2萬及以下

這個預(yù)算太少，上文最便宜的配置都需要2.1萬元。1.9~2萬可以降一降CPU和主板，例如7700X配便宜的B650（此時加-bonded gpu大概率更快），相應(yīng)地，電源也可降到850W；預(yù)算再低一些只能捏著鼻子買4080乃至4070Ti。

1.2.2? 2~10萬

這是目前比較常見的課題組采購預(yù)算。1~4臺13900KF / 7950X + RTX4090，或1~2臺13900KF / 7950X + 2*RTX4090，可以每臺機器配置大容量HDD，也可另配1臺NAS，視具體情況而定（若機器大于等于3臺或之后有再采購的計劃，建議這次先配好NAS）。

1.2.3? 10~20萬

這是也目前比較常見的課題組采購預(yù)算，處于比較“尷尬”的區(qū)間，可以分2類方案。

第1類方案：3~6臺13900KF + RTX4090或2~4臺13900KF + 2*RTX4090作為MD計算節(jié)點；1臺純CPU節(jié)點（推薦7950X）專用于分析MD軌跡；1臺可用容量50TB以上、網(wǎng)絡(luò)速率10G及以上的NAS用作存儲節(jié)點，若MD計算節(jié)點大于3臺，建議在NAS上建虛擬機用作ssh跳板機；1套2.5G及以上局域網(wǎng)。若之后有再采購的計劃，則這次所配NAS以及局域網(wǎng)的性能應(yīng)當(dāng)滿足之后的計劃，建議這次一步到位采購8盤位及以上的NAS（盤位不插滿），局域網(wǎng)提升到10G，并確保NAS獲得20G及以上網(wǎng)絡(luò)（例如給NAS用雙口10GbE網(wǎng)卡并配置端口聚合，相應(yīng)采購支持端口聚合的10G交換機；或直接給NAS用40GbE網(wǎng)卡，相應(yīng)采購10GbE+40GbE交換機），而NAS擴容可以等下一次采購。工位是否通過集群的局域網(wǎng)訪問單位局域網(wǎng)、互聯(lián)網(wǎng)，需看你單位具體規(guī)定，若不允許，可給工位PC配置2塊網(wǎng)卡，1塊接入校園網(wǎng)，另1塊接入集群，應(yīng)當(dāng)通過盡可能高的速率接入集群。

第2類方案：2臺2495X + 3 / 4*RTX4090，或1臺3475X + 4 / 5 / 6*RTX4090，或1臺3495X + 5 / 6*RTX4090；1套2.5G及以上局域網(wǎng)。整體性價比不如第1類方案，但密度更高。此方案不推薦另配1臺NAS和1臺數(shù)據(jù)分析節(jié)點，給每臺機子裝大容量HDD即可。若之后有再采購的計劃，NAS和數(shù)據(jù)分析節(jié)點可以等下次采購，而這次采購的網(wǎng)絡(luò)設(shè)備應(yīng)提升到10G，并確保可使之后添加的NAS獲得20G及以上網(wǎng)絡(luò)，例如用支持端口聚合的10GbE交換機或直接用10GbE+40GbE交換機。

1.2.4? 20~80萬

在這個預(yù)算區(qū)間內(nèi)，仍推薦組建無IB網(wǎng)絡(luò)的mini集群。

若干臺2495X + 3 / 4*RTX4090或3475X + 4 / 6*RTX4090或3495X + 6*RTX4090作為MD計算節(jié)點；1臺純CPU節(jié)點（推薦7950X）專用于分析MD軌跡；1臺可用容量100TB以上、網(wǎng)絡(luò)速率40G及以上的NAS用作存儲節(jié)點，若MD計算節(jié)點大于3臺，建議在NAS上建虛擬機用作ssh跳板機，同時以此分擔(dān)部分并行度高的MD軌跡分析工作；1套10G及以上局域網(wǎng)。

1.2.5? 80萬以上

推薦組建跨節(jié)點并行集群，以便進(jìn)行REMD（也稱并行回火，Parallel Tempering）、Metadynamics等同時啟動的模擬較多且涉及到各模擬間數(shù)據(jù)交換的MD任務(wù)。此時不推薦塔式機。

6臺以上3475X + 4 / 6*RTX4090或3495X + 6*RTX4090作為MD計算節(jié)點，MD計算節(jié)點之間通過56G或100G IB網(wǎng)絡(luò)連接；1臺純CPU節(jié)點（目前推薦5975WX~5995WX或）專用于分析MD軌跡；1臺可用容量200TB以上、網(wǎng)卡總速率40G及以上的NAS用作存儲+登錄節(jié)點，1套10G及以上局域網(wǎng)。

2? AMBER、NAMD3、SPONGE和Desmond等

這些都是“純CPU”方案的MD軟件，不需要很多CPU核心，最極端的情況下1塊GPU配1個CPU核心就足夠。且在不涉及多GPU并行的情況下，對PCIe帶寬需求也極低，故可以使用PCIe x16拆分為2個x8甚至4個x4的方案，下文會具體介紹。

2.1? MD計算節(jié)點配置

2.1.1? DIY

7600X + 1 / 4 / 5*RTX4090（DIY參考單價￥19000 / 66000/70000）是較優(yōu)的方案，若預(yù)算卡得比較準(zhǔn)，搭配2或3塊RTX 4090的方案也可以選擇。

與1.1.1節(jié)的情況類似，搭配2塊及以上RTX4090，需選擇支持PCIe拆分的主板。另外，對于搭配4或5塊4090的方案，TB上有現(xiàn)成的定制機箱可用，這種機箱的思路是把4塊4090固定在主板背面，注意選擇合適的PCIe拆分卡，第5塊4090可安裝在另一個規(guī)格大于等于PCIe4.0 x4的PCIe slot上（物理形態(tài)應(yīng)當(dāng)是x16尺寸或更短但尾部開口的），注意可能存在的PCIe slot共享帶寬的問題。

2.1.2? 品牌整機

務(wù)必使用單核性能強的CPU，不要被忽悠選服務(wù)器CPU。13600K / 7600X + 1 / 2*RTX4090、2455X + 4*RTX4090、3435X + 6*RTX4090都是較優(yōu)的方案，若預(yù)算卡得比較準(zhǔn)，2455X搭配3塊RTX 4090的方案也可以選擇。需注意2455X和3435X應(yīng)超頻到5GHz左右使用。如果實在找不到13600K / 7600X搭配RTX4090的品牌整機，CPU可適當(dāng)提升，但要盡可能少浪費。

2.2? 整體方案（按預(yù)算討論）

2.2.1? 2萬以下

1臺7600X + RTX4090，如果還要低，進(jìn)一步降配置的思路是優(yōu)先降CPU多核性能、主板規(guī)格、RAM大小，接下去刪除SSD保留HDD，最后再考慮降GPU和電源。

2.2.2? 2萬~10萬

1臺7600X + 1 ~ 5*RTX4090（DIY）或1~2臺13600K + 1 / 2*RTX4090（品牌整機）或1臺2455X + 4*RTX4090（品牌整機）；1套2.5G及以上局域網(wǎng)；不需要NAS，為每臺機器配置大容量HDD即可。

2.2.3? 10萬~20萬

第1類方案（DIY）：1~2臺7600X + 5*RTX4090，存儲和網(wǎng)絡(luò)參考2.2.2節(jié)。

第2類方案（品牌整機）：1臺3435X + 6*RTX4090或2臺2455X + 4*RTX4090，存儲方案參考2.2.2節(jié)。

2.2.4? 20萬~80萬

若干臺3435X + 6*RTX4090或2455X + 4*RTX4090，存儲和網(wǎng)絡(luò)參考1.2.4節(jié)。

2.2.5? 80萬以上

整體與1.2.5節(jié)類似，MD計算節(jié)點改為若干臺3435X + 6*RTX4090。

3?LAMMPS

LAMMPS需要具有FP64執(zhí)行單元的計算專用GPU，這類GPU中較新者都極度昂貴，因此單獨列出，且不按預(yù)算討論。Intel消費級的XeMAX GPU以及ARC系列也具有較強的FP64性能，但前者是筆記本電腦專用GPU，筆記本平臺不適合做長期工作在高負(fù)載狀態(tài)；而后者目前LAMMPS還未有專門優(yōu)化，且似乎還沒有用于加速LAMMPS的系統(tǒng)性測試，這值得持續(xù)關(guān)注。

3.1? DIY

7600X + 1 / 4 / 5*Tesla P100 / Tesla V100 16G，安裝方法與2.1.1節(jié)相同。核心思想是買1000多元的二手P100和5000元的二手V100 16G。

3.2? 品牌整機

品牌整機中沒有消費級平臺搭配計算專用GPU，只能選A100、A800等，其中H100目前價格過高，暫不推薦。另外，計算專用GPU的重要優(yōu)點是支持NVLink，而NVLink物理連接器并不貴，只要正確配置了NVLink，運行LAMMPS就可以獲得翻倍提升，NVLink連接了多少GPU，就能提升至多少倍，因此推薦在有2塊及以上GPU的情況下配置NVLink。也要注意務(wù)必使用單核性能強的CPU，不要被忽悠選服務(wù)器CPU。目前只推薦W790平臺，3435X + 4*A100 40GB PCIe / A800 40GB PCIe + NVLink是較優(yōu)的方案，但需注意，此方案單臺機器就需要30萬元，若預(yù)算只有8~15萬，推薦2455X + 1 / 2*A100 40GB PCIe / A800 40GB PCIe + NVLink。預(yù)算再低，要么想辦法加預(yù)算到至少8萬，要么回到DIY。

4? 關(guān)于GPU選擇的特別說明

用LAMMPS以外的程序做基于經(jīng)典力場的MD模擬不推薦購買A100、H100等計算專用GPU。若預(yù)算達(dá)到百萬以上，且對單個模擬性能有極端需求，那么可以用8塊A100/H100加NVLink或直接考慮NVIDIA DGX系統(tǒng)。實際上，追求暴力MD會讓成本上升到令人難以接受的程度，還無法與真正財大氣粗的團隊（例如擁有ANTON系列MD專用超算的DESRES）競爭。而如今增強采樣（Enhanced Sampling）方法已經(jīng)非常豐富，這類方法的普遍特點就是可以并行運行許多模擬，每個模擬不需要很長的時間尺度即可實現(xiàn)很好的采樣效果，效率比暴力MD高得多；各模擬之間的數(shù)據(jù)交換量較少或沒有，所以完全不需要計算專用GPU上的高速互聯(lián)功能（如NVLink），用消費級GPU性價比極高。例如200萬預(yù)算，可以組建包含60~80塊4090的高性能集群，也可購買1臺DGX A100，而在前者上跑主流的增強采樣MD，獲得有效結(jié)果的耗時比在后者上跑暴力MD短至少1個數(shù)量級（不拿DGX H100舉例，因為這東西目前無從得知現(xiàn)價，NVIDIA官網(wǎng)至今也未更新其HPC應(yīng)用性能測試）?？傊?，即使你有上百萬預(yù)算，也應(yīng)當(dāng)優(yōu)先考慮用數(shù)十塊4090組建集群，而非盲目購買A100、H100。此外，從Ada世代開始，RTX6000Ada之類“專業(yè)繪圖”GPU上的NVLink也被徹底取消了，而這類GPU用的是與同世代消費級GPU架構(gòu)完全相同的核心，F(xiàn)P64性能也極弱，因此在LAMMPS以及其他需要FP64加速的AIMD程序上也沒什么用，綜上，現(xiàn)在這類GPU在整個MD領(lǐng)域已一無是處，完全不推薦購買（A100、H100并非“完全不推薦”，前提是你能找到購買渠道和貨源，因為目前這些GPU的產(chǎn)能幾乎已被巨頭搶完）。

5? 如何采購？

經(jīng)?？吹接腥苏f“反正不是我的錢，買的東西性價比低也不心疼，怎么舒服怎么花”之類的的言論，這顯然非正人君子之態(tài)度，難道公費就可以隨意揮霍嗎？道理不言自明。

還有人說“學(xué)校里政府采購，自己決定不了供應(yīng)商”，這很值得討論?！吨腥A人民共和國政府采購法》第五條：任何單位和個人不得采用任何方式，阻撓和限制供應(yīng)商自由進(jìn)入本地區(qū)和本行業(yè)的政府采購市場。第八十三條：任何單位或者個人阻撓和限制供應(yīng)商進(jìn)入本地區(qū)或者本行業(yè)政府采購市場的，責(zé)令限期改正；拒不改正的，由該單位、個人的上級行政主管部門或者有關(guān)機關(guān)給予單位責(zé)任人或者個人處分。若真有限制供應(yīng)商的情況，這本身就是不合法的。若你不敢利用法律反駁，也完全可以事先與指定的供應(yīng)商商量具體配置方案，即使這些供應(yīng)商自己不能直接提供你想要的配置，也可以把項目轉(zhuǎn)給其他的商家（事實上多數(shù)情況下都是這么干的，因為這些“指定供應(yīng)商”往往是皮包公司），雖然這樣最終到手性價比可能會比本文雷達(dá)圖中所標(biāo)的低一些，但不會低太多，至少不會比某些暴利、嚴(yán)重溢價的品牌整機低，且可以確保拿到的是最合適的配置，而不是“單核性能很差的CPU配多塊4090”、“10萬預(yù)算配1塊A100/A800/RTX6000Ada跑GMX/AMBER”、“8個內(nèi)存通道只用了2個”等不合理配置（對于內(nèi)存通道浪費的情況，一般借口是“自己回去加內(nèi)存”，而事實是品牌整機的內(nèi)存兼容性低得令人發(fā)指，筆者所在實驗室用的某品牌雙路工作站，曾無數(shù)次出現(xiàn)無法開機的問題，售后拖了4個月上門換主板后問題依舊，最終是筆者自己排查到問題出在混用同參數(shù)但不同生產(chǎn)日期的DIMM上）?？傊?，大多數(shù)人說“自己決定不了供應(yīng)商”只不過是不愿意多做點溝通工作罷了，一個字概括，即“懶”。

再專門說說前文多次提到的“溢價的品牌整機”。首先，并非所有品牌整機都是嚴(yán)重溢價的，只要你愿意在這個行業(yè)里多打聽，必然可以找到售后好、溢價少且具有intel等上游廠商認(rèn)證的正規(guī)品牌整機。其次，那些嚴(yán)重溢價的品牌整機普遍以“售后服務(wù)”、“穩(wěn)定性”和“安全性”作為溢價理由，然而，對科研用途來說這3項指標(biāo)并不足以支撐某些品牌整機翻數(shù)倍的溢價幅度。先說“售后服務(wù)”。以京東自營作為對比，京東自營的售后服務(wù)是大眾公認(rèn)的頂級水平，只要消費者提交理由合理的售后申請就幾乎必然通過，對于不便維修的商品還能提供換新、上門換新甚至退貨退款（筆者作為在京東購買過上千件商品、提交過近百次售后申請的人，應(yīng)該比較有發(fā)言權(quán)），有這樣優(yōu)質(zhì)的售后服務(wù)，京東自營商品并沒有有翻倍溢價，甚至在一些促銷活動中價格比其他平臺還低。有人說整機商售后“很專業(yè)”、“上門速度快”，然而這些品牌商大多數(shù)售后服務(wù)人員都是外包的，專業(yè)水平參差不齊，水平比較差的還不如用戶自己；那些有水平的“編內(nèi)人員”數(shù)量稀少，幾乎不可能達(dá)到品牌商所宣傳的行動速度，要這些人上門，那么等待時間就得按周甚至月來計。再說“穩(wěn)定性”?！胺€(wěn)定性”是極難評估的指標(biāo)，硬件配置稍微變化一點（尤其是DIMM），對穩(wěn)定性都有極大影響，如果供應(yīng)商不能給出具體到各配件型號的某款整機產(chǎn)品的權(quán)威的穩(wěn)定性測試報告（一般只有原廠原裝未改配置的整機才滿足此條件），將其穩(wěn)定性和普通消費級產(chǎn)品等同即可；此外，“穩(wěn)定性”指標(biāo)只對于企業(yè)應(yīng)用以及保障社會穩(wěn)定運行的用途比較重要，而對于“意外情況”本就如同家常便飯、經(jīng)費貧瘠、人均技術(shù)水平較高的基礎(chǔ)科研領(lǐng)域來說幾乎不值一提，遑論以此無限溢價。最后說“安全性”。這可分為物理上的安全和信息安全兩種，前者只要通過國家3C認(rèn)證就有保障，最低端的消費級產(chǎn)品都能滿足；而后者主要在于人和整個軟硬件體系而不在于單一的硬件，單一硬件設(shè)計再安全也難以抵御內(nèi)鬼的破壞或者千瘡百孔的軟硬件體系，而且在科研領(lǐng)域，只要不是涉密項目，也不需要在硬件上專門做信息安全保障，使用基本的軟硬件并把好“人”這道關(guān)足矣，對于防止數(shù)據(jù)丟失的問題，關(guān)鍵是備份，而非某臺機器的硬件設(shè)計。總之，萬萬不能被吹得天花亂墜的“售后服務(wù)”、“穩(wěn)定性”和“安全性”蒙蔽了雙眼！

無論如何，只要采用本文推薦的方案，積極和供應(yīng)渠道以及把控采購的領(lǐng)導(dǎo)溝通，避開某些嚴(yán)重溢價的暴利產(chǎn)品，必然可以獲得配置合適、性價比不錯的用于跑經(jīng)典MD的計算機。

?

至此，“2023年3月MD benchmark測試”系列文章已完結(jié)，若需要具有合適排版的PDF文件（A4版面，共14頁），可在此下載：https://www.aliyundrive.com/s/yqo7Pv55cpH，提取碼: h1i7