相當於同一行：“遼寧，瀋陽”與“遼寧，大連”這是不重複資料，但是如果不關聯，遼寧就是重複資料，不知道我說明白了麼？

對WPS不瞭解，但是應該跟Excel的功能很相似吧。問題提的不是很清楚，所以你可以認真看一下我給你的案例。

首先，我們根據條件格式挑選重複項，可以看到電話號碼和姓名均有重複，有的是姓名+電話號碼一模一樣，有的電話號碼隨重複但是姓名卻不一樣。

以當前選定區域排序，結果為：

姓名沒有變化，而電話號碼都變成了不重複的。

結果為：

而電話號碼還有重複的。

具體操作如下：

第一步：匯入PowerQuery

去重後結果：

選擇載入回Excel.

該方式去重原始資料發生變化後，只需要在去重結果表內右擊重新整理即可完成聯動資料更新，一次完成，永久使用！

對多列資料呢？如下圖：

操作提示不考慮其它列，只留唯一“名稱”

結果是：

原資料中，名稱相同的資料行，預設保留第一行資料。

考慮多列

結果是：

結果是：

說到重複值，再來科普一個填充重複值的快捷鍵

Alt +↓

看動圖

是不是特別方便～get新技能

從各種系統中匯出的資料，往往會存在重複值；因為人為操作不當，也會產生很多重複值。表格中存在著大量的重複值是非常影響分析結果的，因此，我們在做資料分析之前，必須要快速地刪除表格中的重複專案，提高資料分析的準確性；另外，標識表格中的重複項以及得到“唯一值”列表在我們的工作中有著重要的用途和意義，本文的4個簡單技巧將快速地幫你解決這些問題。

2.高階篩選：用我也很方便噠

3.條件格式：我有一雙火眼金睛

4.資料透視表：我可是無所不能，耶！

下面我們先從第一個技巧開始：

刪除重複值：一招鮮吃遍天

從Excel 2010開始，Excel新增了一個非常棒的新功能：刪除重複項。位置就在資料選項卡下，這個功能可以一鍵幫我們刪除任意表格或者任意選區中的重複值。如下圖所示，我們需要刪除A3:B17中的重複值，該怎麼做呢？

滑鼠單擊法：

1.選擇A3:A17區域；

3.勾選“擴充套件選定區域”--確定；

4.確定。

123456

快捷鍵法：

1.選擇A3:A17區域；

2.按下Alt+A+M,選擇“擴充套件選定區域”；

3.單擊確定--確定。

1234

來個動畫演示：

動畫演示1高階篩選：用我也很方便噠

技巧：

按下Alt+A+Q--勾選對話最下方的“擇不重複記錄”；

單擊確定即可。

123

來一發動畫演示安利一下小夥伴們：

動畫演示2條件格式：我有一雙火眼金睛

條件格式這個功能在我平時中使用頻率是極其高的，而在這其中使用的更為頻繁的就是標識重複值。功能因為使用簡單，而工作中使用頻率高而成為職場人士必知必會的技巧之一。下面我就簡單介紹一下，先來一波圖，再來一個動畫好了：

1.選單單擊法2.快捷鍵法

動畫演示：

動畫演示3資料透視表：我可是無所不能，耶！

如何提取唯一值列表，篩選說，我可以做啊，但是你只能看，卻不能複製出來。刪除重複項說，我也可以。經我確認，刪除重複項確實可以。今天我給介紹，用資料透視表來得到唯一值列表的方法。

方法很簡單，直接上動畫就好了。

1、在excel中有一個功能是“高亮度顯示重複項”，你只需使用這個功能即可標記出重複資料了，具體操作步驟如下：首先，選中需篩選重複項的那列單元格。其次，點選工具欄中的"資料"一欄，選擇"重複項"。最後，在彈出來的選項中選擇“高亮度顯示重複項”，然後點選“設定”，最後按“確定”即可。需要注意的是，這時該列重複的資料背景就會自動被填充成其它顏色，再透過“篩選"功能中的"顏色篩選"功能，將背景為填充色的單元格過濾即可。

2、使用條件格式功能。你需要做的第一件事就是選中你想要用來比較重複項的所有資料。點選資料組左上角的單元格，開始選取資料操作。按住Shift按鍵，點選最後一個單元格。注意，最後一個單元格位於資料組的右下角位置。這會全選你的資料。你也可以換順序選擇單元格（例如，先點選右下角的單元格，再從那裡開始標記選中其它單元格）。點選“條件格式”。它位於工具欄的“開始”選項卡下（一般位於“樣式”部分中）。點選它，會出現一個下拉選單。選擇“突出顯示單元格規則”，然後選擇“重複值”。 在進行此項操作時，確保你的資料處於選中狀態。接著會出現一個視窗，裡面有不同的自定義選項和對應的下拉設定選單。從下拉選單中選擇“重複值”。如果你想要程式顯示所有不同的值，可以選擇“唯一”。選擇填充文字的顏色。這樣所有重複值的文字顏色就會變成你選擇的顏色，以突出顯示。預設顏色是深紅色。點選“確定”來瀏覽結果。

說到重複資料，對“重複”的理解非常重要，這也是掌握去重的核心。我們說資料重複，避不開兩個層面：一是範圍；二是相同。

什麼意思呢？

相同指的是兩個資料必須一模一樣；範圍指的是，兩個資料重複是在一定的範圍內而言的。

如圖所示，著眼範圍是“產品名”的話，這兩個資料是重複的；著眼範圍是兩條完整的記錄的話，這兩條資料是不重複的。

重複的兩個層面，“資料相等”這一層面很直觀，一般不會搞錯，但是對於很多新手來說，卻往往忽視了“範圍”這一層面。因此，在去重的過程中，一定要首先明確操作的範圍，這將直接影響去重的結果。

正是因為判定重複，需要先界定範圍，所以才會出現你問題中的兩個選項：

①擴充套件選定區域②以當前選定區域進行排序

那麼，這兩個選擇定到底是什麼意思呢？

①擴充套件選定區域：Excel識別出來了我們所選的列（本列中為D列）周圍還有資料，勾選這個選項，則會將整個資料區域作為一個整體進行判斷，只有A、B、C、D四個列單元格中的值全都一樣，才認為是重複項；

如圖，做一個示例示的表格，有兩個重複資料項：

如圖，兩個重複項只保留了一個：

Excel中的重複單元格確實十分礙事，對資料統計分析影響極大。那怎麼高效清理Excel重複資料呢？

二、高階篩選三、Countif函式

在空白單元格中輸入公式「=COUNTIF($A$1:A2,A2)」，結果為1說明該資料第一次出現，即沒有重複值，結果為2說明該資料第二次出現，即存在重複值。

四、條件格式

使用這個命令，前提是你的Excel版本足夠高，低版本的Excel是沒有這個功能的，具體的演示如下：

2、如果版本不夠高，推薦兩個函式，第一個是countif函式。

這個函式是條件計數，可以根據給出的條件對區域內的數值進行計數。

match函式查詢的是資料在整個區域當中的位置，只要找到過一次，下一次找到相同的資料也一定會返回第一次查詢到的位置，然後再跟資料所在的行進行對比，跟行號相等的，就是第一次出現的，返回true，否則就返回false。

最後一個方法就是資料透視表了，因為資料透視表要對區域進行操作，所以，要加一個輔助列，其實沒什麼用處。具體看動圖吧。

順序按下快捷鍵alt+d+p建立資料透視表，把姓名拖進行欄位，再把姓名拖進值區域，在行欄位顯示的就是不重複的數值了，直接複製出來就行。

公式法配合篩選去重；

透視表去重法；

選擇資料區域；

選擇判斷的列

確定

公式法去重

常用的判斷重複的公式，可以使用Countif或者match函式來判斷重複項。

這個函式很簡單，判斷A2單元格在A列出現的次數，大於1次，則表示有重複；

當然，也是可以使用Vlookup或者match等函式進行判斷，大家可以自己試試！

透視表去重法

使用簡單透視表，也可以直接合並重復項，實現去重目的。

步驟如下：

選擇資料區域任意位置；

插入透視表；

將需要判斷重複的列拖拉到行標籤

3.COUNTIF函式

以此圖為例，使用COUNTIF函式，新建新的一列，在C2的單元格內輸入公式“=COUNTIF（B2：B12，B2）”，拖動滑鼠至C12單元格，然後選擇C1，點選【篩選】，只勾選“1”，點選確定。

選中資料，點選導航欄“資料-選擇刪除重複值”即可，這是操作說明：https://quqi.com/s/839459/VEAhACWMjc7UtdH7；平時我們也有整理一些關於Excel的小技巧，你可以看看對你是否有幫助https://quqi.com/s/839459/7JLmtmPc6P0kNo19；

當然，如果想要保留原始資料的話，可以選擇“將篩選結果複製到其他區域”，將不重複的內容提取出來。不過，只有行/列內重複的資料完全一樣才可以哦！

3、禁止錄入重複值

想要清除重複值，除了事後檢查之外，對於一些具有唯一性的資料，如身份證、訂單號等資料，我們還可以直接透過設定公式來禁止錄入重複值哦！

透過“資料—資料驗證—設定（自定義）--公式”，輸入公式“= COUNTIF(A:A,A1)<2”，當錄入重複數值時，就會有提示資訊了。

1、擴充套件選定區域

該選項是會選擇其餘的列，比如A和B,

判斷重複項時會綜合A列和B列的資料，

例如：該表選擇擴充套件選定區域A和B時，結果如下：

勾選該選項後，效果如下：

問題原因： 模型資料過大：雖然Excel檔案本身不大可能不到1M，但是對於超過10個的sheet頁，以及每個頁有大量的列表，生成的JSON模型可能達到幾個M，以大連行政平臺的費用分攤為例，JSON模型達6M；

解決方法，需要設定幾個關口： （1）使用tomcat伺服器，tomcat對於前臺傳送而來的ajax post請求有最大值限制，一般預設為2M，所以需要maxPostSize=“0”

(2)如果使用mysql資料庫，mysql資料庫自身對於客戶端傳遞而來的package包也有限制，需要登入mysql後臺，設定max_allowed_packet，預設是1M set global max_allowed_packet = 210241024*10; // 設定為20M

(3)對於mysql資料庫中的form_templete表中的content欄位必須是mediumtext 或者longtext，否則也會出現無法插入的問題

具體可參考東軟平臺產品官網，https://platform.neusoft.com/