1、SQL去重在SQL中，用dinstinct语句进行去重：获取去重后的结果：SELECTDISTINCTname,sexFROMperson;统计去重后的数量：SELECTCOUNT(DISTINCTname,sex)FROMperson;2、ES数据构建2.1创建索引fromelasticsearchimportElasticsearch#连接eses=Elasticsearch(hosts=["192.168.124.49:9200"],sniffer_timeout=60,timeout=30)body={"mappings":{"properties":{"id":{"type":"