Crie um algoritmo para excluir documentos duplicados

Job ID: 36677507

Budget: $10 – $30 USD

O código deverá:
Baixar o arquivo: http://www.eliasdeoliveira.com.br/dataSets/dataSet-TJSP.tar.gz
Encontrar os documentos duplicados;
Criar novos diretórios de destino em que, para cada um deles, haja apenas documentos não duplicados;
O restante pode ser excluído...