Data deduplication in BitTorrent

João Pedro Amaral Nunes

Key information

Authors:

João Pedro Amaral Nunes (João Pedro Amaral Nunes)

Supervisors:

João Coelho Garcia (João Coelho Garcia); João Pedro Faria Mendonça Barreto (João Pedro Faria Mendonça Barreto)

Published in

11/07/2013

Abstract

BitTorrent is the most used P2P file sharing platform today, with hundreds of millions of files shared. The system works better the more sources one has to download from. However, BitTorrent only allows for users to find sources inside the same torrent, even if a file is totally or partially located in many other torrents as well. Using Deduplication techniques, we develop a system that allows users to detect and take advantage of those extra sources, and measure its efficacy at finding sources with a low overhead for the end user. BitTorrent é a plataforma de partilha de ficheiros P2P mais popular actualmente, com centenas de milhões de ficheiros a serem partilhados. Este sistema funciona melhor quanto mais fontes existirem para se descarregar o conteúdo. No entanto, o BitTorrent só disponibiliza aos seus utilizadores maneira de encontrar fontes dentro da mesma torrent, mesmo se um ficheiro se encontrar totalmente ou parcialmente presente noutras torrents. Utilizando técnicas de Deduplicação, desenvolvemos um sistema que permite aos seus utilizadores encontrar essas fontes extra, e posteriormente medimos a sua eficácia a encontrar novas fontes enquanto mantendo um custo adicional baixo para o utilizador final.