source: trunk/libtransmission/peer-mgr.c @ 6453

Last change on this file since 6453 was 6453, checked in by charles, 13 years ago

back out the changes from r6415.

  • Property svn:keywords set to Date Rev Author Id
File size: 54.7 KB
Line 
1/*
2 * This file Copyright (C) 2007-2008 Charles Kerr <charles@rebelbase.com>
3 *
4 * This file is licensed by the GPL version 2.  Works owned by the
5 * Transmission project are granted a special exemption to clause 2(b)
6 * so that the bulk of its code can remain under the MIT license.
7 * This exemption does not extend to derived works not owned by
8 * the Transmission project.
9 *
10 * $Id: peer-mgr.c 6453 2008-08-08 22:44:32Z charles $
11 */
12
13#include <assert.h>
14#include <string.h> /* memcpy, memcmp, strstr */
15#include <stdlib.h> /* qsort */
16#include <stdio.h> /* printf */
17#include <limits.h> /* INT_MAX */
18
19#include <event.h>
20
21#include "transmission.h"
22#include "blocklist.h"
23#include "clients.h"
24#include "completion.h"
25#include "crypto.h"
26#include "handshake.h"
27#include "inout.h" /* tr_ioTestPiece */
28#include "net.h"
29#include "peer-io.h"
30#include "peer-mgr.h"
31#include "peer-mgr-private.h"
32#include "peer-msgs.h"
33#include "ptrarray.h"
34#include "ratecontrol.h"
35#include "stats.h" /* tr_statsAddDownloaded */
36#include "torrent.h"
37#include "trevent.h"
38#include "utils.h"
39#include "webseed.h"
40
41enum
42{
43    /* how frequently to change which peers are choked */
44    RECHOKE_PERIOD_MSEC = (10 * 1000),
45
46    /* minimum interval for refilling peers' request lists */
47    REFILL_PERIOD_MSEC = 333,
48
49    /* when many peers are available, keep idle ones this long */
50    MIN_UPLOAD_IDLE_SECS = (60 * 3),
51
52    /* when few peers are available, keep idle ones this long */
53    MAX_UPLOAD_IDLE_SECS = (60 * 10),
54
55    /* how frequently to decide which peers live and die */
56    RECONNECT_PERIOD_MSEC = (2 * 1000),
57
58    /* max # of peers to ask fer per torrent per reconnect pulse */
59    MAX_RECONNECTIONS_PER_PULSE = 4,
60
61    /* max number of peers to ask for per second overall.
62     * this throttle is to avoid overloading the router */
63    MAX_CONNECTIONS_PER_SECOND = 8,
64
65    /* number of unchoked peers per torrent.
66     * FIXME: this probably ought to be configurable */
67    MAX_UNCHOKED_PEERS = 12,
68
69    /* number of bad pieces a peer is allowed to send before we ban them */
70    MAX_BAD_PIECES_PER_PEER = 3,
71
72    /* use for bitwise operations w/peer_atom.myflags */
73    MYFLAG_BANNED = 1,
74
75    /* unreachable for now... but not banned.  if they try to connect to us it's okay */
76    MYFLAG_UNREACHABLE = 2
77};
78
79
80/**
81***
82**/
83
84/* We keep one of these for every peer we know about, whether
85 * it's connected or not, so the struct must be small.
86 * When our current connections underperform, we dip back
87 * into this list for new ones. */
88struct peer_atom
89{   
90    uint8_t from;
91    uint8_t flags; /* these match the added_f flags */
92    uint8_t myflags; /* flags that aren't defined in added_f */
93    uint16_t port;
94    uint16_t numFails;
95    struct in_addr addr;
96    time_t time;
97    time_t piece_data_time;
98};
99
100typedef struct
101{
102    uint8_t hash[SHA_DIGEST_LENGTH];
103    tr_ptrArray * outgoingHandshakes; /* tr_handshake */
104    tr_ptrArray * pool; /* struct peer_atom */
105    tr_ptrArray * peers; /* tr_peer */
106    tr_ptrArray * webseeds; /* tr_webseed */
107    tr_timer * reconnectTimer;
108    tr_timer * rechokeTimer;
109    tr_timer * refillTimer;
110    tr_torrent * tor;
111    tr_peer * optimistic; /* the optimistic peer, or NULL if none */
112    tr_bitfield * requestedPieces;
113
114    unsigned int isRunning : 1;
115
116    struct tr_peerMgr * manager;
117}
118Torrent;
119
120struct tr_peerMgr
121{
122    tr_handle * handle;
123    tr_ptrArray * torrents; /* Torrent */
124    tr_ptrArray * incomingHandshakes; /* tr_handshake */
125};
126
127#define tordbg(t, fmt...) tr_deepLog( __FILE__, __LINE__, t->tor->info.name, ##fmt )
128
129/**
130***
131**/
132
133static void
134managerLock( const struct tr_peerMgr * manager )
135{
136    tr_globalLock( manager->handle );
137}
138static void
139managerUnlock( const struct tr_peerMgr * manager )
140{
141    tr_globalUnlock( manager->handle );
142}
143static void
144torrentLock( Torrent * torrent )
145{
146    managerLock( torrent->manager );
147}
148static void
149torrentUnlock( Torrent * torrent )
150{
151    managerUnlock( torrent->manager );
152}
153static int
154torrentIsLocked( const Torrent * t )
155{
156    return tr_globalIsLocked( t->manager->handle );
157}
158
159/**
160***
161**/
162
163static int
164compareAddresses( const struct in_addr * a, const struct in_addr * b )
165{
166    return tr_compareUint32( a->s_addr, b->s_addr );
167}
168
169static int
170handshakeCompareToAddr( const void * va, const void * vb )
171{
172    const tr_handshake * a = va;
173    return compareAddresses( tr_handshakeGetAddr( a, NULL ), vb );
174}
175
176static int
177handshakeCompare( const void * a, const void * b )
178{
179    return handshakeCompareToAddr( a, tr_handshakeGetAddr( b, NULL ) );
180}
181
182static tr_handshake*
183getExistingHandshake( tr_ptrArray * handshakes, const struct in_addr * in_addr )
184{
185    return tr_ptrArrayFindSorted( handshakes,
186                                  in_addr,
187                                  handshakeCompareToAddr );
188}
189
190static int
191comparePeerAtomToAddress( const void * va, const void * vb )
192{
193    const struct peer_atom * a = va;
194    return compareAddresses( &a->addr, vb );
195}
196
197static int
198comparePeerAtoms( const void * va, const void * vb )
199{
200    const struct peer_atom * b = vb;
201    return comparePeerAtomToAddress( va, &b->addr );
202}
203
204/**
205***
206**/
207
208static int
209torrentCompare( const void * va, const void * vb )
210{
211    const Torrent * a = va;
212    const Torrent * b = vb;
213    return memcmp( a->hash, b->hash, SHA_DIGEST_LENGTH );
214}
215
216static int
217torrentCompareToHash( const void * va, const void * vb )
218{
219    const Torrent * a = va;
220    const uint8_t * b_hash = vb;
221    return memcmp( a->hash, b_hash, SHA_DIGEST_LENGTH );
222}
223
224static Torrent*
225getExistingTorrent( tr_peerMgr * manager, const uint8_t * hash )
226{
227    return (Torrent*) tr_ptrArrayFindSorted( manager->torrents,
228                                             hash,
229                                             torrentCompareToHash );
230}
231
232static int
233peerCompare( const void * va, const void * vb )
234{
235    const tr_peer * a = va;
236    const tr_peer * b = vb;
237    return compareAddresses( &a->in_addr, &b->in_addr );
238}
239
240static int
241peerCompareToAddr( const void * va, const void * vb )
242{
243    const tr_peer * a = va;
244    return compareAddresses( &a->in_addr, vb );
245}
246
247static tr_peer*
248getExistingPeer( Torrent * torrent, const struct in_addr * in_addr )
249{
250    assert( torrentIsLocked( torrent ) );
251    assert( in_addr );
252
253    return tr_ptrArrayFindSorted( torrent->peers,
254                                  in_addr,
255                                  peerCompareToAddr );
256}
257
258static struct peer_atom*
259getExistingAtom( const Torrent * t, const struct in_addr * addr )
260{
261    assert( torrentIsLocked( t ) );
262    return tr_ptrArrayFindSorted( t->pool, addr, comparePeerAtomToAddress );
263}
264
265static int
266peerIsInUse( const Torrent * ct, const struct in_addr * addr )
267{
268    Torrent * t = (Torrent*) ct;
269
270    assert( torrentIsLocked ( t ) );
271
272    return getExistingPeer( t, addr )
273        || getExistingHandshake( t->outgoingHandshakes, addr )
274        || getExistingHandshake( t->manager->incomingHandshakes, addr );
275}
276
277static tr_peer*
278peerConstructor( const struct in_addr * in_addr )
279{
280    tr_peer * p;
281    p = tr_new0( tr_peer, 1 );
282    p->rcToClient = tr_rcInit( );
283    p->rcToPeer = tr_rcInit( );
284    memcpy( &p->in_addr, in_addr, sizeof(struct in_addr) );
285    return p;
286}
287
288static tr_peer*
289getPeer( Torrent * torrent, const struct in_addr * in_addr )
290{
291    tr_peer * peer;
292
293    assert( torrentIsLocked( torrent ) );
294
295    peer = getExistingPeer( torrent, in_addr );
296
297    if( peer == NULL ) {
298        peer = peerConstructor( in_addr );
299        tr_ptrArrayInsertSorted( torrent->peers, peer, peerCompare );
300    }
301
302    return peer;
303}
304
305static void
306peerDestructor( tr_peer * peer )
307{
308    assert( peer );
309    assert( peer->msgs );
310
311    tr_peerMsgsUnsubscribe( peer->msgs, peer->msgsTag );
312    tr_peerMsgsFree( peer->msgs );
313
314    tr_peerIoFree( peer->io );
315
316    tr_bitfieldFree( peer->have );
317    tr_bitfieldFree( peer->blame );
318    tr_rcClose( peer->rcToClient );
319    tr_rcClose( peer->rcToPeer );
320    tr_free( peer->client );
321    tr_free( peer );
322}
323
324static void
325removePeer( Torrent * t, tr_peer * peer )
326{
327    tr_peer * removed;
328    struct peer_atom * atom;
329
330    assert( torrentIsLocked( t ) );
331
332    atom = getExistingAtom( t, &peer->in_addr );
333    assert( atom );
334    atom->time = time( NULL );
335
336    removed = tr_ptrArrayRemoveSorted( t->peers, peer, peerCompare );
337    assert( removed == peer );
338    peerDestructor( removed );
339}
340
341static void
342removeAllPeers( Torrent * t )
343{
344    while( !tr_ptrArrayEmpty( t->peers ) )
345        removePeer( t, tr_ptrArrayNth( t->peers, 0 ) );
346}
347
348static void
349torrentDestructor( Torrent * t )
350{
351    uint8_t hash[SHA_DIGEST_LENGTH];
352
353    assert( t );
354    assert( !t->isRunning );
355    assert( t->peers );
356    assert( torrentIsLocked( t ) );
357    assert( tr_ptrArrayEmpty( t->outgoingHandshakes ) );
358    assert( tr_ptrArrayEmpty( t->peers ) );
359
360    memcpy( hash, t->hash, SHA_DIGEST_LENGTH );
361
362    tr_timerFree( &t->reconnectTimer );
363    tr_timerFree( &t->rechokeTimer );
364    tr_timerFree( &t->refillTimer );
365
366    tr_bitfieldFree( t->requestedPieces );
367    tr_ptrArrayFree( t->webseeds, (PtrArrayForeachFunc)tr_webseedFree );
368    tr_ptrArrayFree( t->pool, (PtrArrayForeachFunc)tr_free );
369    tr_ptrArrayFree( t->outgoingHandshakes, NULL );
370    tr_ptrArrayFree( t->peers, NULL );
371
372    tr_free( t );
373}
374
375static void peerCallbackFunc( void * vpeer, void * vevent, void * vt );
376
377static Torrent*
378torrentConstructor( tr_peerMgr * manager, tr_torrent * tor )
379{
380    int i;
381    Torrent * t;
382
383    t = tr_new0( Torrent, 1 );
384    t->manager = manager;
385    t->tor = tor;
386    t->pool = tr_ptrArrayNew( );
387    t->peers = tr_ptrArrayNew( );
388    t->webseeds = tr_ptrArrayNew( );
389    t->outgoingHandshakes = tr_ptrArrayNew( );
390    t->requestedPieces = tr_bitfieldNew( tor->info.pieceCount );
391    memcpy( t->hash, tor->info.hash, SHA_DIGEST_LENGTH );
392
393    for( i=0; i<tor->info.webseedCount; ++i ) {
394        tr_webseed * w = tr_webseedNew( tor, tor->info.webseeds[i], peerCallbackFunc, t );
395        tr_ptrArrayAppend( t->webseeds, w );
396    }
397
398    return t;
399}
400
401/**
402 * For explanation, see http://www.bittorrent.org/fast_extensions.html
403 * Also see the "test-allowed-set" unit test
404 */
405struct tr_bitfield *
406tr_peerMgrGenerateAllowedSet( const uint32_t         k,         /* number of pieces in set */
407                              const uint32_t         sz,        /* number of pieces in torrent */
408                              const uint8_t        * infohash,  /* torrent's SHA1 hash*/
409                              const struct in_addr * ip )       /* peer's address */
410{
411    uint8_t w[SHA_DIGEST_LENGTH + 4];
412    uint8_t x[SHA_DIGEST_LENGTH];
413    tr_bitfield_t * a;
414    uint32_t a_size;
415
416    *(uint32_t*)w = ntohl( htonl(ip->s_addr) & 0xffffff00 );   /* (1) */
417    memcpy( w + 4, infohash, SHA_DIGEST_LENGTH );              /* (2) */
418    tr_sha1( x, w, sizeof( w ), NULL );                        /* (3) */
419
420    a = tr_bitfieldNew( sz );
421    a_size = 0;
422   
423    while( a_size < k )
424    {
425        int i;
426        for ( i=0; i<5 && a_size<k; ++i )                      /* (4) */
427        {
428            uint32_t j = i * 4;                                /* (5) */
429            uint32_t y = ntohl(*(uint32_t*)(x+j));             /* (6) */
430            uint32_t index = y % sz;                           /* (7) */
431            if ( !tr_bitfieldHas( a, index ) ) {               /* (8) */
432                tr_bitfieldAdd( a, index );                    /* (9) */
433                ++a_size;
434            }
435        }
436        tr_sha1( x, x, sizeof( x ), NULL );                    /* (3) */
437    }
438   
439    return a;
440}
441
442tr_peerMgr*
443tr_peerMgrNew( tr_handle * handle )
444{
445    tr_peerMgr * m = tr_new0( tr_peerMgr, 1 );
446    m->handle = handle;
447    m->torrents = tr_ptrArrayNew( );
448    m->incomingHandshakes = tr_ptrArrayNew( );
449    return m;
450}
451
452void
453tr_peerMgrFree( tr_peerMgr * manager )
454{
455    managerLock( manager );
456
457    /* free the handshakes.  Abort invokes handshakeDoneCB(), which removes
458     * the item from manager->handshakes, so this is a little roundabout... */
459    while( !tr_ptrArrayEmpty( manager->incomingHandshakes ) )
460        tr_handshakeAbort( tr_ptrArrayNth( manager->incomingHandshakes, 0 ) );
461    tr_ptrArrayFree( manager->incomingHandshakes, NULL );
462
463    /* free the torrents. */
464    tr_ptrArrayFree( manager->torrents, (PtrArrayForeachFunc)torrentDestructor );
465
466    managerUnlock( manager );
467    tr_free( manager );
468}
469
470static tr_peer**
471getConnectedPeers( Torrent * t, int * setmeCount )
472{
473    int i, peerCount, connectionCount;
474    tr_peer **peers;
475    tr_peer **ret;
476
477    assert( torrentIsLocked( t ) );
478
479    peers = (tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
480    ret = tr_new( tr_peer*, peerCount );
481
482    for( i=connectionCount=0; i<peerCount; ++i )
483        if( peers[i]->msgs )
484            ret[connectionCount++] = peers[i];
485
486    *setmeCount = connectionCount;
487    return ret;
488}
489
490static int
491clientIsDownloadingFrom( const tr_peer * peer )
492{
493    return peer->clientIsInterested && !peer->clientIsChoked;
494}
495
496static int
497clientIsUploadingTo( const tr_peer * peer )
498{
499    return peer->peerIsInterested && !peer->peerIsChoked;
500}
501
502/***
503****
504***/
505
506int
507tr_peerMgrPeerIsSeed( const tr_peerMgr       * mgr,
508                      const uint8_t          * torrentHash,
509                      const struct in_addr   * addr )
510{
511    int isSeed = FALSE;
512    const Torrent * t = NULL;
513    const struct peer_atom * atom = NULL;
514
515    t = getExistingTorrent( (tr_peerMgr*)mgr, torrentHash );
516    if( t )
517        atom = getExistingAtom( t, addr );
518    if( atom )
519        isSeed = ( atom->flags & ADDED_F_SEED_FLAG ) != 0;
520
521    return isSeed;
522}
523
524/***
525****  Refill
526***/
527
528struct tr_refill_piece
529{
530    tr_priority_t priority;
531    int missingBlockCount;
532    uint16_t random;
533    uint32_t piece;
534    uint32_t peerCount;
535};
536
537static int
538compareRefillPiece (const void * aIn, const void * bIn)
539{
540    const struct tr_refill_piece * a = aIn;
541    const struct tr_refill_piece * b = bIn;
542
543    /* if one piece has a higher priority, it goes first */
544    if( a->priority != b->priority )
545        return a->priority > b->priority ? -1 : 1;
546   
547    /* otherwise if one has fewer peers, it goes first */
548    if (a->peerCount != b->peerCount)
549        return a->peerCount < b->peerCount ? -1 : 1;
550
551    /* otherwise go with our random seed */
552    return tr_compareUint16( a->random, b->random );
553}
554
555static int
556isPieceInteresting( const tr_torrent  * tor,
557                    tr_piece_index_t    piece )
558{
559    if( tor->info.pieces[piece].dnd ) /* we don't want it */
560        return 0;
561
562    if( tr_cpPieceIsComplete( tor->completion, piece ) ) /* we have it */
563        return 0;
564
565    return 1;
566}
567
568static uint32_t*
569getPreferredPieces( Torrent     * t,
570                    uint32_t    * pieceCount )
571{
572    const tr_torrent * tor = t->tor;
573    const tr_info * inf = &tor->info;
574    tr_piece_index_t i;
575    uint32_t poolSize = 0;
576    uint32_t * pool = tr_new( uint32_t, inf->pieceCount );
577    int peerCount;
578    tr_peer** peers;
579
580    assert( torrentIsLocked( t ) );
581
582    peers = getConnectedPeers( t, &peerCount );
583
584    for( i=0; i<inf->pieceCount; ++i )
585        if( isPieceInteresting( tor, i ) )
586            pool[poolSize++] = i;
587
588    /* sort the pool from most interesting to least... */
589    if( poolSize > 1 )
590    {
591        uint32_t j;
592        struct tr_refill_piece * p = tr_new( struct tr_refill_piece, poolSize );
593
594        for( j=0; j<poolSize; ++j )
595        {
596            int k;
597            const int piece = pool[j];
598            struct tr_refill_piece * setme = p + j;
599
600            setme->piece = piece;
601            setme->priority = inf->pieces[piece].priority;
602            setme->peerCount = 0;
603            setme->random = tr_rand( UINT16_MAX );
604            setme->missingBlockCount = tr_cpMissingBlocksInPiece( tor->completion, piece );
605
606            for( k=0; k<peerCount; ++k ) {
607                const tr_peer * peer = peers[k];
608                if( peer->peerIsInterested && !peer->clientIsChoked && tr_bitfieldHas( peer->have, piece ) )
609                    ++setme->peerCount;
610            }
611        }
612
613        qsort( p, poolSize, sizeof(struct tr_refill_piece), compareRefillPiece );
614
615        for( j=0; j<poolSize; ++j )
616            pool[j] = p[j].piece;
617
618        tr_free( p );
619    }
620
621    tr_free( peers );
622
623    *pieceCount = poolSize;
624    return pool;
625}
626
627static tr_peer**
628getPeersUploadingToClient( Torrent * t, int * setmeCount )
629{
630    int i;
631    int peerCount = 0;
632    int retCount = 0;
633    tr_peer ** peers = (tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
634    tr_peer ** ret = tr_new( tr_peer*, peerCount );
635
636    /* get a list of peers we're downloading from */
637    for( i=0; i<peerCount; ++i )
638        if( clientIsDownloadingFrom( peers[i] ) )
639            ret[retCount++] = peers[i];
640
641    /* pick a different starting point each time so all peers
642     * get a chance at the first blocks in the queue */
643    if( retCount ) {
644        tr_peer ** tmp = tr_new( tr_peer*, retCount );
645        i = tr_rand( retCount );
646        memcpy( tmp, ret, sizeof(tr_peer*) * retCount );
647        memcpy( ret, tmp+i, sizeof(tr_peer*) * (retCount-i) );
648        memcpy( ret+(retCount-i), tmp, sizeof(tr_peer*) * i );
649        tr_free( tmp );
650    }
651
652    *setmeCount = retCount;
653    return ret;
654}
655
656static int
657refillPulse( void * vtorrent )
658{
659    Torrent * t = vtorrent;
660    tr_torrent * tor = t->tor;
661    int peerCount;
662    int webseedCount;
663    tr_peer ** peers;
664    tr_webseed ** webseeds;
665    uint32_t pieceCount;
666    uint32_t * pieces;
667    tr_piece_index_t i;
668
669    if( !t->isRunning )
670        return TRUE;
671    if( tr_torrentIsSeed( t->tor ) )
672        return TRUE;
673
674    torrentLock( t );
675    tordbg( t, "Refilling Request Buffers..." );
676
677    pieces = getPreferredPieces( t, &pieceCount );
678    peers = getPeersUploadingToClient( t, &peerCount );
679    webseedCount = tr_ptrArraySize( t->webseeds );
680    webseeds = tr_memdup( tr_ptrArrayBase(t->webseeds), webseedCount*sizeof(tr_webseed*) );
681
682    for( i=0; (webseedCount || peerCount) && i<pieceCount; ++i )
683    {
684        int j;
685        int handled = FALSE;
686        const tr_piece_index_t piece = pieces[i];
687
688        assert( piece < tor->info.pieceCount );
689
690        /* find a peer who can ask for this piece */
691        for( j=0; !handled && j<peerCount; )
692        {
693            const int val = tr_peerMsgsAddRequest( peers[j]->msgs, piece );
694            switch( val )
695            {
696                case TR_ADDREQ_FULL: 
697                case TR_ADDREQ_CLIENT_CHOKED:
698                    memmove( peers+j, peers+j+1, sizeof(tr_peer*)*(--peerCount-j) );
699                    break;
700                case TR_ADDREQ_MISSING: 
701                case TR_ADDREQ_DUPLICATE: 
702                    ++j;
703                    break;
704                case TR_ADDREQ_OK:
705                    tr_bitfieldAdd( t->requestedPieces, piece );
706                    handled = TRUE;
707                    break;
708                default:
709                    assert( 0 && "unhandled value" );
710                    break;
711            }
712        }
713
714        /* maybe one of the webseeds can do it */
715        for( j=0; !handled && j<webseedCount; )
716        {
717            const int val = tr_webseedAddRequest( webseeds[j], piece );
718            switch( val )
719            {
720                case TR_ADDREQ_FULL: 
721                    memmove( webseeds+j, webseeds+j+1, sizeof(tr_webseed*)*(--webseedCount-j) );
722                    break;
723                case TR_ADDREQ_OK:
724                    tr_bitfieldAdd( t->requestedPieces, piece );
725                    handled = TRUE;
726                    break;
727                default:
728                    assert( 0 && "unhandled value" );
729                    break;
730            }
731        }
732    }
733
734    /* cleanup */
735    tr_free( webseeds );
736    tr_free( peers );
737    tr_free( pieces );
738
739    t->refillTimer = NULL;
740    torrentUnlock( t );
741    return FALSE;
742}
743
744static void
745addStrike( Torrent * t, tr_peer * peer )
746{
747    tordbg( t, "increasing peer %s strike count to %d", tr_peerIoAddrStr(&peer->in_addr,peer->port), peer->strikes+1 );
748
749    if( ++peer->strikes >= MAX_BAD_PIECES_PER_PEER )
750    {
751        struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
752        atom->myflags |= MYFLAG_BANNED;
753        peer->doPurge = 1;
754        tordbg( t, "banning peer %s", tr_peerIoAddrStr(&atom->addr,atom->port) );
755    }
756}
757
758static void
759gotBadPiece( Torrent * t, tr_piece_index_t pieceIndex )
760{
761    tr_torrent * tor = t->tor;
762    const uint32_t byteCount = tr_torPieceCountBytes( tor, pieceIndex );
763    tor->corruptCur += byteCount;
764    tor->downloadedCur -= MIN( tor->downloadedCur, byteCount );
765}
766
767static void
768refillSoon( Torrent * t )
769{
770    if( t->refillTimer == NULL )
771        t->refillTimer = tr_timerNew( t->manager->handle,
772                                      refillPulse, t,
773                                      REFILL_PERIOD_MSEC );
774}
775
776static void
777peerCallbackFunc( void * vpeer, void * vevent, void * vt )
778{
779    tr_peer * peer = vpeer; /* may be NULL if peer is a webseed */
780    Torrent * t = (Torrent *) vt;
781    const tr_peer_event * e = vevent;
782
783    torrentLock( t );
784
785    switch( e->eventType )
786    {
787        case TR_PEER_NEED_REQ:
788            refillSoon( t );
789            break;
790
791        case TR_PEER_CANCEL:
792            tr_bitfieldRem( t->requestedPieces, e->pieceIndex );
793            break;
794
795        case TR_PEER_PEER_GOT_DATA: {
796            const time_t now = time( NULL );
797            tr_torrent * tor = t->tor;
798            tor->activityDate = now;
799            tor->uploadedCur += e->length;
800            tr_rcTransferred( tor->upload, e->length );
801            tr_rcTransferred( tor->handle->upload, e->length );
802            tr_statsAddUploaded( tor->handle, e->length );
803            if( peer ) {
804                struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
805                atom->piece_data_time = time( NULL );
806            }
807            break;
808        }
809
810        case TR_PEER_CLIENT_GOT_DATA: {
811            const time_t now = time( NULL );
812            tr_torrent * tor = t->tor;
813            tor->activityDate = now;
814            /* only add this to downloadedCur if we got it from a peer --
815             * webseeds shouldn't count against our ratio.  As one tracker
816             * admin put it, "Those pieces are downloaded directly from the
817             * content distributor, not the peers, it is the tracker's job
818             * to manage the swarms, not the web server and does not fit
819             * into the jurisdiction of the tracker." */
820            if( peer )
821                tor->downloadedCur += e->length;
822            tr_rcTransferred( tor->download, e->length );
823            tr_rcTransferred( tor->handle->download, e->length );
824            tr_statsAddDownloaded( tor->handle, e->length );
825            if( peer ) {
826                struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
827                atom->piece_data_time = time( NULL );
828            }
829            break;
830        }
831
832        case TR_PEER_PEER_PROGRESS: {
833            if( peer ) {
834                struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
835                const int peerIsSeed = e->progress >= 1.0;
836                if( peerIsSeed ) {
837                    tordbg( t, "marking peer %s as a seed", tr_peerIoAddrStr(&atom->addr,atom->port) );
838                    atom->flags |= ADDED_F_SEED_FLAG;
839                } else {
840                    tordbg( t, "marking peer %s as a non-seed", tr_peerIoAddrStr(&atom->addr,atom->port) );
841                    atom->flags &= ~ADDED_F_SEED_FLAG;
842                }
843            }
844            break;
845        }
846
847        case TR_PEER_CLIENT_GOT_BLOCK:
848        {
849            tr_torrent * tor = t->tor;
850
851            tr_block_index_t block = _tr_block( tor, e->pieceIndex, e->offset );
852
853            tr_cpBlockAdd( tor->completion, block );
854
855            if( tr_cpPieceIsComplete( tor->completion, e->pieceIndex ) )
856            {
857                const tr_piece_index_t p = e->pieceIndex;
858                const tr_errno err = tr_ioTestPiece( tor, p );
859
860                if( err ) {
861                    tr_torerr( tor, _( "Piece %lu, which was just downloaded, failed its checksum test: %s" ),
862                               (unsigned long)p, tr_errorString( err ) );
863                }
864
865                tr_torrentSetHasPiece( tor, p, !err );
866                tr_torrentSetPieceChecked( tor, p, TRUE );
867                tr_peerMgrSetBlame( tor->handle->peerMgr, tor->info.hash, p, !err );
868
869                if( err )
870                    gotBadPiece( t, p );
871                else {
872                    int i, peerCount;
873                    tr_peer ** peers = getConnectedPeers( t, &peerCount );
874                    for( i=0; i<peerCount; ++i )
875                        tr_peerMsgsHave( peers[i]->msgs, p );
876                    tr_free( peers );
877                }
878
879                tr_torrentRecheckCompleteness( tor );
880            }
881            break;
882        }
883
884        case TR_PEER_ERROR:
885            if( TR_ERROR_IS_IO( e->err ) ) {
886                t->tor->error = e->err;
887                tr_strlcpy( t->tor->errorString, tr_errorString( e->err ), sizeof(t->tor->errorString) );
888                tr_torrentStop( t->tor );
889            } else if( e->err == TR_ERROR_ASSERT ) {
890                addStrike( t, peer );
891            }
892            peer->doPurge = 1;
893            break;
894
895        default:
896            assert(0);
897    }
898
899    torrentUnlock( t );
900}
901
902static void
903ensureAtomExists( Torrent * t, const struct in_addr * addr, uint16_t port, uint8_t flags, uint8_t from )
904{
905    if( getExistingAtom( t, addr ) == NULL )
906    {
907        struct peer_atom * a;
908        a = tr_new0( struct peer_atom, 1 );
909        a->addr = *addr;
910        a->port = port;
911        a->flags = flags;
912        a->from = from;
913        tordbg( t, "got a new atom: %s", tr_peerIoAddrStr(&a->addr,a->port) );
914        tr_ptrArrayInsertSorted( t->pool, a, comparePeerAtoms );
915    }
916}
917
918static int
919getMaxPeerCount( const tr_torrent * tor UNUSED )
920{
921    return tor->maxConnectedPeers;
922}
923
924/* FIXME: this is kind of a mess. */
925static void
926myHandshakeDoneCB( tr_handshake    * handshake,
927                   tr_peerIo       * io,
928                   int               isConnected,
929                   const uint8_t   * peer_id,
930                   void            * vmanager )
931{
932    int ok = isConnected;
933    uint16_t port;
934    const struct in_addr * addr;
935    tr_peerMgr * manager = (tr_peerMgr*) vmanager;
936    Torrent * t;
937    tr_handshake * ours;
938
939    assert( io );
940    assert( isConnected==0 || isConnected==1 );
941
942    t = tr_peerIoHasTorrentHash( io )
943        ? getExistingTorrent( manager, tr_peerIoGetTorrentHash( io ) )
944        : NULL;
945
946    if( tr_peerIoIsIncoming ( io ) )
947        ours = tr_ptrArrayRemoveSorted( manager->incomingHandshakes,
948                                        handshake, handshakeCompare );
949    else if( t )
950        ours = tr_ptrArrayRemoveSorted( t->outgoingHandshakes,
951                                        handshake, handshakeCompare );
952    else
953        ours = handshake;
954
955    assert( ours );
956    assert( ours == handshake );
957
958    if( t )
959        torrentLock( t );
960
961    addr = tr_peerIoGetAddress( io, &port );
962
963    if( !ok || !t || !t->isRunning )
964    {
965        if( t ) {
966            struct peer_atom * atom = getExistingAtom( t, addr );
967            if( atom )
968                ++atom->numFails;
969        }
970
971        tr_peerIoFree( io );
972    }
973    else /* looking good */
974    {
975        struct peer_atom * atom;
976        ensureAtomExists( t, addr, port, 0, TR_PEER_FROM_INCOMING );
977        atom = getExistingAtom( t, addr );
978
979        if( atom->myflags & MYFLAG_BANNED )
980        {
981            tordbg( t, "banned peer %s tried to reconnect", tr_peerIoAddrStr(&atom->addr,atom->port) );
982            tr_peerIoFree( io );
983        }
984        else if( tr_ptrArraySize( t->peers ) >= getMaxPeerCount( t->tor ) )
985        {
986            tr_peerIoFree( io );
987        }
988        else
989        {
990            tr_peer * peer = getExistingPeer( t, addr );
991
992            if( peer ) /* we already have this peer */
993            {
994                tr_peerIoFree( io );
995            }
996            else
997            {
998                peer = getPeer( t, addr );
999                tr_free( peer->client );
1000
1001                if( !peer_id )
1002                    peer->client = NULL;
1003                else {
1004                    char client[128];
1005                    tr_clientForId( client, sizeof( client ), peer_id );
1006                    peer->client = tr_strdup( client );
1007                }
1008                peer->port = port;
1009                peer->io = io;
1010                peer->msgs = tr_peerMsgsNew( t->tor, peer, peerCallbackFunc, t, &peer->msgsTag );
1011                atom->time = time( NULL );
1012            }
1013        }
1014    }
1015
1016    if( t )
1017        torrentUnlock( t );
1018}
1019
1020void
1021tr_peerMgrAddIncoming( tr_peerMgr      * manager,
1022                       struct in_addr  * addr,
1023                       uint16_t          port,
1024                       int               socket )
1025{
1026    managerLock( manager );
1027
1028    if( tr_sessionIsAddressBlocked( manager->handle, addr ) )
1029    {
1030        tr_dbg( "Banned IP address \"%s\" tried to connect to us",
1031                inet_ntoa( *addr ) );
1032        tr_netClose( socket );
1033    }
1034    else if( getExistingHandshake( manager->incomingHandshakes, addr ) )
1035    {
1036        tr_netClose( socket );
1037    }
1038    else /* we don't have a connetion to them yet... */
1039    {
1040        tr_peerIo * io;
1041        tr_handshake * handshake;
1042
1043        io = tr_peerIoNewIncoming( manager->handle, addr, port, socket );
1044
1045        handshake = tr_handshakeNew( io,
1046                                     manager->handle->encryptionMode,
1047                                     myHandshakeDoneCB,
1048                                     manager );
1049
1050        tr_ptrArrayInsertSorted( manager->incomingHandshakes, handshake, handshakeCompare );
1051    }
1052
1053    managerUnlock( manager );
1054}
1055
1056void
1057tr_peerMgrAddPex( tr_peerMgr     * manager,
1058                  const uint8_t  * torrentHash,
1059                  uint8_t          from,
1060                  const tr_pex   * pex )
1061{
1062    Torrent * t;
1063    managerLock( manager );
1064
1065    t = getExistingTorrent( manager, torrentHash );
1066    if( !tr_sessionIsAddressBlocked( t->manager->handle, &pex->in_addr ) )
1067        ensureAtomExists( t, &pex->in_addr, pex->port, pex->flags, from );
1068
1069    managerUnlock( manager );
1070}
1071
1072tr_pex *
1073tr_peerMgrCompactToPex( const void  * compact,
1074                        size_t        compactLen,
1075                        const char  * added_f,
1076                        size_t      * pexCount )
1077{
1078    size_t i;
1079    size_t n = compactLen / 6;
1080    const uint8_t * walk = compact;
1081    tr_pex * pex = tr_new0( tr_pex, n );
1082if( added_f && strlen(added_f)!=n )
1083{
1084    int i;
1085    const int len = strlen( added_f );
1086    fprintf( stderr, "compactLen is %d, n is %d, and strlen(added_f) is %d!!!\n", (int)compactLen, (int)n, len );
1087    for( i=0; i<len; ++i )
1088        fprintf( stderr, "added.f[%d] is %d\n", i, (int)added_f[i] );
1089}
1090    for( i=0; i<n; ++i ) {
1091        memcpy( &pex[i].in_addr, walk, 4 ); walk += 4;
1092        memcpy( &pex[i].port, walk, 2 ); walk += 2;
1093        if( added_f )
1094            pex[i].flags = added_f[i];
1095    }
1096    *pexCount = n;
1097    return pex;
1098}
1099
1100/**
1101***
1102**/
1103
1104void
1105tr_peerMgrSetBlame( tr_peerMgr     * manager,
1106                    const uint8_t  * torrentHash,
1107                    int              pieceIndex,
1108                    int              success )
1109{
1110    if( !success )
1111    {
1112        int peerCount, i;
1113        Torrent * t = getExistingTorrent( manager, torrentHash );
1114        tr_peer ** peers;
1115
1116        assert( torrentIsLocked( t ) );
1117
1118        peers = (tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1119        for( i=0; i<peerCount; ++i )
1120        {
1121            tr_peer * peer = peers[i];
1122            if( tr_bitfieldHas( peer->blame, pieceIndex ) )
1123            {
1124                tordbg( t, "peer %s contributed to corrupt piece (%d); now has %d strikes",
1125                           tr_peerIoAddrStr(&peer->in_addr,peer->port),
1126                           pieceIndex, (int)peer->strikes+1 );
1127                addStrike( t, peer );
1128            }
1129        }
1130    }
1131}
1132
1133int
1134tr_pexCompare( const void * va, const void * vb )
1135{
1136    const tr_pex * a = va;
1137    const tr_pex * b = vb;
1138    int i = memcmp( &a->in_addr, &b->in_addr, sizeof(struct in_addr) );
1139    if( i ) return i;
1140    if( a->port < b->port ) return -1;
1141    if( a->port > b->port ) return 1;
1142    return 0;
1143}
1144
1145int tr_pexCompare( const void * a, const void * b );
1146
1147static int
1148peerPrefersCrypto( const tr_peer * peer )
1149{
1150    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_YES )
1151        return TRUE;
1152
1153    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_NO )
1154        return FALSE;
1155
1156    return tr_peerIoIsEncrypted( peer->io );
1157};
1158
1159int
1160tr_peerMgrGetPeers( tr_peerMgr      * manager,
1161                    const uint8_t   * torrentHash,
1162                    tr_pex         ** setme_pex )
1163{
1164    const Torrent * t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1165    int i, peerCount;
1166    const tr_peer ** peers;
1167    tr_pex * pex;
1168    tr_pex * walk;
1169
1170    managerLock( manager );
1171
1172    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1173    pex = walk = tr_new( tr_pex, peerCount );
1174
1175    for( i=0; i<peerCount; ++i, ++walk )
1176    {
1177        const tr_peer * peer = peers[i];
1178
1179        walk->in_addr = peer->in_addr;
1180
1181        walk->port = peer->port;
1182
1183        walk->flags = 0;
1184        if( peerPrefersCrypto(peer) )  walk->flags |= ADDED_F_ENCRYPTION_FLAG;
1185        if( peer->progress >= 1.0 )    walk->flags |= ADDED_F_SEED_FLAG;
1186    }
1187
1188    assert( ( walk - pex ) == peerCount );
1189    qsort( pex, peerCount, sizeof(tr_pex), tr_pexCompare );
1190    *setme_pex = pex;
1191
1192    managerUnlock( manager );
1193
1194    return peerCount;
1195}
1196
1197static int reconnectPulse( void * vtorrent );
1198static int rechokePulse( void * vtorrent );
1199
1200void
1201tr_peerMgrStartTorrent( tr_peerMgr     * manager,
1202                        const uint8_t  * torrentHash )
1203{
1204    Torrent * t;
1205
1206    managerLock( manager );
1207
1208    t = getExistingTorrent( manager, torrentHash );
1209
1210    assert( t );
1211    assert( ( t->isRunning != 0 ) == ( t->reconnectTimer != NULL ) );
1212    assert( ( t->isRunning != 0 ) == ( t->rechokeTimer != NULL ) );
1213
1214    if( !t->isRunning )
1215    {
1216        t->isRunning = 1;
1217
1218        t->reconnectTimer = tr_timerNew( t->manager->handle,
1219                                         reconnectPulse, t,
1220                                         RECONNECT_PERIOD_MSEC );
1221
1222        t->rechokeTimer = tr_timerNew( t->manager->handle,
1223                                       rechokePulse, t,
1224                                       RECHOKE_PERIOD_MSEC );
1225
1226        reconnectPulse( t );
1227
1228        rechokePulse( t );
1229
1230        if( !tr_ptrArrayEmpty( t->webseeds ) )
1231            refillSoon( t );
1232    }
1233
1234    managerUnlock( manager );
1235}
1236
1237static void
1238stopTorrent( Torrent * t )
1239{
1240    assert( torrentIsLocked( t ) );
1241
1242    t->isRunning = 0;
1243    tr_timerFree( &t->rechokeTimer );
1244    tr_timerFree( &t->reconnectTimer );
1245
1246    /* disconnect the peers. */
1247    tr_ptrArrayForeach( t->peers, (PtrArrayForeachFunc)peerDestructor );
1248    tr_ptrArrayClear( t->peers );
1249
1250    /* disconnect the handshakes.  handshakeAbort calls handshakeDoneCB(),
1251     * which removes the handshake from t->outgoingHandshakes... */
1252    while( !tr_ptrArrayEmpty( t->outgoingHandshakes ) )
1253        tr_handshakeAbort( tr_ptrArrayNth( t->outgoingHandshakes, 0 ) );
1254}
1255void
1256tr_peerMgrStopTorrent( tr_peerMgr     * manager,
1257                       const uint8_t  * torrentHash)
1258{
1259    managerLock( manager );
1260
1261    stopTorrent( getExistingTorrent( manager, torrentHash ) );
1262
1263    managerUnlock( manager );
1264}
1265
1266void
1267tr_peerMgrAddTorrent( tr_peerMgr * manager,
1268                      tr_torrent * tor )
1269{
1270    Torrent * t;
1271
1272    managerLock( manager );
1273
1274    assert( tor );
1275    assert( getExistingTorrent( manager, tor->info.hash ) == NULL );
1276
1277    t = torrentConstructor( manager, tor );
1278    tr_ptrArrayInsertSorted( manager->torrents, t, torrentCompare );
1279
1280    managerUnlock( manager );
1281}
1282
1283void
1284tr_peerMgrRemoveTorrent( tr_peerMgr     * manager,
1285                         const uint8_t  * torrentHash )
1286{
1287    Torrent * t;
1288
1289    managerLock( manager );
1290
1291    t = getExistingTorrent( manager, torrentHash );
1292    assert( t );
1293    stopTorrent( t );
1294    tr_ptrArrayRemoveSorted( manager->torrents, t, torrentCompare );
1295    torrentDestructor( t );
1296
1297    managerUnlock( manager );
1298}
1299
1300void
1301tr_peerMgrTorrentAvailability( const tr_peerMgr * manager,
1302                               const uint8_t    * torrentHash,
1303                               int8_t           * tab,
1304                               int                tabCount )
1305{
1306    int i;
1307    const Torrent * t;
1308    const tr_torrent * tor;
1309    float interval;
1310    int isComplete;
1311    int peerCount;
1312    const tr_peer ** peers;
1313
1314    managerLock( manager );
1315
1316    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1317    tor = t->tor;
1318    interval = tor->info.pieceCount / (float)tabCount;
1319    isComplete = tor && ( tr_cpGetStatus ( tor->completion ) == TR_CP_COMPLETE );
1320    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1321
1322    memset( tab, 0, tabCount );
1323
1324    for( i=0; tor && i<tabCount; ++i )
1325    {
1326        const int piece = i * interval;
1327
1328        if( isComplete || tr_cpPieceIsComplete( tor->completion, piece ) )
1329            tab[i] = -1;
1330        else if( peerCount ) {
1331            int j;
1332            for( j=0; j<peerCount; ++j )
1333                if( tr_bitfieldHas( peers[j]->have, i ) )
1334                    ++tab[i];
1335        }
1336    }
1337
1338    managerUnlock( manager );
1339}
1340
1341/* Returns the pieces that are available from peers */
1342tr_bitfield*
1343tr_peerMgrGetAvailable( const tr_peerMgr * manager,
1344                        const uint8_t    * torrentHash )
1345{
1346    int i, size;
1347    Torrent * t;
1348    tr_peer ** peers;
1349    tr_bitfield * pieces;
1350    managerLock( manager );
1351
1352    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1353    pieces = tr_bitfieldNew( t->tor->info.pieceCount );
1354    peers = getConnectedPeers( t, &size );
1355    for( i=0; i<size; ++i )
1356        tr_bitfieldOr( pieces, peers[i]->have );
1357
1358    managerUnlock( manager );
1359    tr_free( peers );
1360    return pieces;
1361}
1362
1363int
1364tr_peerMgrHasConnections( const tr_peerMgr * manager,
1365                          const uint8_t    * torrentHash )
1366{
1367    int ret;
1368    const Torrent * t;
1369    managerLock( manager );
1370
1371    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1372    ret = t && ( !tr_ptrArrayEmpty( t->peers ) || !tr_ptrArrayEmpty( t->webseeds ) );
1373
1374    managerUnlock( manager );
1375    return ret;
1376}
1377
1378void
1379tr_peerMgrTorrentStats( const tr_peerMgr * manager,
1380                        const uint8_t    * torrentHash,
1381                        int              * setmePeersKnown,
1382                        int              * setmePeersConnected,
1383                        int              * setmeSeedsConnected,
1384                        int              * setmeWebseedsSendingToUs,
1385                        int              * setmePeersSendingToUs,
1386                        int              * setmePeersGettingFromUs,
1387                        int              * setmePeersFrom )
1388{
1389    int i, size;
1390    const Torrent * t;
1391    const tr_peer ** peers;
1392    const tr_webseed ** webseeds;
1393
1394    managerLock( manager );
1395
1396    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1397    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &size );
1398
1399    *setmePeersKnown           = tr_ptrArraySize( t->pool );
1400    *setmePeersConnected       = 0;
1401    *setmeSeedsConnected       = 0;
1402    *setmePeersGettingFromUs   = 0;
1403    *setmePeersSendingToUs     = 0;
1404    *setmeWebseedsSendingToUs  = 0;
1405
1406    for( i=0; i<TR_PEER_FROM__MAX; ++i )
1407        setmePeersFrom[i] = 0;
1408
1409    for( i=0; i<size; ++i )
1410    {
1411        const tr_peer * peer = peers[i];
1412        const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1413
1414        if( peer->io == NULL ) /* not connected */
1415            continue;
1416
1417        ++*setmePeersConnected;
1418
1419        ++setmePeersFrom[atom->from];
1420
1421        if( clientIsDownloadingFrom( peer ) )
1422            ++*setmePeersSendingToUs;
1423
1424        if( clientIsUploadingTo( peer ) )
1425            ++*setmePeersGettingFromUs;
1426
1427        if( atom->flags & ADDED_F_SEED_FLAG )
1428            ++*setmeSeedsConnected;
1429    }
1430
1431    webseeds = (const tr_webseed **) tr_ptrArrayPeek( t->webseeds, &size );
1432    for( i=0; i<size; ++i )
1433    {
1434        if( tr_webseedIsActive( webseeds[i] ) )
1435            ++*setmeWebseedsSendingToUs;
1436    }
1437
1438    managerUnlock( manager );
1439}
1440
1441float*
1442tr_peerMgrWebSpeeds( const tr_peerMgr * manager,
1443                     const uint8_t    * torrentHash )
1444{
1445    const Torrent * t;
1446    const tr_webseed ** webseeds;
1447    int i;
1448    int webseedCount;
1449    float * ret;
1450
1451    assert( manager );
1452    managerLock( manager );
1453
1454    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1455    webseeds = (const tr_webseed**) tr_ptrArrayPeek( t->webseeds, &webseedCount );
1456    assert( webseedCount == t->tor->info.webseedCount );
1457    ret = tr_new0( float, webseedCount );
1458
1459    for( i=0; i<webseedCount; ++i )
1460        if( !tr_webseedGetSpeed( webseeds[i], &ret[i] ) )
1461            ret[i] = -1.0;
1462
1463    managerUnlock( manager );
1464    return ret;
1465}
1466
1467struct tr_peer_stat *
1468tr_peerMgrPeerStats( const tr_peerMgr  * manager,
1469                     const uint8_t     * torrentHash,
1470                     int               * setmeCount UNUSED )
1471{
1472    int i, size;
1473    const Torrent * t;
1474    tr_peer ** peers;
1475    tr_peer_stat * ret;
1476
1477    assert( manager );
1478    managerLock( manager );
1479
1480    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1481    peers = getConnectedPeers( (Torrent*)t, &size );
1482    ret = tr_new0( tr_peer_stat, size );
1483
1484    for( i=0; i<size; ++i )
1485    {
1486        char * pch;
1487        const tr_peer * peer = peers[i];
1488        const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1489        tr_peer_stat * stat = ret + i;
1490
1491        tr_netNtop( &peer->in_addr, stat->addr, sizeof(stat->addr) );
1492        tr_strlcpy( stat->client, (peer->client ? peer->client : ""), sizeof(stat->client) );
1493        stat->port               = peer->port;
1494        stat->from               = atom->from;
1495        stat->progress           = peer->progress;
1496        stat->isEncrypted        = tr_peerIoIsEncrypted( peer->io ) ? 1 : 0;
1497        stat->uploadToRate       = peer->rateToPeer;
1498        stat->downloadFromRate   = peer->rateToClient;
1499        stat->peerIsChoked       = peer->peerIsChoked;
1500        stat->peerIsInterested   = peer->peerIsInterested;
1501        stat->clientIsChoked     = peer->clientIsChoked;
1502        stat->clientIsInterested = peer->clientIsInterested;
1503        stat->isIncoming         = tr_peerIoIsIncoming( peer->io );
1504        stat->isDownloadingFrom  = clientIsDownloadingFrom( peer );
1505        stat->isUploadingTo      = clientIsUploadingTo( peer );
1506
1507        pch = stat->flagStr;
1508        if( t->optimistic == peer ) *pch++ = 'O';
1509        if( stat->isDownloadingFrom ) *pch++ = 'D';
1510        else if( stat->clientIsInterested ) *pch++ = 'd';
1511        if( stat->isUploadingTo ) *pch++ = 'U';
1512        else if( stat->peerIsInterested ) *pch++ = 'u';
1513        if( !stat->clientIsChoked && !stat->clientIsInterested ) *pch++ = 'K';
1514        if( !stat->peerIsChoked && !stat->peerIsInterested ) *pch++ = '?';
1515        if( stat->isEncrypted ) *pch++ = 'E';
1516        if( stat->from == TR_PEER_FROM_PEX ) *pch++ = 'X';
1517        if( stat->isIncoming ) *pch++ = 'I';
1518        *pch = '\0';
1519    }
1520
1521    *setmeCount = size;
1522    tr_free( peers );
1523
1524    managerUnlock( manager );
1525    return ret;
1526}
1527
1528/**
1529***
1530**/
1531
1532struct ChokeData
1533{
1534    unsigned int  doUnchoke     : 1;
1535    unsigned int  isInterested  : 1;
1536    tr_peer * peer;
1537};
1538
1539static int
1540compareChoke( const void * va, const void * vb )
1541{
1542    const struct ChokeData * a = va;
1543    const struct ChokeData * b = vb;
1544    int diff = 0;
1545
1546    if( diff == 0 ) /* prefer higher dl speeds */
1547        diff = -tr_compareDouble( a->peer->rateToClient, b->peer->rateToClient );
1548    if( diff == 0 ) /* prefer higher ul speeds */
1549        diff = -tr_compareDouble( a->peer->rateToPeer, b->peer->rateToPeer );
1550    if( diff == 0 ) /* prefer unchoked */
1551        diff = (int)a->peer->peerIsChoked - (int)b->peer->peerIsChoked;
1552
1553    return diff;
1554}
1555
1556static int
1557isNew( const tr_peer * peer )
1558{
1559    return peer && peer->io && tr_peerIoGetAge( peer->io ) < 45;
1560}
1561
1562static int
1563isSame( const tr_peer * peer )
1564{
1565    return peer && peer->client && strstr( peer->client, "Transmission" );
1566}
1567
1568/**
1569***
1570**/
1571
1572static void
1573rechoke( Torrent * t )
1574{
1575    int i, peerCount, size, unchokedInterested;
1576    tr_peer ** peers = getConnectedPeers( t, &peerCount );
1577    struct ChokeData * choke = tr_new0( struct ChokeData, peerCount );
1578
1579    assert( torrentIsLocked( t ) );
1580   
1581    /* sort the peers by preference and rate */
1582    for( i=0, size=0; i<peerCount; ++i )
1583    {
1584        tr_peer * peer = peers[i];
1585        if( peer->progress >= 1.0 ) /* choke all seeds */
1586            tr_peerMsgsSetChoke( peer->msgs, TRUE );
1587        else {
1588            struct ChokeData * node = &choke[size++];
1589            node->peer = peer;
1590            node->isInterested = peer->peerIsInterested;
1591        }
1592    }
1593
1594    qsort( choke, size, sizeof(struct ChokeData), compareChoke );
1595
1596    /**
1597     * Reciprocation and number of uploads capping is managed by unchoking
1598     * the N peers which have the best upload rate and are interested.
1599     * This maximizes the client's download rate. These N peers are
1600     * referred to as downloaders, because they are interested in downloading
1601     * from the client.
1602     *
1603     * Peers which have a better upload rate (as compared to the downloaders)
1604     * but aren't interested get unchoked. If they become interested, the
1605     * downloader with the worst upload rate gets choked. If a client has
1606     * a complete file, it uses its upload rate rather than its download
1607     * rate to decide which peers to unchoke.
1608     */
1609    unchokedInterested = 0;
1610    for( i=0; i<size && unchokedInterested<MAX_UNCHOKED_PEERS; ++i ) {
1611        choke[i].doUnchoke = 1;
1612        if( choke[i].isInterested )
1613            ++unchokedInterested;
1614    }
1615
1616    /* optimistic unchoke */
1617    if( i < size )
1618    {
1619        int n;
1620        struct ChokeData * c;
1621        tr_ptrArray * randPool = tr_ptrArrayNew( );
1622
1623        for( ; i<size; ++i )
1624        {
1625            if( choke[i].isInterested )
1626            {
1627                const tr_peer * peer = choke[i].peer;
1628                int x=1, y;
1629                if( isNew( peer ) ) x *= 3;
1630                if( isSame( peer ) ) x *= 3;
1631                for( y=0; y<x; ++y )
1632                    tr_ptrArrayAppend( randPool, &choke[i] );
1633            }
1634        }
1635
1636        if(( n = tr_ptrArraySize( randPool )))
1637        {
1638            c = tr_ptrArrayNth( randPool, tr_rand( n ));
1639            c->doUnchoke = 1;
1640            t->optimistic = c->peer;
1641        }
1642
1643        tr_ptrArrayFree( randPool, NULL );
1644    }
1645
1646    for( i=0; i<size; ++i )
1647        tr_peerMsgsSetChoke( choke[i].peer->msgs, !choke[i].doUnchoke );
1648
1649    /* cleanup */
1650    tr_free( choke );
1651    tr_free( peers );
1652}
1653
1654static int
1655rechokePulse( void * vtorrent )
1656{
1657    Torrent * t = vtorrent;
1658    torrentLock( t );
1659    rechoke( t );
1660    torrentUnlock( t );
1661    return TRUE;
1662}
1663
1664/***
1665****
1666****  Life and Death
1667****
1668***/
1669
1670static int
1671shouldPeerBeClosed( const Torrent * t, const tr_peer * peer, int peerCount )
1672{
1673    const tr_torrent * tor = t->tor;
1674    const time_t now = time( NULL );
1675    const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1676
1677    /* if it's marked for purging, close it */
1678    if( peer->doPurge ) {
1679        tordbg( t, "purging peer %s because its doPurge flag is set", tr_peerIoAddrStr(&atom->addr,atom->port) );
1680        return TRUE;
1681    }
1682
1683    /* if we're seeding and the peer has everything we have,
1684     * and enough time has passed for a pex exchange, then disconnect */
1685    if( tr_torrentIsSeed( tor ) ) {
1686        int peerHasEverything;
1687        if( atom->flags & ADDED_F_SEED_FLAG )
1688            peerHasEverything = TRUE;
1689        else if( peer->progress < tr_cpPercentDone( tor->completion ) )
1690            peerHasEverything = FALSE;
1691        else {
1692            tr_bitfield * tmp = tr_bitfieldDup( tr_cpPieceBitfield( tor->completion ) );
1693            tr_bitfieldDifference( tmp, peer->have );
1694            peerHasEverything = tr_bitfieldCountTrueBits( tmp ) == 0;
1695            tr_bitfieldFree( tmp );
1696        }
1697        if( peerHasEverything && ( !tr_torrentAllowsPex(tor) || (now-atom->time>=30) ) ) {
1698            tordbg( t, "purging peer %s because we're both seeds", tr_peerIoAddrStr(&atom->addr,atom->port) );
1699            return TRUE;
1700        }
1701    }
1702
1703    /* disconnect if it's been too long since piece data has been transferred.
1704     * this is on a sliding scale based on number of available peers... */
1705    {
1706        const int relaxStrictnessIfFewerThanN = (int)((getMaxPeerCount(tor) * 0.9) + 0.5);
1707        /* if we have >= relaxIfFewerThan, strictness is 100%.
1708         * if we have zero connections, strictness is 0% */
1709        const float strictness = peerCount >= relaxStrictnessIfFewerThanN
1710            ? 1.0
1711            : peerCount / (float)relaxStrictnessIfFewerThanN;
1712        const int lo = MIN_UPLOAD_IDLE_SECS;
1713        const int hi = MAX_UPLOAD_IDLE_SECS;
1714        const int limit = lo + ((hi-lo) * strictness);
1715        const time_t then = peer->pieceDataActivityDate;
1716        const int idleTime = then ? (now-then) : 0;
1717        if( idleTime > limit ) {
1718            tordbg( t, "purging peer %s because it's been %d secs since we shared anything",
1719                       tr_peerIoAddrStr(&atom->addr,atom->port), idleTime );
1720            return TRUE;
1721        }
1722    }
1723
1724    return FALSE;
1725}
1726
1727static tr_peer **
1728getPeersToClose( Torrent * t, int * setmeSize )
1729{
1730    int i, peerCount, outsize;
1731    tr_peer ** peers = (tr_peer**) tr_ptrArrayPeek( t->peers, &peerCount );
1732    struct tr_peer ** ret = tr_new( tr_peer*, peerCount );
1733
1734    assert( torrentIsLocked( t ) );
1735
1736    for( i=outsize=0; i<peerCount; ++i )
1737        if( shouldPeerBeClosed( t, peers[i], peerCount ) )
1738            ret[outsize++] = peers[i];
1739
1740    *setmeSize = outsize;
1741    return ret;
1742}
1743
1744static int
1745compareCandidates( const void * va, const void * vb )
1746{
1747    const struct peer_atom * a = * (const struct peer_atom**) va;
1748    const struct peer_atom * b = * (const struct peer_atom**) vb;
1749    int i;
1750
1751    if( a->piece_data_time > b->piece_data_time ) return -1;
1752    if( a->piece_data_time < b->piece_data_time ) return  1;
1753
1754    if(( i = tr_compareUint16( a->numFails, b->numFails )))
1755        return i;
1756
1757    if( a->time != b->time )
1758        return a->time < b->time ? -1 : 1;
1759
1760    return 0;
1761}
1762
1763static struct peer_atom **
1764getPeerCandidates( Torrent * t, int * setmeSize )
1765{
1766    int i, atomCount, retCount;
1767    struct peer_atom ** atoms;
1768    struct peer_atom ** ret;
1769    const time_t now = time( NULL );
1770    const int seed = tr_torrentIsSeed( t->tor );
1771
1772    assert( torrentIsLocked( t ) );
1773
1774    atoms = (struct peer_atom**) tr_ptrArrayPeek( t->pool, &atomCount );
1775    ret = tr_new( struct peer_atom*, atomCount );
1776    for( i=retCount=0; i<atomCount; ++i )
1777    {
1778        struct peer_atom * atom = atoms[i];
1779
1780        /* peer fed us too much bad data ... we only keep it around
1781         * now to weed it out in case someone sends it to us via pex */
1782        if( atom->myflags & MYFLAG_BANNED )
1783            continue;
1784
1785        /* peer was unconnectable before, so we're not going to keep trying.
1786         * this is needs a separate flag from `banned', since if they try
1787         * to connect to us later, we'll let them in */
1788        if( atom->myflags & MYFLAG_UNREACHABLE )
1789            continue;
1790
1791        /* we don't need two connections to the same peer... */
1792        if( peerIsInUse( t, &atom->addr ) )
1793            continue;
1794
1795        /* no need to connect if we're both seeds... */
1796        if( seed && (atom->flags & ADDED_F_SEED_FLAG) )
1797            continue;
1798
1799        /* we're wasting our time trying to connect to this bozo. */
1800        if( atom->numFails > 3 )
1801            continue;
1802
1803        /* If we were connected to this peer recently and transferring
1804         * piece data, try to reconnect -- network troubles may have
1805         * disconnected us.  but if we weren't sharing piece data,
1806         * hold off on this peer to give another one a try instead */
1807        if( ( now - atom->piece_data_time ) > 30 )
1808        {
1809            int minWait = (60 * 5); /* five minutes */
1810            int maxWait = minWait * 3;
1811            int wait = atom->numFails * minWait;
1812            if( wait < minWait ) wait = minWait;
1813            if( wait > maxWait ) wait = maxWait;
1814            if( ( now - atom->time ) < wait ) {
1815                tordbg( t, "RECONNECT peer %d (%s) is in its grace period of %d seconds..",
1816                        i, tr_peerIoAddrStr(&atom->addr,atom->port), wait );
1817                continue;
1818            }
1819        }
1820
1821        /* Don't connect to peers in our blocklist */
1822        if( tr_sessionIsAddressBlocked( t->manager->handle, &atom->addr ) )
1823            continue;
1824
1825        ret[retCount++] = atom;
1826    }
1827
1828    qsort( ret, retCount, sizeof(struct peer_atom*), compareCandidates );
1829    *setmeSize = retCount;
1830    return ret;
1831}
1832
1833static int
1834reconnectPulse( void * vtorrent )
1835{
1836    Torrent * t = vtorrent;
1837    static time_t prevTime = 0;
1838    static int newConnectionsThisSecond = 0;
1839    time_t now;
1840
1841    torrentLock( t );
1842
1843    now = time( NULL );
1844    if( prevTime != now )
1845    {
1846        prevTime = now;
1847        newConnectionsThisSecond = 0;
1848    }
1849
1850    if( !t->isRunning )
1851    {
1852        removeAllPeers( t );
1853    }
1854    else
1855    {
1856        int i, nCandidates, nBad;
1857        struct peer_atom ** candidates = getPeerCandidates( t, &nCandidates );
1858        struct tr_peer ** connections = getPeersToClose( t, &nBad );
1859
1860        if( nBad || nCandidates )
1861            tordbg( t, "reconnect pulse for [%s]: %d bad connections, "
1862                       "%d connection candidates, %d atoms, max per pulse is %d",
1863                       t->tor->info.name, nBad, nCandidates,
1864                       tr_ptrArraySize(t->pool),
1865                       (int)MAX_RECONNECTIONS_PER_PULSE );
1866
1867        /* disconnect some peers.
1868           if we got transferred piece data, then they might be good peers,
1869           so reset their `numFails' weight to zero.  otherwise we connected
1870           to them fruitlessly, so mark it as another fail */
1871        for( i=0; i<nBad; ++i ) {
1872            tr_peer * peer = connections[i];
1873            struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1874            if( peer->pieceDataActivityDate )
1875                atom->numFails = 0;
1876            else
1877                ++atom->numFails;
1878            removePeer( t, peer );
1879        }
1880
1881        /* add some new ones */
1882        for( i=0;    i < nCandidates
1883                  && i < MAX_RECONNECTIONS_PER_PULSE
1884                  && newConnectionsThisSecond < MAX_CONNECTIONS_PER_SECOND; ++i )
1885        {
1886            tr_peerMgr * mgr = t->manager;
1887            struct peer_atom * atom = candidates[i];
1888            tr_peerIo * io;
1889
1890            tordbg( t, "Starting an OUTGOING connection with %s",
1891                       tr_peerIoAddrStr( &atom->addr, atom->port ) );
1892
1893            io = tr_peerIoNewOutgoing( mgr->handle, &atom->addr, atom->port, t->hash );
1894            if( io == NULL )
1895            {
1896                atom->myflags |= MYFLAG_UNREACHABLE;
1897            }
1898            else
1899            {
1900                tr_handshake * handshake = tr_handshakeNew( io,
1901                                                            mgr->handle->encryptionMode,
1902                                                            myHandshakeDoneCB,
1903                                                            mgr );
1904
1905                assert( tr_peerIoGetTorrentHash( io ) );
1906
1907                ++newConnectionsThisSecond;
1908
1909                tr_ptrArrayInsertSorted( t->outgoingHandshakes, handshake, handshakeCompare );
1910            }
1911
1912            atom->time = time( NULL );
1913        }
1914
1915        /* cleanup */
1916        tr_free( connections );
1917        tr_free( candidates );
1918    }
1919
1920    torrentUnlock( t );
1921    return TRUE;
1922}
Note: See TracBrowser for help on using the repository browser.