source: branches/1.5x/libtransmission/peer-mgr.c @ 7949

Last change on this file since 7949 was 7949, checked in by charles, 13 years ago

(1.5x libT) backport #1829: High CPU use in refillPulse()

  • Property svn:keywords set to Date Rev Author Id
File size: 69.8 KB
Line 
1
2/*
3 * This file Copyright (C) 2007-2009 Charles Kerr <charles@transmissionbt.com>
4 *
5 * This file is licensed by the GPL version 2.  Works owned by the
6 * Transmission project are granted a special exemption to clause 2(b)
7 * so that the bulk of its code can remain under the MIT license.
8 * This exemption does not extend to derived works not owned by
9 * the Transmission project.
10 *
11 * $Id: peer-mgr.c 7949 2009-02-25 22:15:19Z charles $
12 */
13
14#include <assert.h>
15#include <errno.h>
16#include <string.h> /* memcpy, memcmp, strstr */
17#include <stdlib.h> /* qsort */
18#include <limits.h> /* INT_MAX */
19
20#include <event.h>
21
22#include "transmission.h"
23#include "session.h"
24#include "bandwidth.h"
25#include "bencode.h"
26#include "blocklist.h"
27#include "clients.h"
28#include "completion.h"
29#include "crypto.h"
30#include "fdlimit.h"
31#include "handshake.h"
32#include "inout.h" /* tr_ioTestPiece */
33#include "net.h"
34#include "peer-io.h"
35#include "peer-mgr.h"
36#include "peer-msgs.h"
37#include "ptrarray.h"
38#include "stats.h" /* tr_statsAddUploaded, tr_statsAddDownloaded */
39#include "torrent.h"
40#include "trevent.h"
41#include "utils.h"
42#include "webseed.h"
43
44enum
45{
46    /* how frequently to change which peers are choked */
47    RECHOKE_PERIOD_MSEC = ( 10 * 1000 ),
48
49    /* minimum interval for refilling peers' request lists */
50    REFILL_PERIOD_MSEC = 400,
51   
52    /* how frequently to reallocate bandwidth */
53    BANDWIDTH_PERIOD_MSEC = 500,
54
55    /* how frequently to age out old piece request lists */
56    REFILL_UPKEEP_PERIOD_MSEC = 10000,
57
58    /* how frequently to decide which peers live and die */
59    RECONNECT_PERIOD_MSEC = 500,
60
61    /* when many peers are available, keep idle ones this long */
62    MIN_UPLOAD_IDLE_SECS = ( 30 ),
63
64    /* when few peers are available, keep idle ones this long */
65    MAX_UPLOAD_IDLE_SECS = ( 60 * 5 ),
66
67    /* max # of peers to ask fer per torrent per reconnect pulse */
68    MAX_RECONNECTIONS_PER_PULSE = 16,
69
70    /* max number of peers to ask for per second overall.
71    * this throttle is to avoid overloading the router */
72    MAX_CONNECTIONS_PER_SECOND = 32,
73
74    /* number of bad pieces a peer is allowed to send before we ban them */
75    MAX_BAD_PIECES_PER_PEER = 5,
76
77    /* amount of time to keep a list of request pieces lying around
78       before it's considered too old and needs to be rebuilt */
79    PIECE_LIST_SHELF_LIFE_SECS = 60,
80
81    /* use for bitwise operations w/peer_atom.myflags */
82    MYFLAG_BANNED = 1,
83
84    /* use for bitwise operations w/peer_atom.myflags */
85    /* unreachable for now... but not banned.
86     * if they try to connect to us it's okay */
87    MYFLAG_UNREACHABLE = 2,
88
89    /* the minimum we'll wait before attempting to reconnect to a peer */
90    MINIMUM_RECONNECT_INTERVAL_SECS = 5
91};
92
93
94/**
95***
96**/
97
98enum
99{
100    UPLOAD_ONLY_UKNOWN,
101    UPLOAD_ONLY_YES,
102    UPLOAD_ONLY_NO
103};
104
105/**
106 * Peer information that should be kept even before we've connected and
107 * after we've disconnected.  These are kept in a pool of peer_atoms to decide
108 * which ones would make good candidates for connecting to, and to watch out
109 * for banned peers.
110 *
111 * @see tr_peer
112 * @see tr_peermsgs
113 */
114struct peer_atom
115{
116    uint8_t     from;
117    uint8_t     flags;       /* these match the added_f flags */
118    uint8_t     myflags;     /* flags that aren't defined in added_f */
119    uint8_t     uploadOnly;  /* UPLOAD_ONLY_ */
120    tr_port     port;
121    uint16_t    numFails;
122    tr_address  addr;
123    time_t      time;        /* when the peer's connection status last changed */
124    time_t      piece_data_time;
125};
126
127struct tr_blockIterator
128{
129    time_t expirationDate;
130    struct tr_torrent_peers * t;
131    tr_block_index_t blockIndex, blockCount, *blocks;
132    tr_piece_index_t pieceIndex, pieceCount, *pieces;
133};
134
135typedef struct tr_torrent_peers
136{
137    tr_bool                    isRunning;
138
139    uint8_t                    hash[SHA_DIGEST_LENGTH];
140    int                      * pendingRequestCount;
141    tr_ptrArray                outgoingHandshakes; /* tr_handshake */
142    tr_ptrArray                pool; /* struct peer_atom */
143    tr_ptrArray                peers; /* tr_peer */
144    tr_ptrArray                webseeds; /* tr_webseed */
145    tr_timer                 * refillTimer;
146    tr_torrent               * tor;
147    tr_peer                  * optimistic; /* the optimistic peer, or NULL if none */
148    struct tr_blockIterator  * refillQueue; /* used in refillPulse() */
149
150    struct tr_peerMgr        * manager;
151}
152Torrent;
153
154struct tr_peerMgr
155{
156    tr_session      * session;
157    tr_ptrArray       incomingHandshakes; /* tr_handshake */
158    tr_timer        * bandwidthTimer;
159    tr_timer        * rechokeTimer;
160    tr_timer        * reconnectTimer;
161    tr_timer        * refillUpkeepTimer;
162};
163
164#define tordbg( t, ... ) \
165    do { \
166        if( tr_deepLoggingIsActive( ) ) \
167            tr_deepLog( __FILE__, __LINE__, t->tor->info.name, __VA_ARGS__ ); \
168    } while( 0 )
169
170#define dbgmsg( ... ) \
171    do { \
172        if( tr_deepLoggingIsActive( ) ) \
173            tr_deepLog( __FILE__, __LINE__, NULL, __VA_ARGS__ ); \
174    } while( 0 )
175
176/**
177***
178**/
179
180static TR_INLINE void
181managerLock( const struct tr_peerMgr * manager )
182{
183    tr_globalLock( manager->session );
184}
185
186static TR_INLINE void
187managerUnlock( const struct tr_peerMgr * manager )
188{
189    tr_globalUnlock( manager->session );
190}
191
192static TR_INLINE void
193torrentLock( Torrent * torrent )
194{
195    managerLock( torrent->manager );
196}
197
198static TR_INLINE void
199torrentUnlock( Torrent * torrent )
200{
201    managerUnlock( torrent->manager );
202}
203
204static TR_INLINE int
205torrentIsLocked( const Torrent * t )
206{
207    return tr_globalIsLocked( t->manager->session );
208}
209
210/**
211***
212**/
213
214static int
215handshakeCompareToAddr( const void * va, const void * vb )
216{
217    const tr_handshake * a = va;
218
219    return tr_compareAddresses( tr_handshakeGetAddr( a, NULL ), vb );
220}
221
222static int
223handshakeCompare( const void * a, const void * b )
224{
225    return handshakeCompareToAddr( a, tr_handshakeGetAddr( b, NULL ) );
226}
227
228static tr_handshake*
229getExistingHandshake( tr_ptrArray      * handshakes,
230                      const tr_address * addr )
231{
232    return tr_ptrArrayFindSorted( handshakes, addr, handshakeCompareToAddr );
233}
234
235static int
236comparePeerAtomToAddress( const void * va, const void * vb )
237{
238    const struct peer_atom * a = va;
239
240    return tr_compareAddresses( &a->addr, vb );
241}
242
243static int
244comparePeerAtoms( const void * va, const void * vb )
245{
246    const struct peer_atom * b = vb;
247
248    return comparePeerAtomToAddress( va, &b->addr );
249}
250
251/**
252***
253**/
254
255static Torrent*
256getExistingTorrent( tr_peerMgr *    manager,
257                    const uint8_t * hash )
258{
259    tr_torrent * tor = tr_torrentFindFromHash( manager->session, hash );
260
261    return tor == NULL ? NULL : tor->torrentPeers;
262}
263
264static int
265peerCompare( const void * va, const void * vb )
266{
267    const tr_peer * a = va;
268    const tr_peer * b = vb;
269
270    return tr_compareAddresses( &a->addr, &b->addr );
271}
272
273static int
274peerCompareToAddr( const void * va, const void * vb )
275{
276    const tr_peer * a = va;
277
278    return tr_compareAddresses( &a->addr, vb );
279}
280
281static tr_peer*
282getExistingPeer( Torrent          * torrent,
283                 const tr_address * addr )
284{
285    assert( torrentIsLocked( torrent ) );
286    assert( addr );
287
288    return tr_ptrArrayFindSorted( &torrent->peers, addr, peerCompareToAddr );
289}
290
291static struct peer_atom*
292getExistingAtom( const Torrent    * t,
293                 const tr_address * addr )
294{
295    Torrent * tt = (Torrent*)t;
296    assert( torrentIsLocked( t ) );
297    return tr_ptrArrayFindSorted( &tt->pool, addr, comparePeerAtomToAddress );
298}
299
300static tr_bool
301peerIsInUse( const Torrent    * ct,
302             const tr_address * addr )
303{
304    Torrent * t = (Torrent*) ct;
305
306    assert( torrentIsLocked ( t ) );
307
308    return getExistingPeer( t, addr )
309        || getExistingHandshake( &t->outgoingHandshakes, addr )
310        || getExistingHandshake( &t->manager->incomingHandshakes, addr );
311}
312
313static tr_peer*
314peerConstructor( const tr_address * addr )
315{
316    tr_peer * p;
317    p = tr_new0( tr_peer, 1 );
318    p->addr = *addr;
319    return p;
320}
321
322static tr_peer*
323getPeer( Torrent          * torrent,
324         const tr_address * addr )
325{
326    tr_peer * peer;
327
328    assert( torrentIsLocked( torrent ) );
329
330    peer = getExistingPeer( torrent, addr );
331
332    if( peer == NULL )
333    {
334        peer = peerConstructor( addr );
335        tr_ptrArrayInsertSorted( &torrent->peers, peer, peerCompare );
336    }
337
338    return peer;
339}
340
341static void
342peerDestructor( tr_peer * peer )
343{
344    assert( peer );
345
346    if( peer->msgs != NULL )
347    {
348        tr_peerMsgsUnsubscribe( peer->msgs, peer->msgsTag );
349        tr_peerMsgsFree( peer->msgs );
350    }
351
352    tr_peerIoClear( peer->io );
353    tr_peerIoUnref( peer->io ); /* balanced by the ref in handshakeDoneCB() */
354
355    tr_bitfieldFree( peer->have );
356    tr_bitfieldFree( peer->blame );
357    tr_free( peer->client );
358
359    tr_free( peer );
360}
361
362static void
363removePeer( Torrent * t,
364            tr_peer * peer )
365{
366    tr_peer *          removed;
367    struct peer_atom * atom;
368
369    assert( torrentIsLocked( t ) );
370
371    atom = getExistingAtom( t, &peer->addr );
372    assert( atom );
373    atom->time = time( NULL );
374
375    removed = tr_ptrArrayRemoveSorted( &t->peers, peer, peerCompare );
376    assert( removed == peer );
377    peerDestructor( removed );
378}
379
380static void
381removeAllPeers( Torrent * t )
382{
383    while( !tr_ptrArrayEmpty( &t->peers ) )
384        removePeer( t, tr_ptrArrayNth( &t->peers, 0 ) );
385}
386
387static void blockIteratorFree( struct tr_blockIterator ** inout );
388
389static void
390torrentDestructor( void * vt )
391{
392    Torrent * t = vt;
393    uint8_t   hash[SHA_DIGEST_LENGTH];
394
395    assert( t );
396    assert( !t->isRunning );
397    assert( torrentIsLocked( t ) );
398    assert( tr_ptrArrayEmpty( &t->outgoingHandshakes ) );
399    assert( tr_ptrArrayEmpty( &t->peers ) );
400
401    memcpy( hash, t->hash, SHA_DIGEST_LENGTH );
402
403    tr_timerFree( &t->refillTimer );
404
405    blockIteratorFree( &t->refillQueue );
406    tr_ptrArrayDestruct( &t->webseeds, (PtrArrayForeachFunc)tr_webseedFree );
407    tr_ptrArrayDestruct( &t->pool, (PtrArrayForeachFunc)tr_free );
408    tr_ptrArrayDestruct( &t->outgoingHandshakes, NULL );
409    tr_ptrArrayDestruct( &t->peers, NULL );
410
411    tr_free( t->pendingRequestCount );
412    tr_free( t );
413}
414
415static void peerCallbackFunc( void * vpeer,
416                              void * vevent,
417                              void * vt );
418
419static Torrent*
420torrentConstructor( tr_peerMgr * manager,
421                    tr_torrent * tor )
422{
423    int       i;
424    Torrent * t;
425
426    t = tr_new0( Torrent, 1 );
427    t->manager = manager;
428    t->tor = tor;
429    t->pool = TR_PTR_ARRAY_INIT;
430    t->peers = TR_PTR_ARRAY_INIT;
431    t->webseeds = TR_PTR_ARRAY_INIT;
432    t->outgoingHandshakes = TR_PTR_ARRAY_INIT;
433    memcpy( t->hash, tor->info.hash, SHA_DIGEST_LENGTH );
434
435    for( i = 0; i < tor->info.webseedCount; ++i )
436    {
437        tr_webseed * w =
438            tr_webseedNew( tor, tor->info.webseeds[i], peerCallbackFunc, t );
439        tr_ptrArrayAppend( &t->webseeds, w );
440    }
441
442    return t;
443}
444
445
446static int bandwidthPulse ( void * vmgr );
447static int rechokePulse   ( void * vmgr );
448static int reconnectPulse ( void * vmgr );
449static int refillUpkeep   ( void * vmgr );
450
451tr_peerMgr*
452tr_peerMgrNew( tr_session * session )
453{
454    tr_peerMgr * m = tr_new0( tr_peerMgr, 1 );
455
456    m->session = session;
457    m->incomingHandshakes = TR_PTR_ARRAY_INIT;
458    m->bandwidthTimer    = tr_timerNew( session, bandwidthPulse, m, BANDWIDTH_PERIOD_MSEC );
459    m->rechokeTimer      = tr_timerNew( session, rechokePulse,   m, RECHOKE_PERIOD_MSEC );
460    m->reconnectTimer    = tr_timerNew( session, reconnectPulse, m, RECONNECT_PERIOD_MSEC );
461    m->refillUpkeepTimer = tr_timerNew( session, refillUpkeep,   m, REFILL_UPKEEP_PERIOD_MSEC );
462
463    rechokePulse( m );
464
465    return m;
466}
467
468void
469tr_peerMgrFree( tr_peerMgr * manager )
470{
471    managerLock( manager );
472
473    tr_timerFree( &manager->refillUpkeepTimer );
474    tr_timerFree( &manager->reconnectTimer );
475    tr_timerFree( &manager->rechokeTimer );
476    tr_timerFree( &manager->bandwidthTimer );
477
478    /* free the handshakes.  Abort invokes handshakeDoneCB(), which removes
479     * the item from manager->handshakes, so this is a little roundabout... */
480    while( !tr_ptrArrayEmpty( &manager->incomingHandshakes ) )
481        tr_handshakeAbort( tr_ptrArrayNth( &manager->incomingHandshakes, 0 ) );
482
483    tr_ptrArrayDestruct( &manager->incomingHandshakes, NULL );
484
485    managerUnlock( manager );
486    tr_free( manager );
487}
488
489static int
490clientIsDownloadingFrom( const tr_peer * peer )
491{
492    return peer->clientIsInterested && !peer->clientIsChoked;
493}
494
495static int
496clientIsUploadingTo( const tr_peer * peer )
497{
498    return peer->peerIsInterested && !peer->peerIsChoked;
499}
500
501/***
502****
503***/
504
505tr_bool
506tr_peerMgrPeerIsSeed( const tr_torrent  * tor,
507                      const tr_address  * addr )
508{
509    tr_bool isSeed = FALSE;
510    const Torrent * t = tor->torrentPeers;
511    const struct peer_atom * atom = getExistingAtom( t, addr );
512
513    if( atom )
514        isSeed = ( atom->flags & ADDED_F_SEED_FLAG ) != 0;
515
516    return isSeed;
517}
518
519/****
520*****
521*****  REFILL
522*****
523****/
524
525static void
526assertValidPiece( Torrent * t, tr_piece_index_t piece )
527{
528    assert( t );
529    assert( t->tor );
530    assert( piece < t->tor->info.pieceCount );
531}
532
533static int
534getPieceRequests( Torrent * t, tr_piece_index_t piece )
535{
536    assertValidPiece( t, piece );
537
538    return t->pendingRequestCount ? t->pendingRequestCount[piece] : 0;
539}
540
541static void
542incrementPieceRequests( Torrent * t, tr_piece_index_t piece )
543{
544    assertValidPiece( t, piece );
545
546    if( t->pendingRequestCount == NULL )
547        t->pendingRequestCount = tr_new0( int, t->tor->info.pieceCount );
548    t->pendingRequestCount[piece]++;
549}
550
551static void
552decrementPieceRequests( Torrent * t, tr_piece_index_t piece )
553{
554    assertValidPiece( t, piece );
555
556    if( t->pendingRequestCount )
557        t->pendingRequestCount[piece]--;
558}
559
560struct tr_refill_piece
561{
562    tr_priority_t    priority;
563    uint32_t         piece;
564    uint32_t         peerCount;
565    int              random;
566    int              pendingRequestCount;
567    int              missingBlockCount;
568};
569
570static int
571compareRefillPiece( const void * aIn, const void * bIn )
572{
573    const struct tr_refill_piece * a = aIn;
574    const struct tr_refill_piece * b = bIn;
575
576    /* if one piece has a higher priority, it goes first */
577    if( a->priority != b->priority )
578        return a->priority > b->priority ? -1 : 1;
579
580    /* have a per-priority endgame */
581    if( a->pendingRequestCount != b->pendingRequestCount )
582        return a->pendingRequestCount < b->pendingRequestCount ? -1 : 1;
583
584    /* fewer missing pieces goes first */
585    if( a->missingBlockCount != b->missingBlockCount )
586        return a->missingBlockCount < b->missingBlockCount ? -1 : 1;
587
588    /* otherwise if one has fewer peers, it goes first */
589    if( a->peerCount != b->peerCount )
590        return a->peerCount < b->peerCount ? -1 : 1;
591
592    /* otherwise go with our random seed */
593    if( a->random != b->random )
594        return a->random < b->random ? -1 : 1;
595
596    return 0;
597}
598
599static tr_piece_index_t *
600getPreferredPieces( Torrent * t, tr_piece_index_t * pieceCount )
601{
602    const tr_torrent  * tor = t->tor;
603    const tr_info     * inf = &tor->info;
604    tr_piece_index_t    i;
605    tr_piece_index_t    poolSize = 0;
606    tr_piece_index_t  * pool = tr_new( tr_piece_index_t , inf->pieceCount );
607    int                 peerCount;
608    const tr_peer    ** peers;
609
610    assert( torrentIsLocked( t ) );
611
612    peers = (const tr_peer**) tr_ptrArrayBase( &t->peers );
613    peerCount = tr_ptrArraySize( &t->peers );
614
615    /* make a list of the pieces that we want but don't have */
616    for( i = 0; i < inf->pieceCount; ++i )
617        if( !tor->info.pieces[i].dnd
618                && !tr_cpPieceIsComplete( &tor->completion, i ) )
619            pool[poolSize++] = i;
620
621    /* sort the pool by which to request next */
622    if( poolSize > 1 )
623    {
624        tr_piece_index_t j;
625        struct tr_refill_piece * p = tr_new( struct tr_refill_piece, poolSize );
626
627        for( j = 0; j < poolSize; ++j )
628        {
629            int k;
630            const tr_piece_index_t piece = pool[j];
631            struct tr_refill_piece * setme = p + j;
632
633            setme->piece = piece;
634            setme->priority = inf->pieces[piece].priority;
635            setme->peerCount = 0;
636            setme->random = tr_cryptoWeakRandInt( INT_MAX );
637            setme->pendingRequestCount = getPieceRequests( t, piece );
638            setme->missingBlockCount
639                         = tr_cpMissingBlocksInPiece( &tor->completion, piece );
640
641            for( k = 0; k < peerCount; ++k )
642            {
643                const tr_peer * peer = peers[k];
644                if( peer->peerIsInterested
645                        && !peer->clientIsChoked
646                        && tr_bitfieldHas( peer->have, piece ) )
647                    ++setme->peerCount;
648            }
649        }
650
651        qsort( p, poolSize, sizeof( struct tr_refill_piece ),
652               compareRefillPiece );
653
654        for( j = 0; j < poolSize; ++j )
655            pool[j] = p[j].piece;
656
657        tr_free( p );
658    }
659
660    *pieceCount = poolSize;
661    return pool;
662}
663
664static struct tr_blockIterator*
665blockIteratorNew( Torrent * t )
666{
667    struct tr_blockIterator * i = tr_new0( struct tr_blockIterator, 1 );
668    i->expirationDate = time( NULL ) + PIECE_LIST_SHELF_LIFE_SECS;
669    i->t = t;
670    i->pieces = getPreferredPieces( t, &i->pieceCount );
671    i->blocks = tr_new0( tr_block_index_t, t->tor->blockCountInPiece );
672    tordbg( t, "creating new refill queue.. it contains %"PRIu32" pieces", i->pieceCount );
673    return i;
674}
675
676static tr_bool
677blockIteratorNext( struct tr_blockIterator * i, tr_block_index_t * setme )
678{
679    tr_bool found;
680    Torrent * t = i->t;
681    tr_torrent * tor = t->tor;
682
683    while( ( i->blockIndex == i->blockCount )
684        && ( i->pieceIndex < i->pieceCount ) )
685    {
686        const tr_piece_index_t index = i->pieces[i->pieceIndex++];
687        const tr_block_index_t b = tr_torPieceFirstBlock( tor, index );
688        const tr_block_index_t e = b + tr_torPieceCountBlocks( tor, index );
689        tr_block_index_t block;
690
691        assert( index < tor->info.pieceCount );
692
693        i->blockCount = 0;
694        i->blockIndex = 0;
695        for( block=b; block!=e; ++block )
696            if( !tr_cpBlockIsComplete( &tor->completion, block ) )
697                i->blocks[i->blockCount++] = block;
698    }
699
700    assert( i->blockCount <= tor->blockCountInPiece );
701
702    if(( found = ( i->blockIndex < i->blockCount )))
703        *setme = i->blocks[i->blockIndex++];
704
705    return found;
706}
707
708static void
709blockIteratorSkipCurrentPiece( struct tr_blockIterator * i )
710{
711    i->blockIndex = i->blockCount;
712}
713
714static void
715blockIteratorFree( struct tr_blockIterator ** inout )
716{
717    struct tr_blockIterator * it = *inout;
718
719    if( it != NULL )
720    {
721        tr_free( it->blocks );
722        tr_free( it->pieces );
723        tr_free( it );
724    }
725
726    *inout = NULL;
727}
728
729static tr_peer**
730getPeersUploadingToClient( Torrent * t,
731                           int *     setmeCount )
732{
733    int j;
734    int peerCount = 0;
735    int retCount = 0;
736    tr_peer ** peers = (tr_peer **) tr_ptrArrayPeek( &t->peers, &peerCount );
737    tr_peer ** ret = tr_new( tr_peer *, peerCount );
738
739    j = 0; /* this is a temporary test to make sure we walk through all the peers */
740    if( peerCount )
741    {
742        /* Get a list of peers we're downloading from.
743           Pick a different starting point each time so all peers
744           get a chance at being the first in line */
745        const int fencepost = tr_cryptoWeakRandInt( peerCount );
746        int i = fencepost;
747        do {
748            if( clientIsDownloadingFrom( peers[i] ) )
749                ret[retCount++] = peers[i];
750            i = ( i + 1 ) % peerCount;
751            ++j;
752        } while( i != fencepost );
753    }
754    assert( j == peerCount );
755    *setmeCount = retCount;
756    return ret;
757}
758
759static uint32_t
760getBlockOffsetInPiece( const tr_torrent * tor, uint64_t b )
761{
762    const uint64_t piecePos = tor->info.pieceSize * tr_torBlockPiece( tor, b );
763    const uint64_t blockPos = tor->blockSize * b;
764    assert( blockPos >= piecePos );
765    return (uint32_t)( blockPos - piecePos );
766}
767
768static int
769refillUpkeep( void * vmgr )
770{
771    tr_torrent * tor = NULL;
772    tr_peerMgr * mgr = vmgr;
773    time_t now;
774    managerLock( mgr );
775
776    now = time( NULL );
777    while(( tor = tr_torrentNext( mgr->session, tor ))) {
778        Torrent * t = tor->torrentPeers;
779        if( t && t->refillQueue && ( t->refillQueue->expirationDate <= now ) ) {
780            tordbg( t, "refill queue is past its shelf date; discarding." );
781            blockIteratorFree( &t->refillQueue );
782        }
783    }
784
785    managerUnlock( mgr );
786    return TRUE;
787}
788
789static int
790refillPulse( void * vtorrent )
791{
792    tr_block_index_t block;
793    int peerCount;
794    int webseedCount;
795    tr_peer ** peers;
796    tr_webseed ** webseeds;
797    Torrent * t = vtorrent;
798    tr_torrent * tor = t->tor;
799    tr_bool hasNext = TRUE;
800
801    if( !t->isRunning )
802        return TRUE;
803    if( tr_torrentIsSeed( t->tor ) )
804        return TRUE;
805
806    torrentLock( t );
807    tordbg( t, "Refilling Request Buffers..." );
808
809    if( t->refillQueue == NULL )
810        t->refillQueue = blockIteratorNew( t );
811
812    peers = getPeersUploadingToClient( t, &peerCount );
813    webseedCount = tr_ptrArraySize( &t->webseeds );
814    webseeds = tr_memdup( tr_ptrArrayBase( &t->webseeds ),
815                          webseedCount * sizeof( tr_webseed* ) );
816
817    while( ( webseedCount || peerCount )
818        && (( hasNext = blockIteratorNext( t->refillQueue, &block ))) )
819    {
820        int j;
821        tr_bool handled = FALSE;
822
823        const tr_piece_index_t index = tr_torBlockPiece( tor, block );
824        const uint32_t offset = getBlockOffsetInPiece( tor, block );
825        const uint32_t length = tr_torBlockCountBytes( tor, block );
826
827        assert( block < tor->blockCount );
828
829        /* find a peer who can ask for this block */
830        for( j=0; !handled && j<peerCount; )
831        {
832            const tr_addreq_t val = tr_peerMsgsAddRequest( peers[j]->msgs, index, offset, length );
833            switch( val )
834            {
835                case TR_ADDREQ_FULL:
836                case TR_ADDREQ_CLIENT_CHOKED:
837                    peers[j] = peers[--peerCount];
838                    break;
839
840                case TR_ADDREQ_MISSING:
841                case TR_ADDREQ_DUPLICATE:
842                    ++j;
843                    break;
844
845                case TR_ADDREQ_OK:
846                    incrementPieceRequests( t, index );
847                    handled = TRUE;
848                    break;
849
850                default:
851                    assert( 0 && "unhandled value" );
852                    break;
853            }
854        }
855
856        /* maybe one of the webseeds can do it */
857        for( j=0; !handled && j<webseedCount; )
858        {
859            const tr_addreq_t val = tr_webseedAddRequest( webseeds[j], index, offset, length );
860            switch( val )
861            {
862                case TR_ADDREQ_FULL:
863                    webseeds[j] = webseeds[--webseedCount];
864                    break;
865
866                case TR_ADDREQ_OK:
867                    incrementPieceRequests( t, index );
868                    handled = TRUE;
869                    break;
870
871                default:
872                    assert( 0 && "unhandled value" );
873                    break;
874            }
875        }
876
877        if( !handled )
878            blockIteratorSkipCurrentPiece( t->refillQueue );
879    }
880
881    /* cleanup */
882    tr_free( webseeds );
883    tr_free( peers );
884
885    if( !hasNext ) {
886        tordbg( t, "refill queue has no more blocks to request... freeing (webseed count: %d, peer count: %d)", webseedCount, peerCount );
887        blockIteratorFree( &t->refillQueue );
888    }
889
890    t->refillTimer = NULL;
891    torrentUnlock( t );
892    return FALSE;
893}
894
895static void
896broadcastGotBlock( Torrent * t, uint32_t index, uint32_t offset, uint32_t length )
897{
898    size_t i;
899    size_t peerCount;
900    tr_peer ** peers;
901
902    assert( torrentIsLocked( t ) );
903
904    tordbg( t, "got a block; cancelling any duplicate requests from peers %"PRIu32":%"PRIu32"->%"PRIu32, index, offset, length );
905
906    peerCount = tr_ptrArraySize( &t->peers );
907    peers = (tr_peer**) tr_ptrArrayBase( &t->peers );
908    for( i=0; i<peerCount; ++i )
909        if( peers[i]->msgs )
910            tr_peerMsgsCancel( peers[i]->msgs, index, offset, length );
911}
912
913static void
914addStrike( Torrent * t,
915           tr_peer * peer )
916{
917    tordbg( t, "increasing peer %s strike count to %d",
918            tr_peerIoAddrStr( &peer->addr,
919                              peer->port ), peer->strikes + 1 );
920
921    if( ++peer->strikes >= MAX_BAD_PIECES_PER_PEER )
922    {
923        struct peer_atom * atom = getExistingAtom( t, &peer->addr );
924        atom->myflags |= MYFLAG_BANNED;
925        peer->doPurge = 1;
926        tordbg( t, "banning peer %s", tr_peerIoAddrStr( &atom->addr, atom->port ) );
927    }
928}
929
930static void
931gotBadPiece( Torrent *        t,
932             tr_piece_index_t pieceIndex )
933{
934    tr_torrent *   tor = t->tor;
935    const uint32_t byteCount = tr_torPieceCountBytes( tor, pieceIndex );
936
937    tor->corruptCur += byteCount;
938    tor->downloadedCur -= MIN( tor->downloadedCur, byteCount );
939}
940
941static void
942refillSoon( Torrent * t )
943{
944    if( t->refillTimer == NULL )
945        t->refillTimer = tr_timerNew( t->manager->session,
946                                      refillPulse, t,
947                                      REFILL_PERIOD_MSEC );
948}
949
950static void
951peerSuggestedPiece( Torrent            * t UNUSED,
952                    tr_peer            * peer UNUSED,
953                    tr_piece_index_t     pieceIndex UNUSED,
954                    int                  isFastAllowed UNUSED )
955{
956#if 0
957    assert( t );
958    assert( peer );
959    assert( peer->msgs );
960
961    /* is this a valid piece? */
962    if(  pieceIndex >= t->tor->info.pieceCount )
963        return;
964
965    /* don't ask for it if we've already got it */
966    if( tr_cpPieceIsComplete( t->tor->completion, pieceIndex ) )
967        return;
968
969    /* don't ask for it if they don't have it */
970    if( !tr_bitfieldHas( peer->have, pieceIndex ) )
971        return;
972
973    /* don't ask for it if we're choked and it's not fast */
974    if( !isFastAllowed && peer->clientIsChoked )
975        return;
976
977    /* request the blocks that we don't have in this piece */
978    {
979        tr_block_index_t block;
980        const tr_torrent * tor = t->tor;
981        const tr_block_index_t start = tr_torPieceFirstBlock( tor, pieceIndex );
982        const tr_block_index_t end = start + tr_torPieceCountBlocks( tor, pieceIndex );
983
984        for( block=start; block<end; ++block )
985        {
986            if( !tr_cpBlockIsComplete( tor->completion, block ) )
987            {
988                const uint32_t offset = getBlockOffsetInPiece( tor, block );
989                const uint32_t length = tr_torBlockCountBytes( tor, block );
990                tr_peerMsgsAddRequest( peer->msgs, pieceIndex, offset, length );
991                incrementPieceRequests( t, pieceIndex );
992            }
993        }
994    }
995#endif
996}
997
998static void
999peerCallbackFunc( void * vpeer, void * vevent, void * vt )
1000{
1001    tr_peer * peer = vpeer; /* may be NULL if peer is a webseed */
1002    Torrent * t = vt;
1003    const tr_peer_event * e = vevent;
1004
1005    torrentLock( t );
1006
1007    switch( e->eventType )
1008    {
1009        case TR_PEER_UPLOAD_ONLY:
1010            /* update our atom */
1011            if( peer ) {
1012                struct peer_atom * a = getExistingAtom( t, &peer->addr );
1013                a->uploadOnly = e->uploadOnly ? UPLOAD_ONLY_YES : UPLOAD_ONLY_NO;
1014            }
1015            break;
1016
1017        case TR_PEER_NEED_REQ:
1018            refillSoon( t );
1019            break;
1020
1021        case TR_PEER_CANCEL:
1022            decrementPieceRequests( t, e->pieceIndex );
1023            break;
1024
1025        case TR_PEER_PEER_GOT_DATA:
1026        {
1027            const time_t now = time( NULL );
1028            tr_torrent * tor = t->tor;
1029
1030            tor->activityDate = now;
1031
1032            if( e->wasPieceData )
1033                tor->uploadedCur += e->length;
1034
1035            /* update the stats */
1036            if( e->wasPieceData )
1037                tr_statsAddUploaded( tor->session, e->length );
1038
1039            /* update our atom */
1040            if( peer ) {
1041                struct peer_atom * a = getExistingAtom( t, &peer->addr );
1042                if( e->wasPieceData )
1043                    a->piece_data_time = now;
1044            }
1045
1046            break;
1047        }
1048
1049        case TR_PEER_CLIENT_GOT_SUGGEST:
1050            if( peer )
1051                peerSuggestedPiece( t, peer, e->pieceIndex, FALSE );
1052            break;
1053
1054        case TR_PEER_CLIENT_GOT_ALLOWED_FAST:
1055            if( peer )
1056                peerSuggestedPiece( t, peer, e->pieceIndex, TRUE );
1057            break;
1058
1059        case TR_PEER_CLIENT_GOT_DATA:
1060        {
1061            const time_t now = time( NULL );
1062            tr_torrent * tor = t->tor;
1063            tor->activityDate = now;
1064
1065            /* only add this to downloadedCur if we got it from a peer --
1066             * webseeds shouldn't count against our ratio.  As one tracker
1067             * admin put it, "Those pieces are downloaded directly from the
1068             * content distributor, not the peers, it is the tracker's job
1069             * to manage the swarms, not the web server and does not fit
1070             * into the jurisdiction of the tracker." */
1071            if( peer && e->wasPieceData )
1072                tor->downloadedCur += e->length;
1073
1074            /* update the stats */ 
1075            if( e->wasPieceData )
1076                tr_statsAddDownloaded( tor->session, e->length );
1077
1078            /* update our atom */
1079            if( peer ) {
1080                struct peer_atom * a = getExistingAtom( t, &peer->addr );
1081                if( e->wasPieceData )
1082                    a->piece_data_time = now;
1083            }
1084
1085            break;
1086        }
1087
1088        case TR_PEER_PEER_PROGRESS:
1089        {
1090            if( peer )
1091            {
1092                struct peer_atom * atom = getExistingAtom( t, &peer->addr );
1093                const int peerIsSeed = e->progress >= 1.0;
1094                if( peerIsSeed ) {
1095                    tordbg( t, "marking peer %s as a seed", tr_peerIoAddrStr( &atom->addr, atom->port ) );
1096                    atom->flags |= ADDED_F_SEED_FLAG;
1097                } else {
1098                    tordbg( t, "marking peer %s as a non-seed", tr_peerIoAddrStr( &atom->addr, atom->port ) );
1099                    atom->flags &= ~ADDED_F_SEED_FLAG;
1100                }
1101            }
1102            break;
1103        }
1104
1105        case TR_PEER_CLIENT_GOT_BLOCK:
1106        {
1107            tr_torrent * tor = t->tor;
1108
1109            tr_block_index_t block = _tr_block( tor, e->pieceIndex, e->offset );
1110
1111            tr_cpBlockAdd( &tor->completion, block );
1112            decrementPieceRequests( t, e->pieceIndex );
1113
1114            broadcastGotBlock( t, e->pieceIndex, e->offset, e->length );
1115
1116            if( tr_cpPieceIsComplete( &tor->completion, e->pieceIndex ) )
1117            {
1118                const tr_piece_index_t p = e->pieceIndex;
1119                const tr_bool ok = tr_ioTestPiece( tor, p, NULL, 0 );
1120
1121                if( !ok )
1122                {
1123                    tr_torerr( tor, _( "Piece %lu, which was just downloaded, failed its checksum test" ),
1124                               (unsigned long)p );
1125                }
1126
1127                tr_torrentSetHasPiece( tor, p, ok );
1128                tr_torrentSetPieceChecked( tor, p, TRUE );
1129                tr_peerMgrSetBlame( tor, p, ok );
1130
1131                if( !ok )
1132                {
1133                    gotBadPiece( t, p );
1134                }
1135                else
1136                {
1137                    int i;
1138                    int peerCount;
1139                    tr_peer ** peers;
1140                    tr_file_index_t fileIndex;
1141
1142                    peerCount = tr_ptrArraySize( &t->peers );
1143                    peers = (tr_peer**) tr_ptrArrayBase( &t->peers );
1144                    for( i=0; i<peerCount; ++i )
1145                        tr_peerMsgsHave( peers[i]->msgs, p );
1146
1147                    for( fileIndex=0; fileIndex<tor->info.fileCount; ++fileIndex )
1148                    {
1149                        const tr_file * file = &tor->info.files[fileIndex];
1150                        if( ( file->firstPiece <= p ) && ( p <= file->lastPiece ) && tr_cpFileIsComplete( &tor->completion, fileIndex ) )
1151                        {
1152                            char * path = tr_buildPath( tor->downloadDir, file->name, NULL );
1153                            tordbg( t, "closing recently-completed file \"%s\"", path );
1154                            tr_fdFileClose( path );
1155                            tr_free( path );
1156                        }
1157                    }
1158                }
1159
1160                tr_torrentRecheckCompleteness( tor );
1161            }
1162            break;
1163        }
1164
1165        case TR_PEER_ERROR:
1166            if( e->err == EINVAL )
1167            {
1168                addStrike( t, peer );
1169                peer->doPurge = 1;
1170                tordbg( t, "setting %s doPurge flag because we got an EINVAL error", tr_peerIoAddrStr( &peer->addr, peer->port ) );
1171            }
1172            else if( ( e->err == ERANGE )
1173                  || ( e->err == EMSGSIZE )
1174                  || ( e->err == ENOTCONN ) )
1175            {
1176                /* some protocol error from the peer */
1177                peer->doPurge = 1;
1178                tordbg( t, "setting %s doPurge flag because we got an ERANGE, EMSGSIZE, or ENOTCONN error", tr_peerIoAddrStr( &peer->addr, peer->port ) );
1179            }
1180            else /* a local error, such as an IO error */
1181            {
1182                t->tor->error = e->err;
1183                tr_strlcpy( t->tor->errorString,
1184                            tr_strerror( t->tor->error ),
1185                            sizeof( t->tor->errorString ) );
1186                tr_torrentStop( t->tor );
1187            }
1188            break;
1189
1190        default:
1191            assert( 0 );
1192    }
1193
1194    torrentUnlock( t );
1195}
1196
1197static void
1198ensureAtomExists( Torrent          * t,
1199                  const tr_address * addr,
1200                  tr_port            port,
1201                  uint8_t            flags,
1202                  uint8_t            from )
1203{
1204    if( getExistingAtom( t, addr ) == NULL )
1205    {
1206        struct peer_atom * a;
1207        a = tr_new0( struct peer_atom, 1 );
1208        a->addr = *addr;
1209        a->port = port;
1210        a->flags = flags;
1211        a->from = from;
1212        tordbg( t, "got a new atom: %s", tr_peerIoAddrStr( &a->addr, a->port ) );
1213        tr_ptrArrayInsertSorted( &t->pool, a, comparePeerAtoms );
1214    }
1215}
1216
1217static int
1218getMaxPeerCount( const tr_torrent * tor )
1219{
1220    return tor->maxConnectedPeers;
1221}
1222
1223static int
1224getPeerCount( const Torrent * t )
1225{
1226    return tr_ptrArraySize( &t->peers );// + tr_ptrArraySize( &t->outgoingHandshakes );
1227}
1228
1229/* FIXME: this is kind of a mess. */
1230static tr_bool
1231myHandshakeDoneCB( tr_handshake  * handshake,
1232                   tr_peerIo     * io,
1233                   tr_bool         isConnected,
1234                   const uint8_t * peer_id,
1235                   void          * vmanager )
1236{
1237    tr_bool            ok = isConnected;
1238    tr_bool            success = FALSE;
1239    tr_port            port;
1240    const tr_address * addr;
1241    tr_peerMgr       * manager = vmanager;
1242    Torrent          * t;
1243    tr_handshake     * ours;
1244
1245    assert( io );
1246    assert( tr_isBool( ok ) );
1247
1248    t = tr_peerIoHasTorrentHash( io )
1249        ? getExistingTorrent( manager, tr_peerIoGetTorrentHash( io ) )
1250        : NULL;
1251
1252    if( tr_peerIoIsIncoming ( io ) )
1253        ours = tr_ptrArrayRemoveSorted( &manager->incomingHandshakes,
1254                                        handshake, handshakeCompare );
1255    else if( t )
1256        ours = tr_ptrArrayRemoveSorted( &t->outgoingHandshakes,
1257                                        handshake, handshakeCompare );
1258    else
1259        ours = handshake;
1260
1261    assert( ours );
1262    assert( ours == handshake );
1263
1264    if( t )
1265        torrentLock( t );
1266
1267    addr = tr_peerIoGetAddress( io, &port );
1268
1269    if( !ok || !t || !t->isRunning )
1270    {
1271        if( t )
1272        {
1273            struct peer_atom * atom = getExistingAtom( t, addr );
1274            if( atom )
1275                ++atom->numFails;
1276        }
1277    }
1278    else /* looking good */
1279    {
1280        struct peer_atom * atom;
1281        ensureAtomExists( t, addr, port, 0, TR_PEER_FROM_INCOMING );
1282        atom = getExistingAtom( t, addr );
1283        atom->time = time( NULL );
1284        atom->piece_data_time = 0;
1285
1286        if( atom->myflags & MYFLAG_BANNED )
1287        {
1288            tordbg( t, "banned peer %s tried to reconnect",
1289                    tr_peerIoAddrStr( &atom->addr, atom->port ) );
1290        }
1291        else if( tr_peerIoIsIncoming( io )
1292               && ( getPeerCount( t ) >= getMaxPeerCount( t->tor ) ) )
1293
1294        {
1295        }
1296        else
1297        {
1298            tr_peer * peer = getExistingPeer( t, addr );
1299
1300            if( peer ) /* we already have this peer */
1301            {
1302            }
1303            else
1304            {
1305                peer = getPeer( t, addr );
1306                tr_free( peer->client );
1307
1308                if( !peer_id )
1309                    peer->client = NULL;
1310                else {
1311                    char client[128];
1312                    tr_clientForId( client, sizeof( client ), peer_id );
1313                    peer->client = tr_strdup( client );
1314                }
1315
1316                peer->port = port;
1317                peer->io = tr_handshakeStealIO( handshake ); /* this steals its refcount too, which is
1318                                                                balanced by our unref in peerDestructor()  */
1319                tr_peerIoSetParent( peer->io, t->tor->bandwidth );
1320                tr_peerMsgsNew( t->tor, peer, peerCallbackFunc, t, &peer->msgsTag );
1321
1322                success = TRUE;
1323            }
1324        }
1325    }
1326
1327    if( t )
1328        torrentUnlock( t );
1329
1330    return success;
1331}
1332
1333void
1334tr_peerMgrAddIncoming( tr_peerMgr * manager,
1335                       tr_address * addr,
1336                       tr_port      port,
1337                       int          socket )
1338{
1339    managerLock( manager );
1340
1341    if( tr_sessionIsAddressBlocked( manager->session, addr ) )
1342    {
1343        tr_dbg( "Banned IP address \"%s\" tried to connect to us", tr_ntop_non_ts( addr ) );
1344        tr_netClose( socket );
1345    }
1346    else if( getExistingHandshake( &manager->incomingHandshakes, addr ) )
1347    {
1348        tr_netClose( socket );
1349    }
1350    else /* we don't have a connetion to them yet... */
1351    {
1352        tr_peerIo *    io;
1353        tr_handshake * handshake;
1354
1355        io = tr_peerIoNewIncoming( manager->session, manager->session->bandwidth, addr, port, socket );
1356
1357        handshake = tr_handshakeNew( io,
1358                                     manager->session->encryptionMode,
1359                                     myHandshakeDoneCB,
1360                                     manager );
1361
1362        tr_peerIoUnref( io ); /* balanced by the implicit ref in tr_peerIoNewIncoming() */
1363
1364        tr_ptrArrayInsertSorted( &manager->incomingHandshakes, handshake,
1365                                 handshakeCompare );
1366    }
1367
1368    managerUnlock( manager );
1369}
1370
1371static tr_bool
1372tr_isPex( const tr_pex * pex )
1373{
1374    return pex && tr_isAddress( &pex->addr );
1375}
1376
1377void
1378tr_peerMgrAddPex( tr_torrent   *  tor,
1379                  uint8_t         from,
1380                  const tr_pex *  pex )
1381{
1382    if( tr_isPex( pex ) ) /* safeguard against corrupt data */
1383    {
1384        Torrent * t = tor->torrentPeers;
1385        managerLock( t->manager );
1386
1387        if( !tr_sessionIsAddressBlocked( t->manager->session, &pex->addr ) )
1388            if( tr_isValidPeerAddress( &pex->addr, pex->port ) )
1389                ensureAtomExists( t, &pex->addr, pex->port, pex->flags, from );
1390
1391        managerUnlock( t->manager );
1392    }
1393}
1394
1395tr_pex *
1396tr_peerMgrCompactToPex( const void *    compact,
1397                        size_t          compactLen,
1398                        const uint8_t * added_f,
1399                        size_t          added_f_len,
1400                        size_t *        pexCount )
1401{
1402    size_t          i;
1403    size_t          n = compactLen / 6;
1404    const uint8_t * walk = compact;
1405    tr_pex *        pex = tr_new0( tr_pex, n );
1406
1407    for( i = 0; i < n; ++i )
1408    {
1409        pex[i].addr.type = TR_AF_INET;
1410        memcpy( &pex[i].addr.addr, walk, 4 ); walk += 4;
1411        memcpy( &pex[i].port, walk, 2 ); walk += 2;
1412        if( added_f && ( n == added_f_len ) )
1413            pex[i].flags = added_f[i];
1414    }
1415
1416    *pexCount = n;
1417    return pex;
1418}
1419
1420tr_pex *
1421tr_peerMgrCompact6ToPex( const void    * compact,
1422                         size_t          compactLen,
1423                         const uint8_t * added_f,
1424                         size_t          added_f_len,
1425                         size_t        * pexCount )
1426{
1427    size_t          i;
1428    size_t          n = compactLen / 18;
1429    const uint8_t * walk = compact;
1430    tr_pex *        pex = tr_new0( tr_pex, n );
1431   
1432    for( i = 0; i < n; ++i )
1433    {
1434        pex[i].addr.type = TR_AF_INET6;
1435        memcpy( &pex[i].addr.addr.addr6.s6_addr, walk, 16 ); walk += 16;
1436        memcpy( &pex[i].port, walk, 2 ); walk += 2;
1437        if( added_f && ( n == added_f_len ) )
1438            pex[i].flags = added_f[i];
1439    }
1440   
1441    *pexCount = n;
1442    return pex;
1443}
1444
1445tr_pex *
1446tr_peerMgrArrayToPex( const void * array,
1447                      size_t       arrayLen,
1448                      size_t      * pexCount )
1449{
1450    size_t          i;
1451    size_t          n = arrayLen / ( sizeof( tr_address ) + 2 );
1452    /*size_t          n = arrayLen / sizeof( tr_peerArrayElement );*/
1453    const uint8_t * walk = array;
1454    tr_pex        * pex = tr_new0( tr_pex, n );
1455   
1456    for( i = 0 ; i < n ; i++ ) {
1457        memcpy( &pex[i].addr, walk, sizeof( tr_address ) );
1458        tr_suspectAddress( &pex[i].addr, "tracker"  );
1459        memcpy( &pex[i].port, walk + sizeof( tr_address ), 2 );
1460        pex[i].flags = 0x00;
1461        walk += sizeof( tr_address ) + 2;
1462    }
1463   
1464    *pexCount = n;
1465    return pex;
1466}
1467
1468/**
1469***
1470**/
1471
1472void
1473tr_peerMgrSetBlame( tr_torrent     * tor,
1474                    tr_piece_index_t pieceIndex,
1475                    int              success )
1476{
1477    if( !success )
1478    {
1479        int        peerCount, i;
1480        Torrent *  t = tor->torrentPeers;
1481        tr_peer ** peers;
1482
1483        assert( torrentIsLocked( t ) );
1484
1485        peers = (tr_peer **) tr_ptrArrayPeek( &t->peers, &peerCount );
1486        for( i = 0; i < peerCount; ++i )
1487        {
1488            tr_peer * peer = peers[i];
1489            if( tr_bitfieldHas( peer->blame, pieceIndex ) )
1490            {
1491                tordbg( t, "peer %s contributed to corrupt piece (%d); now has %d strikes",
1492                        tr_peerIoAddrStr( &peer->addr, peer->port ),
1493                        pieceIndex, (int)peer->strikes + 1 );
1494                addStrike( t, peer );
1495            }
1496        }
1497    }
1498}
1499
1500int
1501tr_pexCompare( const void * va, const void * vb )
1502{
1503    const tr_pex * a = va;
1504    const tr_pex * b = vb;
1505    int i;
1506
1507    assert( tr_isPex( a ) );
1508    assert( tr_isPex( b ) );
1509
1510    if(( i = tr_compareAddresses( &a->addr, &b->addr )))
1511        return i;
1512
1513    if( a->port != b->port )
1514        return a->port < b->port ? -1 : 1;
1515
1516    return 0;
1517}
1518
1519static int
1520peerPrefersCrypto( const tr_peer * peer )
1521{
1522    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_YES )
1523        return TRUE;
1524
1525    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_NO )
1526        return FALSE;
1527
1528    return tr_peerIoIsEncrypted( peer->io );
1529}
1530
1531int
1532tr_peerMgrGetPeers( tr_torrent      * tor,
1533                    tr_pex         ** setme_pex,
1534                    uint8_t           af)
1535{
1536    int peersReturning = 0;
1537    const Torrent * t = tor->torrentPeers;
1538
1539    managerLock( t->manager );
1540
1541    {
1542        int i;
1543        const tr_peer ** peers = (const tr_peer**) tr_ptrArrayBase( &t->peers );
1544        const int peerCount = tr_ptrArraySize( &t->peers );
1545        /* for now, this will waste memory on torrents that have both
1546         * ipv6 and ipv4 peers */
1547        tr_pex * pex = tr_new( tr_pex, peerCount );
1548        tr_pex * walk = pex;
1549
1550        for( i=0; i<peerCount; ++i )
1551        {
1552            const tr_peer * peer = peers[i];
1553            if( peer->addr.type == af )
1554            {
1555                const struct peer_atom * atom = getExistingAtom( t, &peer->addr );
1556
1557                assert( tr_isAddress( &peer->addr ) );
1558                walk->addr = peer->addr;
1559                walk->port = peer->port;
1560                walk->flags = 0;
1561                if( peerPrefersCrypto( peer ) )
1562                    walk->flags |= ADDED_F_ENCRYPTION_FLAG;
1563                if( ( atom->uploadOnly == UPLOAD_ONLY_YES ) || ( peer->progress >= 1.0 ) )
1564                    walk->flags |= ADDED_F_SEED_FLAG;
1565                ++peersReturning;
1566                ++walk;
1567            }
1568        }
1569
1570        assert( ( walk - pex ) == peersReturning );
1571        qsort( pex, peersReturning, sizeof( tr_pex ), tr_pexCompare );
1572        *setme_pex = pex;
1573    }
1574
1575    managerUnlock( t->manager );
1576    return peersReturning;
1577}
1578
1579void
1580tr_peerMgrStartTorrent( tr_torrent * tor )
1581{
1582    Torrent * t = tor->torrentPeers;
1583
1584    managerLock( t->manager );
1585
1586    assert( t );
1587
1588    if( !t->isRunning )
1589    {
1590        t->isRunning = TRUE;
1591
1592        if( !tr_ptrArrayEmpty( &t->webseeds ) )
1593            refillSoon( t );
1594    }
1595
1596    managerUnlock( t->manager );
1597}
1598
1599static void
1600stopTorrent( Torrent * t )
1601{
1602    assert( torrentIsLocked( t ) );
1603
1604    t->isRunning = FALSE;
1605
1606    /* disconnect the peers. */
1607    tr_ptrArrayForeach( &t->peers, (PtrArrayForeachFunc)peerDestructor );
1608    tr_ptrArrayClear( &t->peers );
1609
1610    /* disconnect the handshakes.  handshakeAbort calls handshakeDoneCB(),
1611     * which removes the handshake from t->outgoingHandshakes... */
1612    while( !tr_ptrArrayEmpty( &t->outgoingHandshakes ) )
1613        tr_handshakeAbort( tr_ptrArrayNth( &t->outgoingHandshakes, 0 ) );
1614}
1615
1616void
1617tr_peerMgrStopTorrent( tr_torrent * tor )
1618{
1619    Torrent * t = tor->torrentPeers;
1620
1621    managerLock( t->manager );
1622
1623    stopTorrent( t );
1624
1625    managerUnlock( t->manager );
1626}
1627
1628void
1629tr_peerMgrAddTorrent( tr_peerMgr * manager,
1630                      tr_torrent * tor )
1631{
1632    managerLock( manager );
1633
1634    assert( tor );
1635    assert( tor->torrentPeers == NULL );
1636
1637    tor->torrentPeers = torrentConstructor( manager, tor );
1638
1639    managerUnlock( manager );
1640}
1641
1642void
1643tr_peerMgrRemoveTorrent( tr_torrent * tor )
1644{
1645    tr_torrentLock( tor );
1646
1647    stopTorrent( tor->torrentPeers );
1648    torrentDestructor( tor->torrentPeers );
1649
1650    tr_torrentUnlock( tor );
1651}
1652
1653void
1654tr_peerMgrTorrentAvailability( const tr_torrent * tor,
1655                               int8_t           * tab,
1656                               unsigned int       tabCount )
1657{
1658    tr_piece_index_t   i;
1659    const Torrent *    t;
1660    float              interval;
1661    tr_bool            isSeed;
1662    int                peerCount;
1663    const tr_peer **   peers;
1664    tr_torrentLock( tor );
1665
1666    t = tor->torrentPeers;
1667    tor = t->tor;
1668    interval = tor->info.pieceCount / (float)tabCount;
1669    isSeed = tor && ( tr_cpGetStatus ( &tor->completion ) == TR_SEED );
1670    peers = (const tr_peer **) tr_ptrArrayBase( &t->peers );
1671    peerCount = tr_ptrArraySize( &t->peers );
1672
1673    memset( tab, 0, tabCount );
1674
1675    for( i = 0; tor && i < tabCount; ++i )
1676    {
1677        const int piece = i * interval;
1678
1679        if( isSeed || tr_cpPieceIsComplete( &tor->completion, piece ) )
1680            tab[i] = -1;
1681        else if( peerCount ) {
1682            int j;
1683            for( j = 0; j < peerCount; ++j )
1684                if( tr_bitfieldHas( peers[j]->have, i ) )
1685                    ++tab[i];
1686        }
1687    }
1688
1689    tr_torrentUnlock( tor );
1690}
1691
1692/* Returns the pieces that are available from peers */
1693tr_bitfield*
1694tr_peerMgrGetAvailable( const tr_torrent * tor )
1695{
1696    int i;
1697    int peerCount;
1698    Torrent * t = tor->torrentPeers;
1699    const tr_peer ** peers;
1700    tr_bitfield * pieces;
1701    managerLock( t->manager );
1702
1703    pieces = tr_bitfieldNew( t->tor->info.pieceCount );
1704    peerCount = tr_ptrArraySize( &t->peers );
1705    peers = (const tr_peer**) tr_ptrArrayBase( &t->peers );
1706    for( i=0; i<peerCount; ++i )
1707        tr_bitfieldOr( pieces, peers[i]->have );
1708
1709    managerUnlock( t->manager );
1710    return pieces;
1711}
1712
1713void
1714tr_peerMgrTorrentStats( tr_torrent       * tor,
1715                        int              * setmePeersKnown,
1716                        int              * setmePeersConnected,
1717                        int              * setmeSeedsConnected,
1718                        int              * setmeWebseedsSendingToUs,
1719                        int              * setmePeersSendingToUs,
1720                        int              * setmePeersGettingFromUs,
1721                        int              * setmePeersFrom )
1722{
1723    int i, size;
1724    const Torrent * t = tor->torrentPeers;
1725    const tr_peer ** peers;
1726    const tr_webseed ** webseeds;
1727
1728    managerLock( t->manager );
1729
1730    peers = (const tr_peer **) tr_ptrArrayBase( &t->peers );
1731    size = tr_ptrArraySize( &t->peers );
1732
1733    *setmePeersKnown           = tr_ptrArraySize( &t->pool );
1734    *setmePeersConnected       = 0;
1735    *setmeSeedsConnected       = 0;
1736    *setmePeersGettingFromUs   = 0;
1737    *setmePeersSendingToUs     = 0;
1738    *setmeWebseedsSendingToUs  = 0;
1739
1740    for( i=0; i<TR_PEER_FROM__MAX; ++i )
1741        setmePeersFrom[i] = 0;
1742
1743    for( i=0; i<size; ++i )
1744    {
1745        const tr_peer * peer = peers[i];
1746        const struct peer_atom * atom = getExistingAtom( t, &peer->addr );
1747
1748        if( peer->io == NULL ) /* not connected */
1749            continue;
1750
1751        ++*setmePeersConnected;
1752
1753        ++setmePeersFrom[atom->from];
1754
1755        if( clientIsDownloadingFrom( peer ) )
1756            ++*setmePeersSendingToUs;
1757
1758        if( clientIsUploadingTo( peer ) )
1759            ++*setmePeersGettingFromUs;
1760
1761        if( atom->flags & ADDED_F_SEED_FLAG )
1762            ++*setmeSeedsConnected;
1763    }
1764
1765    webseeds = (const tr_webseed**) tr_ptrArrayBase( &t->webseeds );
1766    size = tr_ptrArraySize( &t->webseeds );
1767    for( i=0; i<size; ++i )
1768        if( tr_webseedIsActive( webseeds[i] ) )
1769            ++*setmeWebseedsSendingToUs;
1770
1771    managerUnlock( t->manager );
1772}
1773
1774float*
1775tr_peerMgrWebSpeeds( const tr_torrent * tor )
1776{
1777    const Torrent * t = tor->torrentPeers;
1778    const tr_webseed ** webseeds;
1779    int i;
1780    int webseedCount;
1781    float * ret;
1782    uint64_t now;
1783
1784    assert( t->manager );
1785    managerLock( t->manager );
1786
1787    webseeds = (const tr_webseed**) tr_ptrArrayBase( &t->webseeds );
1788    webseedCount = tr_ptrArraySize( &t->webseeds );
1789    assert( webseedCount == tor->info.webseedCount );
1790    ret = tr_new0( float, webseedCount );
1791    now = tr_date( );
1792
1793    for( i=0; i<webseedCount; ++i )
1794        if( !tr_webseedGetSpeed( webseeds[i], now, &ret[i] ) )
1795            ret[i] = -1.0;
1796
1797    managerUnlock( t->manager );
1798    return ret;
1799}
1800
1801double
1802tr_peerGetPieceSpeed( const tr_peer * peer, uint64_t now, tr_direction direction )
1803{
1804    return peer->io ? tr_peerIoGetPieceSpeed( peer->io, now, direction ) : 0.0;
1805}
1806
1807
1808struct tr_peer_stat *
1809tr_peerMgrPeerStats( const tr_torrent    * tor,
1810                     int                 * setmeCount )
1811{
1812    int i, size;
1813    const Torrent * t = tor->torrentPeers;
1814    const tr_peer ** peers;
1815    tr_peer_stat * ret;
1816    uint64_t now;
1817
1818    assert( t->manager );
1819    managerLock( t->manager );
1820
1821    size = tr_ptrArraySize( &t->peers );
1822    peers = (const tr_peer**) tr_ptrArrayBase( &t->peers );
1823    ret = tr_new0( tr_peer_stat, size );
1824    now = tr_date( );
1825
1826    for( i = 0; i < size; ++i )
1827    {
1828        char *                   pch;
1829        const tr_peer *          peer = peers[i];
1830        const struct peer_atom * atom = getExistingAtom( t, &peer->addr );
1831        tr_peer_stat *           stat = ret + i;
1832        tr_address               norm_addr;
1833
1834        norm_addr = peer->addr;
1835        tr_normalizeV4Mapped( &norm_addr );
1836        tr_ntop( &norm_addr, stat->addr, sizeof( stat->addr ) );
1837        tr_strlcpy( stat->client, ( peer->client ? peer->client : "" ),
1838                   sizeof( stat->client ) );
1839        stat->port               = ntohs( peer->port );
1840        stat->from               = atom->from;
1841        stat->progress           = peer->progress;
1842        stat->isEncrypted        = tr_peerIoIsEncrypted( peer->io ) ? 1 : 0;
1843        stat->rateToPeer         = tr_peerGetPieceSpeed( peer, now, TR_CLIENT_TO_PEER );
1844        stat->rateToClient       = tr_peerGetPieceSpeed( peer, now, TR_PEER_TO_CLIENT );
1845        stat->peerIsChoked       = peer->peerIsChoked;
1846        stat->peerIsInterested   = peer->peerIsInterested;
1847        stat->clientIsChoked     = peer->clientIsChoked;
1848        stat->clientIsInterested = peer->clientIsInterested;
1849        stat->isIncoming         = tr_peerIoIsIncoming( peer->io );
1850        stat->isDownloadingFrom  = clientIsDownloadingFrom( peer );
1851        stat->isUploadingTo      = clientIsUploadingTo( peer );
1852        stat->isSeed             = ( atom->uploadOnly == UPLOAD_ONLY_YES ) || ( peer->progress >= 1.0 );
1853
1854        pch = stat->flagStr;
1855        if( t->optimistic == peer ) *pch++ = 'O';
1856        if( stat->isDownloadingFrom ) *pch++ = 'D';
1857        else if( stat->clientIsInterested ) *pch++ = 'd';
1858        if( stat->isUploadingTo ) *pch++ = 'U';
1859        else if( stat->peerIsInterested ) *pch++ = 'u';
1860        if( !stat->clientIsChoked && !stat->clientIsInterested ) *pch++ = 'K';
1861        if( !stat->peerIsChoked && !stat->peerIsInterested ) *pch++ = '?';
1862        if( stat->isEncrypted ) *pch++ = 'E';
1863        if( stat->from == TR_PEER_FROM_PEX ) *pch++ = 'X';
1864        if( stat->isIncoming ) *pch++ = 'I';
1865        *pch = '\0';
1866    }
1867
1868    *setmeCount = size;
1869
1870    managerUnlock( t->manager );
1871    return ret;
1872}
1873
1874/**
1875***
1876**/
1877
1878struct ChokeData
1879{
1880    tr_bool         doUnchoke;
1881    tr_bool         isInterested;
1882    tr_bool         isChoked;
1883    int             rate;
1884    tr_peer *       peer;
1885};
1886
1887static int
1888compareChoke( const void * va,
1889              const void * vb )
1890{
1891    const struct ChokeData * a = va;
1892    const struct ChokeData * b = vb;
1893
1894    if( a->rate != b->rate ) /* prefer higher overall speeds */
1895        return a->rate > b->rate ? -1 : 1;
1896
1897    if( a->isChoked != b->isChoked ) /* prefer unchoked */
1898        return a->isChoked ? 1 : -1;
1899
1900    return 0;
1901}
1902
1903static int
1904isNew( const tr_peer * peer )
1905{
1906    return peer && peer->io && tr_peerIoGetAge( peer->io ) < 45;
1907}
1908
1909static int
1910isSame( const tr_peer * peer )
1911{
1912    return peer && peer->client && strstr( peer->client, "Transmission" );
1913}
1914
1915/**
1916***
1917**/
1918
1919static void
1920rechokeTorrent( Torrent * t )
1921{
1922    int i, size, unchokedInterested;
1923    const int peerCount = tr_ptrArraySize( &t->peers );
1924    tr_peer ** peers = (tr_peer**) tr_ptrArrayBase( &t->peers );
1925    struct ChokeData * choke = tr_new0( struct ChokeData, peerCount );
1926    const tr_session * session = t->manager->session;
1927    const int chokeAll = !tr_torrentIsPieceTransferAllowed( t->tor, TR_CLIENT_TO_PEER );
1928    const uint64_t now = tr_date( );
1929
1930    assert( torrentIsLocked( t ) );
1931
1932    /* sort the peers by preference and rate */
1933    for( i = 0, size = 0; i < peerCount; ++i )
1934    {
1935        tr_peer * peer = peers[i];
1936        struct peer_atom * atom = getExistingAtom( t, &peer->addr );
1937
1938        if( peer->progress >= 1.0 ) /* choke all seeds */
1939        {
1940            tr_peerMsgsSetChoke( peer->msgs, TRUE );
1941        }
1942        else if( atom->uploadOnly == UPLOAD_ONLY_YES ) /* choke partial seeds */
1943        {
1944            tr_peerMsgsSetChoke( peer->msgs, TRUE );
1945        }
1946        else if( chokeAll ) /* choke everyone if we're not uploading */
1947        {
1948            tr_peerMsgsSetChoke( peer->msgs, TRUE );
1949        }
1950        else
1951        {
1952            struct ChokeData * n = &choke[size++];
1953            n->peer         = peer;
1954            n->isInterested = peer->peerIsInterested;
1955            n->isChoked     = peer->peerIsChoked;
1956            n->rate         = tr_peerGetPieceSpeed( peer, now, TR_CLIENT_TO_PEER ) * 1024;
1957        }
1958    }
1959
1960    qsort( choke, size, sizeof( struct ChokeData ), compareChoke );
1961
1962    /**
1963     * Reciprocation and number of uploads capping is managed by unchoking
1964     * the N peers which have the best upload rate and are interested.
1965     * This maximizes the client's download rate. These N peers are
1966     * referred to as downloaders, because they are interested in downloading
1967     * from the client.
1968     *
1969     * Peers which have a better upload rate (as compared to the downloaders)
1970     * but aren't interested get unchoked. If they become interested, the
1971     * downloader with the worst upload rate gets choked. If a client has
1972     * a complete file, it uses its upload rate rather than its download
1973     * rate to decide which peers to unchoke.
1974     */
1975    unchokedInterested = 0;
1976    for( i=0; i<size && unchokedInterested<session->uploadSlotsPerTorrent; ++i ) {
1977        choke[i].doUnchoke = 1;
1978        if( choke[i].isInterested )
1979            ++unchokedInterested;
1980    }
1981
1982    /* optimistic unchoke */
1983    if( i < size )
1984    {
1985        int n;
1986        struct ChokeData * c;
1987        tr_ptrArray randPool = TR_PTR_ARRAY_INIT;
1988
1989        for( ; i<size; ++i )
1990        {
1991            if( choke[i].isInterested )
1992            {
1993                const tr_peer * peer = choke[i].peer;
1994                int x = 1, y;
1995                if( isNew( peer ) ) x *= 3;
1996                if( isSame( peer ) ) x *= 3;
1997                for( y=0; y<x; ++y )
1998                    tr_ptrArrayAppend( &randPool, &choke[i] );
1999            }
2000        }
2001
2002        if(( n = tr_ptrArraySize( &randPool )))
2003        {
2004            c = tr_ptrArrayNth( &randPool, tr_cryptoWeakRandInt( n ));
2005            c->doUnchoke = 1;
2006            t->optimistic = c->peer;
2007        }
2008
2009        tr_ptrArrayDestruct( &randPool, NULL );
2010    }
2011
2012    for( i=0; i<size; ++i )
2013        tr_peerMsgsSetChoke( choke[i].peer->msgs, !choke[i].doUnchoke );
2014
2015    /* cleanup */
2016    tr_free( choke );
2017}
2018
2019static int
2020rechokePulse( void * vmgr )
2021{
2022    tr_torrent * tor = NULL;
2023    tr_peerMgr * mgr = vmgr;
2024    managerLock( mgr );
2025
2026    while(( tor = tr_torrentNext( mgr->session, tor )))
2027        if( tor->isRunning )
2028            rechokeTorrent( tor->torrentPeers );
2029
2030    managerUnlock( mgr );
2031    return TRUE;
2032}
2033
2034/***
2035****
2036****  Life and Death
2037****
2038***/
2039
2040typedef enum
2041{
2042    TR_CAN_KEEP,
2043    TR_CAN_CLOSE,
2044    TR_MUST_CLOSE,
2045}
2046tr_close_type_t;
2047
2048static tr_close_type_t
2049shouldPeerBeClosed( const Torrent    * t,
2050                    const tr_peer    * peer,
2051                    int                peerCount )
2052{
2053    const tr_torrent *       tor = t->tor;
2054    const time_t             now = time( NULL );
2055    const struct peer_atom * atom = getExistingAtom( t, &peer->addr );
2056
2057    /* if it's marked for purging, close it */
2058    if( peer->doPurge )
2059    {
2060        tordbg( t, "purging peer %s because its doPurge flag is set",
2061                tr_peerIoAddrStr( &atom->addr, atom->port ) );
2062        return TR_MUST_CLOSE;
2063    }
2064
2065    /* if we're seeding and the peer has everything we have,
2066     * and enough time has passed for a pex exchange, then disconnect */
2067    if( tr_torrentIsSeed( tor ) )
2068    {
2069        int peerHasEverything;
2070        if( atom->flags & ADDED_F_SEED_FLAG )
2071            peerHasEverything = TRUE;
2072        else if( peer->progress < tr_cpPercentDone( &tor->completion ) )
2073            peerHasEverything = FALSE;
2074        else {
2075            tr_bitfield * tmp = tr_bitfieldDup( tr_cpPieceBitfield( &tor->completion ) );
2076            tr_bitfieldDifference( tmp, peer->have );
2077            peerHasEverything = tr_bitfieldCountTrueBits( tmp ) == 0;
2078            tr_bitfieldFree( tmp );
2079        }
2080
2081        if( peerHasEverything && ( !tr_torrentAllowsPex(tor) || (now-atom->time>=30 )))
2082        {
2083            tordbg( t, "purging peer %s because we're both seeds",
2084                    tr_peerIoAddrStr( &atom->addr, atom->port ) );
2085            return TR_MUST_CLOSE;
2086        }
2087    }
2088
2089    /* disconnect if it's been too long since piece data has been transferred.
2090     * this is on a sliding scale based on number of available peers... */
2091    {
2092        const int relaxStrictnessIfFewerThanN = (int)( ( getMaxPeerCount( tor ) * 0.9 ) + 0.5 );
2093        /* if we have >= relaxIfFewerThan, strictness is 100%.
2094         * if we have zero connections, strictness is 0% */
2095        const float strictness = peerCount >= relaxStrictnessIfFewerThanN
2096                               ? 1.0
2097                               : peerCount / (float)relaxStrictnessIfFewerThanN;
2098        const int lo = MIN_UPLOAD_IDLE_SECS;
2099        const int hi = MAX_UPLOAD_IDLE_SECS;
2100        const int limit = hi - ( ( hi - lo ) * strictness );
2101        const int idleTime = now - MAX( atom->time, atom->piece_data_time );
2102/*fprintf( stderr, "strictness is %.3f, limit is %d seconds... time since connect is %d, time since piece is %d ... idleTime is %d, doPurge is %d\n", (double)strictness, limit, (int)(now - atom->time), (int)(now - atom->piece_data_time), idleTime, idleTime > limit );*/
2103        if( idleTime > limit ) {
2104            tordbg( t, "purging peer %s because it's been %d secs since we shared anything",
2105                       tr_peerIoAddrStr( &atom->addr, atom->port ), idleTime );
2106            return TR_CAN_CLOSE;
2107        }
2108    }
2109
2110    return TR_CAN_KEEP;
2111}
2112
2113static tr_peer **
2114getPeersToClose( Torrent * t, tr_close_type_t closeType, int * setmeSize )
2115{
2116    int i, peerCount, outsize;
2117    tr_peer ** peers = (tr_peer**) tr_ptrArrayPeek( &t->peers, &peerCount );
2118    struct tr_peer ** ret = tr_new( tr_peer *, peerCount );
2119
2120    assert( torrentIsLocked( t ) );
2121
2122    for( i = outsize = 0; i < peerCount; ++i )
2123        if( shouldPeerBeClosed( t, peers[i], peerCount ) == closeType )
2124            ret[outsize++] = peers[i];
2125
2126    *setmeSize = outsize;
2127    return ret;
2128}
2129
2130static int
2131compareCandidates( const void * va,
2132                   const void * vb )
2133{
2134    const struct peer_atom * a = *(const struct peer_atom**) va;
2135    const struct peer_atom * b = *(const struct peer_atom**) vb;
2136
2137    /* <Charles> Here we would probably want to try reconnecting to
2138     * peers that had most recently given us data. Lots of users have
2139     * trouble with resets due to their routers and/or ISPs. This way we
2140     * can quickly recover from an unwanted reset. So we sort
2141     * piece_data_time in descending order.
2142     */
2143
2144    if( a->piece_data_time != b->piece_data_time )
2145        return a->piece_data_time < b->piece_data_time ? 1 : -1;
2146
2147    if( a->numFails != b->numFails )
2148        return a->numFails < b->numFails ? -1 : 1;
2149
2150    if( a->time != b->time )
2151        return a->time < b->time ? -1 : 1;
2152
2153    /* all other things being equal, prefer peers whose
2154     * information comes from a more reliable source */
2155    if( a->from != b->from )
2156        return a->from < b->from ? -1 : 1;
2157
2158    return 0;
2159}
2160
2161static int
2162getReconnectIntervalSecs( const struct peer_atom * atom )
2163{
2164    int          sec;
2165    const time_t now = time( NULL );
2166
2167    /* if we were recently connected to this peer and transferring piece
2168     * data, try to reconnect to them sooner rather that later -- we don't
2169     * want network troubles to get in the way of a good peer. */
2170    if( ( now - atom->piece_data_time ) <= ( MINIMUM_RECONNECT_INTERVAL_SECS * 2 ) )
2171        sec = MINIMUM_RECONNECT_INTERVAL_SECS;
2172
2173    /* don't allow reconnects more often than our minimum */
2174    else if( ( now - atom->time ) < MINIMUM_RECONNECT_INTERVAL_SECS )
2175        sec = MINIMUM_RECONNECT_INTERVAL_SECS;
2176
2177    /* otherwise, the interval depends on how many times we've tried
2178     * and failed to connect to the peer */
2179    else switch( atom->numFails ) {
2180        case 0: sec = 0; break;
2181        case 1: sec = 5; break;
2182        case 2: sec = 2 * 60; break;
2183        case 3: sec = 15 * 60; break;
2184        case 4: sec = 30 * 60; break;
2185        case 5: sec = 60 * 60; break;
2186        default: sec = 120 * 60; break;
2187    }
2188
2189    return sec;
2190}
2191
2192static struct peer_atom **
2193getPeerCandidates( Torrent * t, int * setmeSize )
2194{
2195    int                 i, atomCount, retCount;
2196    struct peer_atom ** atoms;
2197    struct peer_atom ** ret;
2198    const time_t        now = time( NULL );
2199    const int           seed = tr_torrentIsSeed( t->tor );
2200
2201    assert( torrentIsLocked( t ) );
2202
2203    atoms = (struct peer_atom**) tr_ptrArrayPeek( &t->pool, &atomCount );
2204    ret = tr_new( struct peer_atom*, atomCount );
2205    for( i = retCount = 0; i < atomCount; ++i )
2206    {
2207        int                interval;
2208        struct peer_atom * atom = atoms[i];
2209
2210        /* peer fed us too much bad data ... we only keep it around
2211         * now to weed it out in case someone sends it to us via pex */
2212        if( atom->myflags & MYFLAG_BANNED )
2213            continue;
2214
2215        /* peer was unconnectable before, so we're not going to keep trying.
2216         * this is needs a separate flag from `banned', since if they try
2217         * to connect to us later, we'll let them in */
2218        if( atom->myflags & MYFLAG_UNREACHABLE )
2219            continue;
2220
2221        /* we don't need two connections to the same peer... */
2222        if( peerIsInUse( t, &atom->addr ) )
2223            continue;
2224
2225        /* no need to connect if we're both seeds... */
2226        if( seed && ( ( atom->flags & ADDED_F_SEED_FLAG ) ||
2227                      ( atom->uploadOnly == UPLOAD_ONLY_YES ) ) )
2228            continue;
2229
2230        /* don't reconnect too often */
2231        interval = getReconnectIntervalSecs( atom );
2232        if( ( now - atom->time ) < interval )
2233        {
2234            tordbg( t, "RECONNECT peer %d (%s) is in its grace period of %d seconds..",
2235                    i, tr_peerIoAddrStr( &atom->addr, atom->port ), interval );
2236            continue;
2237        }
2238
2239        /* Don't connect to peers in our blocklist */
2240        if( tr_sessionIsAddressBlocked( t->manager->session, &atom->addr ) )
2241            continue;
2242
2243        ret[retCount++] = atom;
2244    }
2245
2246    qsort( ret, retCount, sizeof( struct peer_atom* ), compareCandidates );
2247    *setmeSize = retCount;
2248    return ret;
2249}
2250
2251static void
2252closePeer( Torrent * t, tr_peer * peer )
2253{
2254    struct peer_atom * atom;
2255
2256    assert( t != NULL );
2257    assert( peer != NULL );
2258
2259    /* if we transferred piece data, then they might be good peers,
2260       so reset their `numFails' weight to zero.  otherwise we connected
2261       to them fruitlessly, so mark it as another fail */
2262    atom = getExistingAtom( t, &peer->addr );
2263    if( atom->piece_data_time )
2264        atom->numFails = 0;
2265    else
2266        ++atom->numFails;
2267
2268    tordbg( t, "removing bad peer %s", tr_peerIoGetAddrStr( peer->io ) );
2269    removePeer( t, peer );
2270}
2271
2272static void
2273reconnectTorrent( Torrent * t )
2274{
2275    static time_t prevTime = 0;
2276    static int    newConnectionsThisSecond = 0;
2277    time_t        now;
2278
2279    now = time( NULL );
2280    if( prevTime != now )
2281    {
2282        prevTime = now;
2283        newConnectionsThisSecond = 0;
2284    }
2285
2286    if( !t->isRunning )
2287    {
2288        removeAllPeers( t );
2289    }
2290    else
2291    {
2292        int i;
2293        int canCloseCount;
2294        int mustCloseCount;
2295        int candidateCount;
2296        int maxCandidates;
2297        struct tr_peer ** canClose = getPeersToClose( t, TR_CAN_CLOSE, &canCloseCount );
2298        struct tr_peer ** mustClose = getPeersToClose( t, TR_MUST_CLOSE, &mustCloseCount );
2299        struct peer_atom ** candidates = getPeerCandidates( t, &candidateCount );
2300
2301        tordbg( t, "reconnect pulse for [%s]: "
2302                   "%d must-close connections, "
2303                   "%d can-close connections, "
2304                   "%d connection candidates, "
2305                   "%d atoms, "
2306                   "max per pulse is %d",
2307                   t->tor->info.name,
2308                   mustCloseCount,
2309                   canCloseCount,
2310                   candidateCount,
2311                   tr_ptrArraySize( &t->pool ),
2312                   MAX_RECONNECTIONS_PER_PULSE );
2313
2314        /* disconnect the really bad peers */
2315        for( i=0; i<mustCloseCount; ++i )
2316            closePeer( t, mustClose[i] );
2317
2318        /* decide how many peers can we try to add in this pass */
2319        maxCandidates = candidateCount;
2320        maxCandidates = MIN( maxCandidates, MAX_RECONNECTIONS_PER_PULSE );
2321        maxCandidates = MIN( maxCandidates, getMaxPeerCount( t->tor ) - getPeerCount( t ) );
2322        maxCandidates = MIN( maxCandidates, MAX_CONNECTIONS_PER_SECOND - newConnectionsThisSecond );
2323
2324        /* maybe disconnect some lesser peers, if we have candidates to replace them with */
2325        for( i=0; ( i<canCloseCount ) && ( i<maxCandidates ); ++i )
2326            closePeer( t, canClose[i] );
2327
2328        tordbg( t, "candidateCount is %d, MAX_RECONNECTIONS_PER_PULSE is %d,"
2329                   " getPeerCount(t) is %d, getMaxPeerCount(t) is %d, "
2330                   "newConnectionsThisSecond is %d, MAX_CONNECTIONS_PER_SECOND is %d",
2331                   candidateCount,
2332                   MAX_RECONNECTIONS_PER_PULSE,
2333                   getPeerCount( t ),
2334                   getMaxPeerCount( t->tor ),
2335                   newConnectionsThisSecond, MAX_CONNECTIONS_PER_SECOND );
2336
2337        /* add some new ones */
2338        for( i=0; i<maxCandidates; ++i )
2339        {
2340            tr_peerMgr        * mgr = t->manager;
2341            struct peer_atom  * atom = candidates[i];
2342            tr_peerIo         * io;
2343
2344            tordbg( t, "Starting an OUTGOING connection with %s",
2345                   tr_peerIoAddrStr( &atom->addr, atom->port ) );
2346
2347            io = tr_peerIoNewOutgoing( mgr->session, mgr->session->bandwidth, &atom->addr, atom->port, t->hash );
2348
2349            if( io == NULL )
2350            {
2351                tordbg( t, "peerIo not created; marking peer %s as unreachable",
2352                        tr_peerIoAddrStr( &atom->addr, atom->port ) );
2353                atom->myflags |= MYFLAG_UNREACHABLE;
2354            }
2355            else
2356            {
2357                tr_handshake * handshake = tr_handshakeNew( io,
2358                                                            mgr->session->encryptionMode,
2359                                                            myHandshakeDoneCB,
2360                                                            mgr );
2361
2362                assert( tr_peerIoGetTorrentHash( io ) );
2363
2364                tr_peerIoUnref( io ); /* balanced by the implicit ref in tr_peerIoNewOutgoing() */
2365
2366                ++newConnectionsThisSecond;
2367
2368                tr_ptrArrayInsertSorted( &t->outgoingHandshakes, handshake,
2369                                         handshakeCompare );
2370            }
2371
2372            atom->time = time( NULL );
2373        }
2374
2375        /* cleanup */
2376        tr_free( candidates );
2377        tr_free( mustClose );
2378        tr_free( canClose );
2379    }
2380}
2381
2382static int
2383reconnectPulse( void * vmgr )
2384{
2385    tr_torrent * tor = NULL;
2386    tr_peerMgr * mgr = vmgr;
2387    managerLock( mgr );
2388
2389    while(( tor = tr_torrentNext( mgr->session, tor )))
2390        if( tor->isRunning )
2391            reconnectTorrent( tor->torrentPeers );
2392
2393    managerUnlock( mgr );
2394    return TRUE;
2395}
2396
2397/****
2398*****
2399*****  BANDWIDTH ALLOCATION
2400*****
2401****/
2402
2403static void
2404pumpAllPeers( tr_peerMgr * mgr )
2405{
2406    tr_torrent * tor = NULL;
2407
2408    while(( tor = tr_torrentNext( mgr->session, tor )))
2409    {
2410        int j;
2411        Torrent * t = tor->torrentPeers;
2412
2413        for( j=0; j<tr_ptrArraySize( &t->peers ); ++j )
2414        {
2415            tr_peer * peer = tr_ptrArrayNth( &t->peers, j );
2416            tr_peerMsgsPulse( peer->msgs );
2417        }
2418    }
2419}
2420
2421static int
2422bandwidthPulse( void * vmgr )
2423{
2424    tr_peerMgr * mgr = vmgr;
2425    managerLock( mgr );
2426
2427    /* FIXME: this next line probably isn't necessary... */
2428    pumpAllPeers( mgr );
2429
2430    /* allocate bandwidth to the peers */
2431    tr_bandwidthAllocate( mgr->session->bandwidth, TR_UP, BANDWIDTH_PERIOD_MSEC );
2432    tr_bandwidthAllocate( mgr->session->bandwidth, TR_DOWN, BANDWIDTH_PERIOD_MSEC );
2433
2434    managerUnlock( mgr );
2435    return TRUE;
2436}
Note: See TracBrowser for help on using the repository browser.