source: trunk/libtransmission/peer-mgr.c @ 3663

Last change on this file since 3663 was 3663, checked in by charles, 15 years ago

"corruption" fix part 2: lots of assertions, and try to complete pieces & ban bad peers sooner

  • Property svn:keywords set to Date Rev Author Id
File size: 47.9 KB
Line 
1/*
2 * This file Copyright (C) 2007 Charles Kerr <charles@rebelbase.com>
3 *
4 * This file is licensed by the GPL version 2.  Works owned by the
5 * Transmission project are granted a special exemption to clause 2(b)
6 * so that the bulk of its code can remain under the MIT license.
7 * This exemption does not extend to derived works not owned by
8 * the Transmission project.
9 *
10 * $Id: peer-mgr.c 3663 2007-10-31 04:23:51Z charles $
11 */
12
13#include <assert.h>
14#include <string.h> /* memcpy, memcmp */
15#include <stdlib.h> /* qsort */
16#include <stdio.h> /* printf */
17#include <limits.h> /* INT_MAX */
18
19#include <libgen.h> /* basename */
20#include <sys/types.h> /* event.h needs this */
21#include <arpa/inet.h> /* inet_ntoa */
22
23#include <event.h>
24
25#include "transmission.h"
26#include "clients.h"
27#include "completion.h"
28#include "crypto.h"
29#include "handshake.h"
30#include "net.h"
31#include "peer-io.h"
32#include "peer-mgr.h"
33#include "peer-mgr-private.h"
34#include "peer-msgs.h"
35#include "platform.h"
36#include "ptrarray.h"
37#include "ratecontrol.h"
38#include "shared.h"
39#include "trevent.h"
40#include "utils.h"
41
42enum
43{
44    /* how frequently to change which peers are choked */
45    RECHOKE_PERIOD_MSEC = (1000),
46
47    /* how frequently to decide which peers live and die */
48    RECONNECT_PERIOD_MSEC = (5 * 1000),
49
50    /* how frequently to refill peers' request lists */
51    REFILL_PERIOD_MSEC = 666,
52
53    /* don't change a peer's choke status more often than this */
54    MIN_CHOKE_PERIOD_SEC = 10,
55
56    /* following the BT spec, we consider ourselves `snubbed' if
57     * we're we don't get piece data from a peer in this long */
58    SNUBBED_SEC = 60,
59
60    /* arbitrary */
61    MAX_CONNECTED_PEERS_PER_TORRENT = 60,
62
63    /* when many peers are available, keep idle ones this long */
64    MIN_UPLOAD_IDLE_SECS = 60,
65
66    /* when few peers are available, keep idle ones this long */
67    MAX_UPLOAD_IDLE_SECS = 240,
68
69    /* how many peers to unchoke per-torrent. */
70    /* FIXME: make this user-configurable? */
71    NUM_UNCHOKED_PEERS_PER_TORRENT = 12, /* arbitrary */
72
73    /* set this too high and there will be a lot of churn.
74     * set it too low and you'll get peers too slowly */
75    MAX_RECONNECTIONS_PER_PULSE = 10,
76
77    /* corresponds to ut_pex's added.f flags */
78    ADDED_F_ENCRYPTION_FLAG = 1,
79    /* corresponds to ut_pex's added.f flags */
80    ADDED_F_SEED_FLAG = 2,
81
82    /* number of bad pieces a peer is allowed to send before we ban them */
83    MAX_BAD_PIECES_PER_PEER = 3,
84    /* use for bitwise operations w/peer_atom.myflags */
85    MYFLAG_BANNED = 1
86};
87
88
89/**
90***
91**/
92
93/* We keep one of these for every peer we know about, whether
94 * it's connected or not, so the struct must be small.
95 * When our current connections underperform, we dip back
96 * into this list for new ones. */
97struct peer_atom
98{   
99    uint8_t from;
100    uint8_t flags; /* these match the added_f flags */
101    uint8_t myflags; /* flags that aren't defined in added_f */
102    uint16_t port;
103    uint16_t numFails;
104    struct in_addr addr;
105    time_t time;
106};
107
108typedef struct
109{
110    uint8_t hash[SHA_DIGEST_LENGTH];
111    tr_ptrArray * outgoingHandshakes; /* tr_handshake */
112    tr_ptrArray * pool; /* struct peer_atom */
113    tr_ptrArray * peers; /* tr_peer */
114    tr_timer * reconnectTimer;
115    tr_timer * rechokeTimer;
116    tr_timer * refillTimer;
117    tr_torrent * tor;
118    tr_bitfield * requested;
119
120    unsigned int isRunning : 1;
121
122    struct tr_peerMgr * manager;
123}
124Torrent;
125
126struct tr_peerMgr
127{
128    tr_handle * handle;
129    tr_ptrArray * torrents; /* Torrent */
130    tr_ptrArray * incomingHandshakes; /* tr_handshake */
131};
132
133/**
134***
135**/
136
137static void
138myDebug( const char * file, int line, const Torrent * t, const char * fmt, ... )
139{
140    FILE * fp = tr_getLog( );
141    if( fp != NULL )
142    {
143        va_list args;
144        char timestr[64];
145        struct evbuffer * buf = evbuffer_new( );
146        char * myfile = tr_strdup( file );
147
148        evbuffer_add_printf( buf, "[%s] ", tr_getLogTimeStr( timestr, sizeof(timestr) ) );
149        if( t != NULL )
150            evbuffer_add_printf( buf, "%s ", t->tor->info.name );
151        va_start( args, fmt );
152        evbuffer_add_vprintf( buf, fmt, args );
153        va_end( args );
154        evbuffer_add_printf( buf, " (%s:%d)\n", basename(myfile), line );
155        fwrite( EVBUFFER_DATA(buf), 1, EVBUFFER_LENGTH(buf), fp );
156
157        tr_free( myfile );
158        evbuffer_free( buf );
159    }
160}
161
162#define tordbg(t, fmt...) myDebug(__FILE__, __LINE__, t, ##fmt )
163
164/**
165***
166**/
167
168static void
169managerLock( struct tr_peerMgr * manager )
170{
171    tr_globalLock( manager->handle );
172}
173static void
174managerUnlock( struct tr_peerMgr * manager )
175{
176    tr_globalUnlock( manager->handle );
177}
178static void
179torrentLock( Torrent * torrent )
180{
181    managerLock( torrent->manager );
182}
183static void
184torrentUnlock( Torrent * torrent )
185{
186    managerUnlock( torrent->manager );
187}
188static int
189torrentIsLocked( const Torrent * t )
190{
191    return tr_globalIsLocked( t->manager->handle );
192}
193
194/**
195***
196**/
197
198static int
199compareAddresses( const struct in_addr * a, const struct in_addr * b )
200{
201    return tr_compareUint32( a->s_addr, b->s_addr );
202}
203
204static int
205handshakeCompareToAddr( const void * va, const void * vb )
206{
207    const tr_handshake * a = va;
208    return compareAddresses( tr_handshakeGetAddr( a, NULL ), vb );
209}
210
211static int
212handshakeCompare( const void * a, const void * b )
213{
214    return handshakeCompareToAddr( a, tr_handshakeGetAddr( b, NULL ) );
215}
216
217static tr_handshake*
218getExistingHandshake( tr_ptrArray * handshakes, const struct in_addr * in_addr )
219{
220    return tr_ptrArrayFindSorted( handshakes,
221                                  in_addr,
222                                  handshakeCompareToAddr );
223}
224
225static int
226comparePeerAtomToAddress( const void * va, const void * vb )
227{
228    const struct peer_atom * a = va;
229    return compareAddresses( &a->addr, vb );
230}
231
232static int
233comparePeerAtoms( const void * va, const void * vb )
234{
235    const struct peer_atom * b = vb;
236    return comparePeerAtomToAddress( va, &b->addr );
237}
238
239/**
240***
241**/
242
243static int
244torrentCompare( const void * va, const void * vb )
245{
246    const Torrent * a = va;
247    const Torrent * b = vb;
248    return memcmp( a->hash, b->hash, SHA_DIGEST_LENGTH );
249}
250
251static int
252torrentCompareToHash( const void * va, const void * vb )
253{
254    const Torrent * a = va;
255    const uint8_t * b_hash = vb;
256    return memcmp( a->hash, b_hash, SHA_DIGEST_LENGTH );
257}
258
259static Torrent*
260getExistingTorrent( tr_peerMgr * manager, const uint8_t * hash )
261{
262    return (Torrent*) tr_ptrArrayFindSorted( manager->torrents,
263                                             hash,
264                                             torrentCompareToHash );
265}
266
267static int
268peerCompare( const void * va, const void * vb )
269{
270    const tr_peer * a = va;
271    const tr_peer * b = vb;
272    return compareAddresses( &a->in_addr, &b->in_addr );
273}
274
275static int
276peerCompareToAddr( const void * va, const void * vb )
277{
278    const tr_peer * a = va;
279    return compareAddresses( &a->in_addr, vb );
280}
281
282static tr_peer*
283getExistingPeer( Torrent * torrent, const struct in_addr * in_addr )
284{
285    assert( torrentIsLocked( torrent ) );
286    assert( in_addr != NULL );
287
288    return (tr_peer*) tr_ptrArrayFindSorted( torrent->peers,
289                                             in_addr,
290                                             peerCompareToAddr );
291}
292
293static struct peer_atom*
294getExistingAtom( const Torrent * t, const struct in_addr * addr )
295{
296    assert( torrentIsLocked( t ) );
297    return tr_ptrArrayFindSorted( t->pool, addr, comparePeerAtomToAddress );
298}
299
300static int
301peerIsInUse( const Torrent * ct, const struct in_addr * addr )
302{
303    Torrent * t = (Torrent*) ct;
304
305    assert( torrentIsLocked ( t ) );
306
307    return getExistingPeer( t, addr )
308        || getExistingHandshake( t->outgoingHandshakes, addr )
309        || getExistingHandshake( t->manager->incomingHandshakes, addr );
310}
311
312static tr_peer*
313peerConstructor( const struct in_addr * in_addr )
314{
315    tr_peer * p;
316    p = tr_new0( tr_peer, 1 );
317    p->rcToClient = tr_rcInit( );
318    p->rcToPeer = tr_rcInit( );
319    memcpy( &p->in_addr, in_addr, sizeof(struct in_addr) );
320    return p;
321}
322
323static tr_peer*
324getPeer( Torrent * torrent, const struct in_addr * in_addr )
325{
326    tr_peer * peer;
327
328    assert( torrentIsLocked( torrent ) );
329
330    peer = getExistingPeer( torrent, in_addr );
331
332    if( peer == NULL ) {
333        peer = peerConstructor( in_addr );
334        tr_ptrArrayInsertSorted( torrent->peers, peer, peerCompare );
335    }
336
337    return peer;
338}
339
340static void
341peerDestructor( tr_peer * peer )
342{
343    assert( peer != NULL );
344    assert( peer->msgs != NULL );
345
346    tr_peerMsgsUnsubscribe( peer->msgs, peer->msgsTag );
347    tr_peerMsgsFree( peer->msgs );
348
349    tr_peerIoFree( peer->io );
350
351    tr_bitfieldFree( peer->have );
352    tr_bitfieldFree( peer->blame );
353    tr_rcClose( peer->rcToClient );
354    tr_rcClose( peer->rcToPeer );
355    tr_free( peer->client );
356    tr_free( peer );
357}
358
359static void
360removePeer( Torrent * t, tr_peer * peer )
361{
362    tr_peer * removed;
363    struct peer_atom * atom;
364
365    assert( torrentIsLocked( t ) );
366
367    atom = getExistingAtom( t, &peer->in_addr );
368    assert( atom != NULL );
369    atom->time = time( NULL );
370
371    removed = tr_ptrArrayRemoveSorted  ( t->peers, peer, peerCompare );
372    assert( removed == peer );
373    peerDestructor( removed );
374}
375
376static void
377removeAllPeers( Torrent * t )
378{
379    while( !tr_ptrArrayEmpty( t->peers ) )
380        removePeer( t, tr_ptrArrayNth( t->peers, 0 ) );
381}
382
383static void
384torrentDestructor( Torrent * t )
385{
386    uint8_t hash[SHA_DIGEST_LENGTH];
387
388    assert( t != NULL );
389    assert( !t->isRunning );
390    assert( t->peers != NULL );
391    assert( torrentIsLocked( t ) );
392    assert( tr_ptrArrayEmpty( t->outgoingHandshakes ) );
393    assert( tr_ptrArrayEmpty( t->peers ) );
394
395    memcpy( hash, t->hash, SHA_DIGEST_LENGTH );
396
397    tr_timerFree( &t->reconnectTimer );
398    tr_timerFree( &t->rechokeTimer );
399    tr_timerFree( &t->refillTimer );
400
401    tr_bitfieldFree( t->requested );
402    tr_ptrArrayFree( t->pool, (PtrArrayForeachFunc)tr_free );
403    tr_ptrArrayFree( t->outgoingHandshakes, NULL );
404    tr_ptrArrayFree( t->peers, NULL );
405
406    tr_free( t );
407}
408
409static Torrent*
410torrentConstructor( tr_peerMgr * manager, tr_torrent * tor )
411{
412    Torrent * t;
413
414    t = tr_new0( Torrent, 1 );
415    t->manager = manager;
416    t->tor = tor;
417    t->pool = tr_ptrArrayNew( );
418    t->peers = tr_ptrArrayNew( );
419    t->outgoingHandshakes = tr_ptrArrayNew( );
420    t->requested = tr_bitfieldNew( tor->blockCount );
421    memcpy( t->hash, tor->info.hash, SHA_DIGEST_LENGTH );
422
423    return t;
424}
425
426/**
427***
428**/
429
430struct tr_bitfield *
431tr_peerMgrGenerateAllowedSet( const uint32_t         setCount,
432                              const uint32_t         pieceCount,
433                              const uint8_t          infohash[20],
434                              const struct in_addr * ip )
435{
436    /* This has been checked against the spec example implementation. Feeding it with :
437    setCount = 9, pieceCount = 1313, infohash = Oxaa,0xaa,...0xaa, ip = 80.4.4.200
438generate :
439    1059, 431, 808, 1217, 287, 376, 1188, 353, 508
440    but since we're storing in a bitfield, it won't be in this order... */
441    /* TODO : We should translate link-local IPv4 adresses to external IP,
442     * so that being on same local network gives us the same allowed pieces */
443   
444    uint8_t *seed;
445    char buf[4];
446    uint32_t allowedPieceCount = 0;
447    tr_bitfield_t * ret;
448
449    printf( "%d piece allowed fast set for torrent with %d pieces and hex infohash\n", setCount, pieceCount );
450    printf( "%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x%x for node with IP %s:\n",
451            infohash[0], infohash[1], infohash[2], infohash[3], infohash[4], infohash[5], infohash[6], infohash[7], infohash[8], infohash[9],
452            infohash[10], infohash[11], infohash[12], infohash[13], infohash[14], infohash[15], infohash[16], infohash[7], infohash[18], infohash[19],
453            inet_ntoa( *ip ) );
454   
455    seed = malloc(4 + SHA_DIGEST_LENGTH);
456   
457    ret = tr_bitfieldNew( pieceCount );
458   
459    /* We need a seed based on most significant bytes of peer address
460        concatenated with torrent's infohash */
461    *(uint32_t*)buf = ntohl( htonl(ip->s_addr) & 0xffffff00 );
462   
463    memcpy( seed, &buf, 4 );
464    memcpy( seed + 4, infohash, SHA_DIGEST_LENGTH );
465   
466    tr_sha1( seed, seed, 4 + SHA_DIGEST_LENGTH, NULL );
467   
468    while ( allowedPieceCount < setCount )
469    {
470        int i;
471        for ( i = 0 ; i < 5 && allowedPieceCount < setCount ; i++ )
472        {
473            /* We generate indices from 4-byte chunks of the seed */
474            uint32_t j = i * 4;
475            uint32_t y = ntohl( *(uint32_t*)(seed + j) );
476            uint32_t index = y % pieceCount;
477           
478            if ( !tr_bitfieldHas( ret, index ) )
479            {
480                tr_bitfieldAdd( ret, index );
481                allowedPieceCount++;
482            }
483        }
484        /* We randomize the seed, in case we need to iterate more */
485        tr_sha1( seed, seed, SHA_DIGEST_LENGTH, NULL );
486    }
487    tr_free( seed );
488   
489    return ret;
490}
491
492tr_peerMgr*
493tr_peerMgrNew( tr_handle * handle )
494{
495    tr_peerMgr * m = tr_new0( tr_peerMgr, 1 );
496    m->handle = handle;
497    m->torrents = tr_ptrArrayNew( );
498    m->incomingHandshakes = tr_ptrArrayNew( );
499    return m;
500}
501
502void
503tr_peerMgrFree( tr_peerMgr * manager )
504{
505    managerLock( manager );
506
507    /* free the handshakes.  Abort invokes handshakeDoneCB(), which removes
508     * the item from manager->handshakes, so this is a little roundabout... */
509    while( !tr_ptrArrayEmpty( manager->incomingHandshakes ) )
510        tr_handshakeAbort( tr_ptrArrayNth( manager->incomingHandshakes, 0 ) );
511    tr_ptrArrayFree( manager->incomingHandshakes, NULL );
512
513    /* free the torrents. */
514    tr_ptrArrayFree( manager->torrents, (PtrArrayForeachFunc)torrentDestructor );
515
516    managerUnlock( manager );
517    tr_free( manager );
518}
519
520static tr_peer**
521getConnectedPeers( Torrent * t, int * setmeCount )
522{
523    int i, peerCount, connectionCount;
524    tr_peer **peers;
525    tr_peer **ret;
526
527    assert( torrentIsLocked( t ) );
528
529    peers = (tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
530    ret = tr_new( tr_peer*, peerCount );
531
532    for( i=connectionCount=0; i<peerCount; ++i )
533        if( peers[i]->msgs != NULL )
534            ret[connectionCount++] = peers[i];
535
536    *setmeCount = connectionCount;
537    return ret;
538}
539
540/***
541****  Refill
542***/
543
544struct tr_refill_piece
545{
546    tr_priority_t priority;
547    int percentDone;
548    uint16_t random;
549    uint32_t piece;
550    uint32_t peerCount;
551    uint32_t fastAllowed;
552};
553
554static int
555compareRefillPiece (const void * aIn, const void * bIn)
556{
557    const struct tr_refill_piece * a = aIn;
558    const struct tr_refill_piece * b = bIn;
559   
560    /* if one *might be* fastallowed to us, get it first...
561     * I'm putting it on top so we prioritise those pieces at
562     * startup, then we'll have them, and we'll be denied access
563     * to them */
564    if (a->fastAllowed != b->fastAllowed)
565        return a->fastAllowed < b->fastAllowed ? -1 : 1;
566   
567    /* if one piece has a higher priority, it goes first */
568    if (a->priority != b->priority)
569        return a->priority > b->priority ? -1 : 1;
570
571    /* try to fill partial pieces */
572    if( a->percentDone != b->percentDone )
573        return a->percentDone > b->percentDone ? -1 : 1;
574   
575    /* otherwise if one has fewer peers, it goes first */
576    if (a->peerCount != b->peerCount)
577        return a->peerCount < b->peerCount ? -1 : 1;
578
579    /* otherwise go with our random seed */
580    return tr_compareUint16( a->random, b->random );
581}
582
583static int
584isPieceInteresting( const tr_torrent  * tor,
585                    int                 piece )
586{
587    if( tor->info.pieces[piece].dnd ) /* we don't want it */
588        return 0;
589
590    if( tr_cpPieceIsComplete( tor->completion, piece ) ) /* we have it */
591        return 0;
592
593    return 1;
594}
595
596static uint32_t*
597getPreferredPieces( Torrent     * t,
598                    uint32_t    * pieceCount )
599{
600    const tr_torrent * tor = t->tor;
601    const tr_info * inf = &tor->info;
602    int i;
603    uint32_t poolSize = 0;
604    uint32_t * pool = tr_new( uint32_t, inf->pieceCount );
605    int peerCount;
606    tr_peer** peers;
607
608    assert( torrentIsLocked( t ) );
609
610    peers = getConnectedPeers( t, &peerCount );
611
612    for( i=0; i<inf->pieceCount; ++i )
613        if( isPieceInteresting( tor, i ) )
614            pool[poolSize++] = i;
615
616    /* sort the pool from most interesting to least... */
617    if( poolSize > 1 )
618    {
619        uint32_t j;
620        struct tr_refill_piece * p = tr_new( struct tr_refill_piece, poolSize );
621
622        for( j=0; j<poolSize; ++j )
623        {
624            int k;
625            const int piece = pool[j];
626            struct tr_refill_piece * setme = p + j;
627
628            setme->piece = piece;
629            setme->priority = inf->pieces[piece].priority;
630            setme->peerCount = 0;
631            setme->fastAllowed = 0;
632            setme->random = tr_rand( UINT16_MAX );
633            setme->percentDone = (int)( 100.0 * tr_cpPercentBlocksInPiece( tor->completion, piece ) );
634
635            for( k=0; k<peerCount; ++k ) {
636                const tr_peer * peer = peers[k];
637                if( peer->peerIsInterested && !peer->clientIsChoked && tr_bitfieldHas( peer->have, piece ) )
638                    ++setme->peerCount;
639                /* The fast peer extension doesn't force a peer to actually HAVE a fast-allowed piece,
640                    but we're guaranteed to get the same pieces from different peers,
641                    so we'll build a list and pray one actually have this one */
642                setme->fastAllowed = tr_peerMsgIsPieceFastAllowed( peer->msgs, i);
643            }
644        }
645
646        qsort( p, poolSize, sizeof(struct tr_refill_piece), compareRefillPiece );
647
648        for( j=0; j<poolSize; ++j )
649            pool[j] = p[j].piece;
650
651        tr_free( p );
652    }
653
654    tr_free( peers );
655
656    *pieceCount = poolSize;
657    return pool;
658}
659
660static uint64_t*
661getPreferredBlocks( Torrent * t, uint64_t * setmeCount )
662{
663    uint32_t i;
664    uint32_t pieceCount;
665    uint32_t * pieces;
666    uint64_t *req, *unreq, *ret, *walk;
667    int reqCount, unreqCount;
668    const tr_torrent * tor = t->tor;
669
670    assert( torrentIsLocked( t ) );
671
672    pieces = getPreferredPieces( t, &pieceCount );
673
674    req = tr_new( uint64_t, pieceCount *  tor->blockCountInPiece );
675    reqCount = 0;
676    unreq = tr_new( uint64_t, pieceCount *  tor->blockCountInPiece );
677    unreqCount = 0;
678
679    for( i=0; i<pieceCount; ++i ) {
680        const uint32_t index = pieces[i];
681        const int begin = tr_torPieceFirstBlock( tor, index );
682        const int end = begin + tr_torPieceCountBlocks( tor, (int)index );
683        int block;
684        for( block=begin; block<end; ++block )
685            if( tr_cpBlockIsComplete( tor->completion, block ) )
686                continue;
687            else if( tr_bitfieldHas( t->requested, block ) )
688                req[reqCount++] = block;
689            else
690                unreq[unreqCount++] = block;
691    }
692
693    ret = walk = tr_new( uint64_t, unreqCount + reqCount );
694    memcpy( walk, unreq, sizeof(uint64_t) * unreqCount );
695    walk += unreqCount;
696    memcpy( walk, req, sizeof(uint64_t) * reqCount );
697    walk += reqCount;
698    assert( ( walk - ret ) == ( unreqCount + reqCount ) );
699    *setmeCount = walk - ret;
700
701    tr_free( req );
702    tr_free( unreq );
703    tr_free( pieces );
704
705    return ret;
706}
707
708static int
709refillPulse( void * vtorrent )
710{
711    Torrent * t = vtorrent;
712    tr_torrent * tor = t->tor;
713    uint32_t i;
714    int peerCount;
715    tr_peer ** peers;
716    uint64_t blockCount;
717    uint64_t * blocks;
718
719    if( !t->isRunning )
720        return TRUE;
721    if( tr_torrentIsSeed( t->tor ) )
722        return TRUE;
723
724    torrentLock( t );
725    tordbg( t, "Refilling Request Buffers..." );
726
727    blocks = getPreferredBlocks( t, &blockCount );
728    peers = getConnectedPeers( t, &peerCount );
729
730    for( i=0; peerCount && i<blockCount; ++i )
731    {
732        const uint64_t block = blocks[i];
733        const uint32_t index = tr_torBlockPiece( tor, block );
734        const uint32_t begin = (block * tor->blockSize) - (index * tor->info.pieceSize);
735        const uint32_t length = tr_torBlockCountBytes( tor, (int)block );
736        int j;
737        assert( _tr_block( tor, index, begin ) == (int)block );
738        assert( begin < (uint32_t)tr_torPieceCountBytes( tor, (int)index ) );
739        assert( (begin + length) <= (uint32_t)tr_torPieceCountBytes( tor, (int)index ) );
740
741        /* find a peer who can ask for this block */
742        for( j=0; j<peerCount; )
743        {
744            const int val = tr_peerMsgsAddRequest( peers[j]->msgs, index, begin, length );
745            switch( val )
746            {
747                case TR_ADDREQ_FULL: 
748                case TR_ADDREQ_CLIENT_CHOKED:
749                    memmove( peers+j, peers+j+1, sizeof(tr_peer*)*(--peerCount-j) );
750                    break;
751
752                case TR_ADDREQ_MISSING: 
753                case TR_ADDREQ_DUPLICATE: 
754                    ++j;
755                    break;
756
757                case TR_ADDREQ_OK:
758                    tr_bitfieldAdd( t->requested, block );
759                    j = peerCount;
760                    break;
761
762                default:
763                    assert( 0 && "unhandled value" );
764                    break;
765            }
766        }
767    }
768
769    /* cleanup */
770    tr_free( peers );
771    tr_free( blocks );
772
773    t->refillTimer = NULL;
774    torrentUnlock( t );
775    return FALSE;
776}
777
778static void
779broadcastClientHave( Torrent * t, uint32_t index )
780{
781    int i, size;
782    tr_peer ** peers;
783
784    assert( torrentIsLocked( t ) );
785
786    peers = getConnectedPeers( t, &size );
787    for( i=0; i<size; ++i )
788        tr_peerMsgsHave( peers[i]->msgs, index );
789    tr_free( peers );
790}
791
792static void
793broadcastGotBlock( Torrent * t, uint32_t index, uint32_t offset, uint32_t length )
794{
795    int i, size;
796    tr_peer ** peers;
797
798    assert( torrentIsLocked( t ) );
799
800    peers = getConnectedPeers( t, &size );
801    for( i=0; i<size; ++i )
802        tr_peerMsgsCancel( peers[i]->msgs, index, offset, length );
803    tr_free( peers );
804}
805
806static void
807msgsCallbackFunc( void * vpeer, void * vevent, void * vt )
808{
809    tr_peer * peer = vpeer;
810    Torrent * t = (Torrent *) vt;
811    const tr_peermsgs_event * e = (const tr_peermsgs_event *) vevent;
812
813    torrentLock( t );
814
815    switch( e->eventType )
816    {
817        case TR_PEERMSG_NEED_REQ:
818            if( t->refillTimer == NULL )
819                t->refillTimer = tr_timerNew( t->manager->handle,
820                                              refillPulse, t,
821                                              REFILL_PERIOD_MSEC );
822            break;
823
824        case TR_PEERMSG_CANCEL:
825            tr_bitfieldRem( t->requested, _tr_block( t->tor, e->pieceIndex, e->offset ) );
826            break;
827
828        case TR_PEERMSG_CLIENT_HAVE:
829            broadcastClientHave( t, e->pieceIndex );
830            tr_torrentRecheckCompleteness( t->tor );
831            break;
832
833        case TR_PEERMSG_PEER_PROGRESS: {
834            struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
835            const int peerIsSeed = e->progress >= 1.0;
836            if( peerIsSeed ) {
837                tordbg( t, "marking peer %s as a seed", tr_peerIoAddrStr(&atom->addr,atom->port) );
838                atom->flags |= ADDED_F_SEED_FLAG;
839            } else {
840                tordbg( t, "marking peer %s as a non-seed", tr_peerIoAddrStr(&atom->addr,atom->port) );
841                atom->flags &= ~ADDED_F_SEED_FLAG;
842            } break;
843        }
844
845        case TR_PEERMSG_CLIENT_BLOCK:
846            broadcastGotBlock( t, e->pieceIndex, e->offset, e->length );
847            break;
848
849        case TR_PEERMSG_GOT_ERROR:
850            peer->doPurge = 1;
851            break;
852
853        default:
854            assert(0);
855    }
856
857    torrentUnlock( t );
858}
859
860static void
861ensureAtomExists( Torrent * t, const struct in_addr * addr, uint16_t port, uint8_t flags, uint8_t from )
862{
863    if( getExistingAtom( t, addr ) == NULL )
864    {
865        struct peer_atom * a;
866        a = tr_new0( struct peer_atom, 1 );
867        a->addr = *addr;
868        a->port = port;
869        a->flags = flags;
870        a->from = from;
871        tordbg( t, "got a new atom: %s", tr_peerIoAddrStr(&a->addr,a->port) );
872        tr_ptrArrayInsertSorted( t->pool, a, comparePeerAtoms );
873    }
874}
875
876/* FIXME: this is kind of a mess. */
877static void
878myHandshakeDoneCB( tr_handshake    * handshake,
879                   tr_peerIo       * io,
880                   int               isConnected,
881                   const uint8_t   * peer_id,
882                   void            * vmanager )
883{
884    int ok = isConnected;
885    uint16_t port;
886    const struct in_addr * addr;
887    tr_peerMgr * manager = (tr_peerMgr*) vmanager;
888    Torrent * t;
889    tr_handshake * ours;
890
891    assert( io != NULL );
892    assert( isConnected==0 || isConnected==1 );
893
894    t = tr_peerIoHasTorrentHash( io )
895        ? getExistingTorrent( manager, tr_peerIoGetTorrentHash( io ) )
896        : NULL;
897
898    if( tr_peerIoIsIncoming ( io ) )
899        ours = tr_ptrArrayRemoveSorted( manager->incomingHandshakes,
900                                        handshake, handshakeCompare );
901    else if( t != NULL )
902        ours = tr_ptrArrayRemoveSorted( t->outgoingHandshakes,
903                                        handshake, handshakeCompare );
904    else
905        ours = handshake;
906
907    assert( ours != NULL );
908    assert( ours == handshake );
909
910    if( t != NULL )
911        torrentLock( t );
912
913    addr = tr_peerIoGetAddress( io, &port );
914
915    if( !ok || !t || !t->isRunning )
916    {
917        tr_peerIoFree( io );
918    }
919    else /* looking good */
920    {
921        struct peer_atom * atom;
922        ensureAtomExists( t, addr, port, 0, TR_PEER_FROM_INCOMING );
923        atom = getExistingAtom( t, addr );
924
925        if( atom->myflags & MYFLAG_BANNED )
926        {
927            tordbg( t, "banned peer %s tried to reconnect", tr_peerIoAddrStr(&atom->addr,atom->port) );
928            tr_peerIoFree( io );
929        }
930        else
931        {
932            tr_peer * peer = getExistingPeer( t, addr );
933
934            if( peer != NULL ) /* we already have this peer */
935            {
936                tr_peerIoFree( io );
937            }
938            else
939            {
940                peer = getPeer( t, addr );
941                tr_free( peer->client );
942                peer->client = peer_id ? tr_clientForId( peer_id ) : NULL;
943                peer->port = port;
944                peer->io = io;
945                peer->msgs = tr_peerMsgsNew( t->tor, peer, msgsCallbackFunc, t, &peer->msgsTag );
946                atom->time = time( NULL );
947            }
948        }
949    }
950
951    if( t != NULL )
952        torrentUnlock( t );
953}
954
955void
956tr_peerMgrAddIncoming( tr_peerMgr      * manager,
957                       struct in_addr  * addr,
958                       uint16_t          port,
959                       int               socket )
960{
961    managerLock( manager );
962
963    if( getExistingHandshake( manager->incomingHandshakes, addr ) )
964    {
965        tr_netClose( socket );
966    }
967    else /* we don't have a connetion to them yet... */
968    {
969        tr_peerIo * io;
970        tr_handshake * handshake;
971
972        tordbg( NULL, "Got an INCOMING connection with %s", tr_peerIoAddrStr( addr, port ) );
973
974        io = tr_peerIoNewIncoming( manager->handle, addr, port, socket );
975
976        handshake = tr_handshakeNew( io,
977                                     manager->handle->encryptionMode,
978                                     myHandshakeDoneCB,
979                                     manager );
980
981        tr_ptrArrayInsertSorted( manager->incomingHandshakes, handshake, handshakeCompare );
982    }
983
984    managerUnlock( manager );
985}
986
987void
988tr_peerMgrAddPex( tr_peerMgr     * manager,
989                  const uint8_t  * torrentHash,
990                  uint8_t          from,
991                  const tr_pex   * pex,
992                  int              pexCount )
993{
994    Torrent * t;
995    const tr_pex * end;
996
997    managerLock( manager );
998
999    t = getExistingTorrent( manager, torrentHash );
1000    for( end=pex+pexCount; pex!=end; ++pex )
1001        ensureAtomExists( t, &pex->in_addr, pex->port, pex->flags, from );
1002
1003    managerUnlock( manager );
1004}
1005
1006void
1007tr_peerMgrAddPeers( tr_peerMgr    * manager,
1008                    const uint8_t * torrentHash,
1009                    uint8_t         from,
1010                    const uint8_t * peerCompact,
1011                    int             peerCount )
1012{
1013    int i;
1014    const uint8_t * walk = peerCompact;
1015    Torrent * t;
1016
1017    managerLock( manager );
1018
1019    t = getExistingTorrent( manager, torrentHash );
1020    for( i=0; t!=NULL && i<peerCount; ++i )
1021    {
1022        struct in_addr addr;
1023        uint16_t port;
1024        memcpy( &addr, walk, 4 ); walk += 4;
1025        memcpy( &port, walk, 2 ); walk += 2;
1026        ensureAtomExists( t, &addr, port, 0, from );
1027    }
1028
1029    managerUnlock( manager );
1030}
1031
1032/**
1033***
1034**/
1035
1036void
1037tr_peerMgrSetBlame( tr_peerMgr     * manager,
1038                    const uint8_t  * torrentHash,
1039                    int              pieceIndex,
1040                    int              success )
1041{
1042    if( !success )
1043    {
1044        int peerCount, i;
1045        Torrent * t = getExistingTorrent( manager, torrentHash );
1046        tr_peer ** peers;
1047
1048        assert( torrentIsLocked( t ) );
1049
1050        peers = (tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1051        for( i=0; i<peerCount; ++i )
1052        {
1053            struct peer_atom * atom;
1054            tr_peer * peer;
1055
1056            peer = peers[i];
1057            if( !tr_bitfieldHas( peer->blame, pieceIndex ) )
1058                continue;
1059
1060            ++peer->strikes;
1061            tordbg( t, "peer %s contributed to corrupt piece (%d); now has %d strikes",
1062                       tr_peerIoAddrStr(&peer->in_addr,peer->port),
1063                       pieceIndex, (int)peer->strikes );
1064            if( peer->strikes < MAX_BAD_PIECES_PER_PEER )
1065                continue;
1066
1067            atom = getExistingAtom( t, &peer->in_addr );
1068            atom->myflags |= MYFLAG_BANNED;
1069            peer->doPurge = 1;
1070            tordbg( t, "banning peer %s due to corrupt data", tr_peerIoAddrStr(&atom->addr,atom->port) );
1071        }
1072    }
1073}
1074
1075int
1076tr_pexCompare( const void * va, const void * vb )
1077{
1078    const tr_pex * a = (const tr_pex *) va;
1079    const tr_pex * b = (const tr_pex *) vb;
1080    int i = memcmp( &a->in_addr, &b->in_addr, sizeof(struct in_addr) );
1081    if( i ) return i;
1082    if( a->port < b->port ) return -1;
1083    if( a->port > b->port ) return 1;
1084    return 0;
1085}
1086
1087int tr_pexCompare( const void * a, const void * b );
1088
1089static int
1090peerPrefersCrypto( const tr_peer * peer )
1091{
1092    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_YES )
1093        return TRUE;
1094
1095    if( peer->encryption_preference == ENCRYPTION_PREFERENCE_NO )
1096        return FALSE;
1097
1098    return tr_peerIoIsEncrypted( peer->io );
1099};
1100
1101int
1102tr_peerMgrGetPeers( tr_peerMgr      * manager,
1103                    const uint8_t   * torrentHash,
1104                    tr_pex         ** setme_pex )
1105{
1106    const Torrent * t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1107    int i, peerCount;
1108    const tr_peer ** peers;
1109    tr_pex * pex;
1110    tr_pex * walk;
1111
1112    torrentLock( (Torrent*)t );
1113
1114    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1115    pex = walk = tr_new( tr_pex, peerCount );
1116
1117    for( i=0; i<peerCount; ++i, ++walk )
1118    {
1119        const tr_peer * peer = peers[i];
1120
1121        walk->in_addr = peer->in_addr;
1122
1123        walk->port = peer->port;
1124
1125        walk->flags = 0;
1126        if( peerPrefersCrypto(peer) )  walk->flags |= ADDED_F_ENCRYPTION_FLAG;
1127        if( peer->progress >= 1.0 )    walk->flags |= ADDED_F_SEED_FLAG;
1128    }
1129
1130    assert( ( walk - pex ) == peerCount );
1131    qsort( pex, peerCount, sizeof(tr_pex), tr_pexCompare );
1132    *setme_pex = pex;
1133
1134    torrentUnlock( (Torrent*)t );
1135
1136    return peerCount;
1137}
1138
1139static int reconnectPulse( void * vtorrent );
1140static int rechokePulse( void * vtorrent );
1141
1142void
1143tr_peerMgrStartTorrent( tr_peerMgr     * manager,
1144                        const uint8_t  * torrentHash )
1145{
1146    Torrent * t;
1147
1148    managerLock( manager );
1149
1150    t = getExistingTorrent( manager, torrentHash );
1151
1152    assert( t != NULL );
1153    assert( ( t->isRunning != 0 ) == ( t->reconnectTimer != NULL ) );
1154    assert( ( t->isRunning != 0 ) == ( t->rechokeTimer != NULL ) );
1155
1156    if( !t->isRunning )
1157    {
1158        t->isRunning = 1;
1159
1160        t->reconnectTimer = tr_timerNew( t->manager->handle,
1161                                         reconnectPulse, t,
1162                                         RECONNECT_PERIOD_MSEC );
1163
1164        t->rechokeTimer = tr_timerNew( t->manager->handle,
1165                                       rechokePulse, t,
1166                                       RECHOKE_PERIOD_MSEC );
1167
1168        reconnectPulse( t );
1169
1170        rechokePulse( t );
1171    }
1172
1173    managerUnlock( manager );
1174}
1175
1176static void
1177stopTorrent( Torrent * t )
1178{
1179    assert( torrentIsLocked( t ) );
1180
1181    t->isRunning = 0;
1182    tr_timerFree( &t->rechokeTimer );
1183    tr_timerFree( &t->reconnectTimer );
1184
1185    /* disconnect the peers. */
1186    tr_ptrArrayForeach( t->peers, (PtrArrayForeachFunc)peerDestructor );
1187    tr_ptrArrayClear( t->peers );
1188
1189    /* disconnect the handshakes.  handshakeAbort calls handshakeDoneCB(),
1190     * which removes the handshake from t->outgoingHandshakes... */
1191    while( !tr_ptrArrayEmpty( t->outgoingHandshakes ) )
1192        tr_handshakeAbort( tr_ptrArrayNth( t->outgoingHandshakes, 0 ) );
1193}
1194void
1195tr_peerMgrStopTorrent( tr_peerMgr     * manager,
1196                       const uint8_t  * torrentHash)
1197{
1198    managerLock( manager );
1199
1200    stopTorrent( getExistingTorrent( manager, torrentHash ) );
1201
1202    managerUnlock( manager );
1203}
1204
1205void
1206tr_peerMgrAddTorrent( tr_peerMgr * manager,
1207                      tr_torrent * tor )
1208{
1209    Torrent * t;
1210
1211    managerLock( manager );
1212
1213    assert( tor != NULL );
1214    assert( getExistingTorrent( manager, tor->info.hash ) == NULL );
1215
1216    t = torrentConstructor( manager, tor );
1217    tr_ptrArrayInsertSorted( manager->torrents, t, torrentCompare );
1218
1219    managerUnlock( manager );
1220}
1221
1222void
1223tr_peerMgrRemoveTorrent( tr_peerMgr     * manager,
1224                         const uint8_t  * torrentHash )
1225{
1226    Torrent * t;
1227
1228    managerLock( manager );
1229
1230    t = getExistingTorrent( manager, torrentHash );
1231    assert( t != NULL );
1232    stopTorrent( t );
1233    tr_ptrArrayRemoveSorted( manager->torrents, t, torrentCompare );
1234    torrentDestructor( t );
1235
1236    managerUnlock( manager );
1237}
1238
1239void
1240tr_peerMgrTorrentAvailability( const tr_peerMgr * manager,
1241                               const uint8_t    * torrentHash,
1242                               int8_t           * tab,
1243                               int                tabCount )
1244{
1245    int i;
1246    const Torrent * t;
1247    const tr_torrent * tor;
1248    float interval;
1249
1250    managerLock( (tr_peerMgr*)manager );
1251
1252    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1253    tor = t->tor;
1254    interval = tor->info.pieceCount / (float)tabCount;
1255
1256    memset( tab, 0, tabCount );
1257
1258    for( i=0; i<tabCount; ++i )
1259    {
1260        const int piece = i * interval;
1261
1262        if( tor == NULL )
1263            tab[i] = 0;
1264        else if( tr_cpPieceIsComplete( tor->completion, piece ) )
1265            tab[i] = -1;
1266        else {
1267            int j, peerCount;
1268            const tr_peer ** peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &peerCount );
1269            for( j=0; j<peerCount; ++j )
1270                if( tr_bitfieldHas( peers[j]->have, i ) )
1271                    ++tab[i];
1272        }
1273    }
1274
1275    managerUnlock( (tr_peerMgr*)manager );
1276}
1277
1278/* Returns the pieces that we and/or a connected peer has */
1279tr_bitfield*
1280tr_peerMgrGetAvailable( const tr_peerMgr * manager,
1281                        const uint8_t    * torrentHash )
1282{
1283    int i, size;
1284    const Torrent * t;
1285    const tr_peer ** peers;
1286    tr_bitfield * pieces;
1287
1288    managerLock( (tr_peerMgr*)manager );
1289
1290    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1291    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &size );
1292    pieces = tr_bitfieldDup( tr_cpPieceBitfield( t->tor->completion ) );
1293    for( i=0; i<size; ++i )
1294        if( peers[i]->io != NULL )
1295            tr_bitfieldAnd( pieces, peers[i]->have );
1296
1297    managerUnlock( (tr_peerMgr*)manager );
1298    return pieces;
1299}
1300
1301int
1302tr_peerMgrHasConnections( const tr_peerMgr * manager,
1303                          const uint8_t    * torrentHash )
1304{
1305    int ret;
1306    const Torrent * t;
1307    managerLock( (tr_peerMgr*)manager );
1308
1309    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1310    ret = t && tr_ptrArraySize( t->peers );
1311
1312    managerUnlock( (tr_peerMgr*)manager );
1313    return ret;
1314}
1315
1316void
1317tr_peerMgrTorrentStats( const tr_peerMgr * manager,
1318                        const uint8_t    * torrentHash,
1319                        int              * setmePeersKnown,
1320                        int              * setmePeersConnected,
1321                        int              * setmePeersSendingToUs,
1322                        int              * setmePeersGettingFromUs,
1323                        int              * setmePeersFrom )
1324{
1325    int i, size;
1326    const Torrent * t;
1327    const tr_peer ** peers;
1328
1329    managerLock( (tr_peerMgr*)manager );
1330
1331    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1332    peers = (const tr_peer **) tr_ptrArrayPeek( t->peers, &size );
1333
1334    *setmePeersKnown          = tr_ptrArraySize( t->pool );
1335    *setmePeersConnected      = 0;
1336    *setmePeersSendingToUs    = 0;
1337    *setmePeersGettingFromUs  = 0;
1338
1339    for( i=0; i<TR_PEER_FROM__MAX; ++i )
1340        setmePeersFrom[i] = 0;
1341
1342    for( i=0; i<size; ++i )
1343    {
1344        const tr_peer * peer = peers[i];
1345        const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1346
1347        if( peer->io == NULL ) /* not connected */
1348            continue;
1349
1350        ++*setmePeersConnected;
1351
1352        ++setmePeersFrom[atom->from];
1353
1354        if( peer->rateToPeer > 0.01 )
1355            ++*setmePeersGettingFromUs;
1356
1357        if( peer->rateToClient > 0.01 )
1358            ++*setmePeersSendingToUs;
1359    }
1360
1361    managerUnlock( (tr_peerMgr*)manager );
1362}
1363
1364struct tr_peer_stat *
1365tr_peerMgrPeerStats( const tr_peerMgr  * manager,
1366                     const uint8_t     * torrentHash,
1367                     int               * setmeCount UNUSED )
1368{
1369    int i, size;
1370    const Torrent * t;
1371    tr_peer ** peers;
1372    tr_peer_stat * ret;
1373
1374    assert( manager != NULL );
1375    managerLock( (tr_peerMgr*)manager );
1376
1377    t = getExistingTorrent( (tr_peerMgr*)manager, torrentHash );
1378    peers = getConnectedPeers( (Torrent*)t, &size );
1379    ret = tr_new0( tr_peer_stat, size );
1380
1381    for( i=0; i<size; ++i )
1382    {
1383        const tr_peer * peer = peers[i];
1384        const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1385        tr_peer_stat * stat = ret + i;
1386
1387        tr_netNtop( &peer->in_addr, stat->addr, sizeof(stat->addr) );
1388        stat->port             = peer->port;
1389        stat->from             = atom->from;
1390        stat->client           = tr_strdup( peer->client ? peer->client : "" );
1391        stat->progress         = peer->progress;
1392        stat->isEncrypted      = tr_peerIoIsEncrypted( peer->io ) ? 1 : 0;
1393        stat->uploadToRate     = peer->rateToPeer;
1394        stat->downloadFromRate = peer->rateToClient;
1395        stat->isDownloading    = stat->uploadToRate > 0.01;
1396        stat->isUploading      = stat->downloadFromRate > 0.01;
1397    }
1398
1399    *setmeCount = size;
1400    tr_free( peers );
1401
1402    managerUnlock( (tr_peerMgr*)manager );
1403    return ret;
1404}
1405
1406/**
1407***
1408**/
1409
1410struct ChokeData
1411{
1412    tr_peer * peer;
1413    float rate;
1414    int randomKey;
1415    int preferred;
1416    int doUnchoke;
1417};
1418
1419static int
1420compareChoke( const void * va, const void * vb )
1421{
1422    const struct ChokeData * a = va;
1423    const struct ChokeData * b = vb;
1424
1425    if( a->preferred != b->preferred )
1426        return a->preferred ? -1 : 1;
1427
1428    if( a->preferred )
1429    {
1430        if( a->rate > b->rate ) return -1;
1431        if( a->rate < b->rate ) return 1;
1432        return 0;
1433    }
1434    else
1435    {
1436        return a->randomKey - b->randomKey;
1437    }
1438}
1439
1440static int
1441clientIsSnubbedBy( const tr_peer * peer )
1442{
1443    assert( peer != NULL );
1444
1445    return peer->peerSentPieceDataAt < (time(NULL) - SNUBBED_SEC);
1446}
1447
1448/**
1449***
1450**/
1451
1452static double
1453getWeightedThroughput( const tr_peer * peer )
1454{
1455    return ( 3 * peer->rateToPeer )
1456         + ( 1 * peer->rateToClient );
1457}
1458
1459static void
1460rechoke( Torrent * t )
1461{
1462    int i, peerCount, size=0, unchoked=0;
1463    const time_t fibrillationTime = time(NULL) - MIN_CHOKE_PERIOD_SEC;
1464    tr_peer ** peers = getConnectedPeers( t, &peerCount );
1465    struct ChokeData * choke = tr_new0( struct ChokeData, peerCount );
1466
1467    assert( torrentIsLocked( t ) );
1468   
1469    /* sort the peers by preference and rate */
1470    for( i=0; i<peerCount; ++i )
1471    {
1472        tr_peer * peer = peers[i];
1473        struct ChokeData * node;
1474        if( peer->chokeChangedAt > fibrillationTime )
1475            continue;
1476
1477        node = &choke[size++];
1478        node->peer = peer;
1479        node->preferred = peer->peerIsInterested && !clientIsSnubbedBy(peer);
1480        node->randomKey = tr_rand( INT_MAX );
1481        node->rate = getWeightedThroughput( peer );
1482    }
1483
1484    qsort( choke, size, sizeof(struct ChokeData), compareChoke );
1485
1486    for( i=0; i<size && i<NUM_UNCHOKED_PEERS_PER_TORRENT; ++i ) {
1487        choke[i].doUnchoke = 1;
1488        ++unchoked;
1489    }
1490
1491    for( ; i<size; ++i ) {
1492        choke[i].doUnchoke = 1;
1493        ++unchoked;
1494        if( choke[i].peer->peerIsInterested )
1495            break;
1496    }
1497
1498    for( i=0; i<size; ++i )
1499        tr_peerMsgsSetChoke( choke[i].peer->msgs, !choke[i].doUnchoke );
1500
1501    /* cleanup */
1502    tr_free( choke );
1503    tr_free( peers );
1504}
1505
1506static int
1507rechokePulse( void * vtorrent )
1508{
1509    Torrent * t = vtorrent;
1510    torrentLock( t );
1511    rechoke( t );
1512    torrentUnlock( t );
1513    return TRUE;
1514}
1515
1516/***
1517****
1518****  Life and Death
1519****
1520***/
1521
1522static int
1523shouldPeerBeClosed( const Torrent * t, const tr_peer * peer, int peerCount )
1524{
1525    const tr_torrent * tor = t->tor;
1526    const time_t now = time( NULL );
1527    const struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1528
1529    /* if it's marked for purging, close it */
1530    if( peer->doPurge ) {
1531        tordbg( t, "purging peer %s because its doPurge flag is set", tr_peerIoAddrStr(&atom->addr,atom->port) );
1532        return TRUE;
1533    }
1534
1535    /* if we're both seeds and it's been long enough for a pex exchange, close it */
1536    if( 1 ) {
1537        const int clientIsSeed = tr_torrentIsSeed( tor );
1538        const int peerIsSeed = atom->flags & ADDED_F_SEED_FLAG;
1539        if( peerIsSeed && clientIsSeed && ( !tr_torrentIsPexEnabled(tor) || (now-atom->time>=30) ) ) {
1540            tordbg( t, "purging peer %s because we're both seeds", tr_peerIoAddrStr(&atom->addr,atom->port) );
1541            return TRUE;
1542        }
1543    }
1544
1545    /* disconnect if it's been too long since piece data has been transferred.
1546     * this is on a sliding scale based on number of available peers... */
1547    if( 1 ) {
1548        const int relaxStrictnessIfFewerThanN = (int)((MAX_CONNECTED_PEERS_PER_TORRENT * 0.9) + 0.5);
1549        /* if we have >= relaxIfFewerThan, strictness is 100%.
1550         * if we have zero connections, strictness is 0% */
1551        const double strictness = peerCount >= relaxStrictnessIfFewerThanN
1552            ? 1.0
1553            : peerCount / (double)relaxStrictnessIfFewerThanN;
1554        const int lo = MIN_UPLOAD_IDLE_SECS;
1555        const int hi = MAX_UPLOAD_IDLE_SECS;
1556        const int limit = lo + ((hi-lo) * strictness);
1557        const time_t then = peer->pieceDataActivityDate;
1558        const int idleTime = then ? (now-then) : 0;
1559        if( idleTime > limit ) {
1560            tordbg( t, "purging peer %s because it's been %d secs since we shared anything",
1561                       tr_peerIoAddrStr(&atom->addr,atom->port), idleTime );
1562            return TRUE;
1563        }
1564    }
1565
1566    return FALSE;
1567}
1568
1569static tr_peer **
1570getPeersToClose( Torrent * t, int * setmeSize )
1571{
1572    int i, peerCount, outsize;
1573    tr_peer ** peers = (tr_peer**) tr_ptrArrayPeek( t->peers, &peerCount );
1574    struct tr_peer ** ret = tr_new( tr_peer*, peerCount );
1575
1576    assert( torrentIsLocked( t ) );
1577
1578    for( i=outsize=0; i<peerCount; ++i )
1579        if( shouldPeerBeClosed( t, peers[i], peerCount ) )
1580            ret[outsize++] = peers[i];
1581
1582    *setmeSize = outsize;
1583    return ret;
1584}
1585
1586static int
1587compareAtomByTime( const void * va, const void * vb )
1588{
1589    const struct peer_atom * a = * (const struct peer_atom**) va;
1590    const struct peer_atom * b = * (const struct peer_atom**) vb;
1591    if( a->time < b->time ) return -1;
1592    if( a->time > b->time ) return 1;
1593    return 0;
1594}
1595
1596static struct peer_atom **
1597getPeerCandidates( Torrent * t, int * setmeSize )
1598{
1599    int i, atomCount, retCount;
1600    struct peer_atom ** atoms;
1601    struct peer_atom ** ret;
1602    const time_t now = time( NULL );
1603    const int seed = tr_torrentIsSeed( t->tor );
1604
1605    assert( torrentIsLocked( t ) );
1606
1607    atoms = (struct peer_atom**) tr_ptrArrayPeek( t->pool, &atomCount );
1608    ret = tr_new( struct peer_atom*, atomCount );
1609    for( i=retCount=0; i<atomCount; ++i )
1610    {
1611        int wait, minWait, maxWait;
1612        struct peer_atom * atom = atoms[i];
1613
1614        /* peer fed us too much bad data ... we only keep it around
1615         * now to weed it out in case someone sends it to us via pex */
1616        if( atom->myflags & MYFLAG_BANNED ) {
1617            tordbg( t, "RECONNECT peer %d (%s) is banned...",
1618                    i, tr_peerIoAddrStr(&atom->addr,atom->port) );
1619            continue;
1620        }
1621
1622        /* we don't need two connections to the same peer... */
1623        if( peerIsInUse( t, &atom->addr ) ) {
1624            tordbg( t, "RECONNECT peer %d (%s) is in use..",
1625                    i, tr_peerIoAddrStr(&atom->addr,atom->port) );
1626            continue;
1627        }
1628
1629        /* no need to connect if we're both seeds... */
1630        if( seed && (atom->flags & ADDED_F_SEED_FLAG) ) {
1631            tordbg( t, "RECONNECT peer %d (%s) is a seed and so are we..",
1632                    i, tr_peerIoAddrStr(&atom->addr,atom->port) );
1633            continue;
1634        }
1635
1636        /* if we used this peer recently, give someone else a turn */
1637        minWait = 60; /* one minute */
1638        maxWait = (60 * 10); /* ten minutes */
1639        wait = atom->numFails * 15; /* add 15 secs to the wait interval for each consecutive failure*/
1640        if( wait < minWait ) wait = minWait;
1641        if( wait > maxWait ) wait = maxWait;
1642        if( ( now - atom->time ) < wait ) {
1643            tordbg( t, "RECONNECT peer %d (%s) is in its grace period of %d seconds..",
1644                    i, tr_peerIoAddrStr(&atom->addr,atom->port), wait );
1645            continue;
1646        }
1647
1648        ret[retCount++] = atom;
1649    }
1650
1651    qsort( ret, retCount, sizeof(struct peer_atom*), compareAtomByTime );
1652    *setmeSize = retCount;
1653    return ret;
1654}
1655
1656static int
1657reconnectPulse( void * vtorrent )
1658{
1659    Torrent * t = vtorrent;
1660
1661    torrentLock( t );
1662
1663    if( !t->isRunning )
1664    {
1665        removeAllPeers( t );
1666    }
1667    else
1668    {
1669        int i, nCandidates, nBad, nAdd;
1670        struct peer_atom ** candidates = getPeerCandidates( t, &nCandidates );
1671        struct tr_peer ** connections = getPeersToClose( t, &nBad );
1672        const int peerCount = tr_ptrArraySize( t->peers );
1673
1674        if( nBad || nCandidates )
1675            tordbg( t, "reconnect pulse for [%s]: %d bad connections, "
1676                       "%d connection candidates, %d atoms, max per pulse is %d",
1677                       t->tor->info.name, nBad, nCandidates,
1678                       tr_ptrArraySize(t->pool),
1679                       (int)MAX_RECONNECTIONS_PER_PULSE );
1680
1681        /* disconnect some peers.
1682           if we got transferred piece data, then they might be good peers,
1683           so reset their `numFails' weight to zero.  otherwise we connected
1684           to them fruitlessly, so mark it as another fail */
1685        for( i=0; i<nBad; ++i ) {
1686            tr_peer * peer = connections[i];
1687            struct peer_atom * atom = getExistingAtom( t, &peer->in_addr );
1688            if( peer->pieceDataActivityDate )
1689                atom->numFails = 0;
1690            else
1691                ++atom->numFails;
1692            removePeer( t, peer );
1693        }
1694
1695        /* add some new ones */
1696        nAdd = MAX_CONNECTED_PEERS_PER_TORRENT - peerCount;
1697        for( i=0; i<nAdd && i<nCandidates && i<MAX_RECONNECTIONS_PER_PULSE; ++i )
1698        {
1699            tr_peerMgr * mgr = t->manager;
1700            struct peer_atom * atom = candidates[i];
1701            tr_peerIo * io;
1702            tr_handshake * handshake;
1703
1704            tordbg( t, "Starting an OUTGOING connection with %s",
1705                       tr_peerIoAddrStr( &atom->addr, atom->port ) );
1706
1707            io = tr_peerIoNewOutgoing( mgr->handle, &atom->addr, atom->port, t->hash );
1708
1709            handshake = tr_handshakeNew( io,
1710                                         mgr->handle->encryptionMode,
1711                                         myHandshakeDoneCB,
1712                                         mgr );
1713
1714            assert( tr_peerIoGetTorrentHash( io ) != NULL );
1715
1716            tr_ptrArrayInsertSorted( t->outgoingHandshakes, handshake, handshakeCompare );
1717
1718            atom->time = time( NULL );
1719        }
1720
1721        /* cleanup */
1722        tr_free( connections );
1723        tr_free( candidates );
1724    }
1725
1726    torrentUnlock( t );
1727    return TRUE;
1728}
Note: See TracBrowser for help on using the repository browser.