Den elektroniske terroristen

Den elektroniske terroristen

juni 11, 2008, 4:48 e m
Filed under: Uncategorized

För lite mindre än två månader sedan uppmanade Anna Troberg bloggare och andra nätanvändare att lägga till en lista med sökord till alla mail de skickade, för att ge FRA lite extrajobb. Det är ett bra initiativ, men det täcker bara in statisk text – något annat som underrättelsetjänster väldigt ofta är intresserade av är rena kopplingar. Vem länkar till vem, vem surfar på vilka webbsidor, vem googlar efter vilka sökord?

Jag gav mig ut på internätet och samlade ihop lite länkar relaterade till organisationer som är terroristklassade av USA, EU eller Storbritannien (och med ”relaterade till” menar jag att de nämns på Wikipedia-sidan om organisationen – jag hävdar inte att alla adresserna nedan leder till ondskefulla terrorister) och hackade sedan ihop ett Python-script som laddar ner webbsidor ur listan på måfå och följer några länkar, och också gör Google-sökningar efter ord ur en ordlista (t.ex. den som finns på Annas blogg). Scriptet har bara testats på GNU/Linux, men förhoppningsvis ska det inte vara alltför svårt att få det att funka på andra system. Det är skrivet för att vara igång konstant (det tar rätt långa pauser självmant), så släng in det i din autostart-mapp.

Scriptet (kopiera till en textfil med namnet autoterrorism.py):

#!/usr/bin/python
#
# autoterrorism.py - terror at home!
#
# (C) opyright is for losers
#
############################################################

import sys
import pycurl
import time
import random
import sgmllib
import urllib
import urlparse

# Get program parameters (a file with URLs and optionally a file with
# search terms, both linebreak-delimited)
try:
    urls = open(sys.argv[1]).readlines()
    urls = [l.strip() for l in urls]
    if len(sys.argv) == 3:
        words = open(sys.argv[2]).readlines()
        words = [l.strip() for l in words]
        words = ['http://www.google.com/search?q=' + urllib.quote(l) for l in words]
except:
    print "Usage: %s URLFILE [WORDFILE]" % sys.argv[0]
    raise SystemExit

# HTML link extracter
class LinkExtracter(sgmllib.SGMLParser):
    def reset(self):
        sgmllib.SGMLParser.reset(self)
        self.urls = []

    def start_a(self, attrs):
        href = [v for k, v in attrs if k=='href']
        if href:
            self.urls.extend(href)

    def start_link(self, attrs):
        href = [v for k, v in attrs if k=='href']
        if href:
            self.urls.extend(href)

# Our cURL object that does the downloading
c = pycurl.Curl()
c.setopt(pycurl.TIMEOUT, 30)
c.setopt(pycurl.FOLLOWLOCATION, 1)
c.setopt(pycurl.MAXREDIRS, 5)

# Loop forever
while 1:

    # Even terrorists have to sleep
    time.sleep(random.randint(600, 3600))

    # Surf session
    while 1:
        time.sleep(random.randint(30, 60))
        prefix = '*'
        if random.randint(0, 10) <= 3 and len(sys.argv) >= 3:
            current_urls = words
        else:
            current_urls = urls

        while 1:
            try:
                url = current_urls[random.randint(0, len(current_urls) - 1)]
                print '%s: %s %s...' % (time.ctime(), prefix, url)
                c.setopt(pycurl.URL, url)
                x = LinkExtracter()
                c.setopt(pycurl.WRITEFUNCTION, x.feed)
                c.perform()
                x.close()
                current_urls = [urlparse.urljoin(url, l) for l in x.urls]
                prefix += '*'
            except:
                print 'Something went wrong.'
            time.sleep(random.randint(7, 60))
            if random.randint(0, 10) < 3:
                break

        # Go back to sleep
        if random.randint(0, 10) < 3:
            break

Länklistan (kopiera till en textfil med namnet urls):
http://www.palestine-info.info/
http://www.filistinetkinlik.com/
http://www.32csm.info/
http://www.fateh.net/
http://kilusan.net/
http://www.philippinerevolution.net/
http://www.harkatulmujahideen.org/
http://www.moqavemat.ir/?lang=en
http://www.ghaliboun.net/
http://english.wa3ad.org/
http://www.manartv.com.lb/NewsSite/News.aspx?language=en
http://www.al-nour.net/
http://www.qudsway.com/
http://www.hpg-online.net/
http://www.mojahedin.org/pages/index.htm
http://www.iran-e-azad.org/english/ncri.html
http://www.pflp.ps/
http://www.palestinesons.com/
http://www.rsf.ie/
http://www.colombialibre.org/
http://www.ikhwanweb.com/
http://www.animalliberationfront.com/
http://www.aryan-nations.org/
http://www.aryannations.org/
http://animalliberationfront.com/ALFront/ELF/elf.htm
http://www.jdl.org/
http://www.jdlcanada.org/
http://www.ncr-iran.org/
http://www.sikhfederation.com/index.htm
http://www.geocities.com/balochiteens/

Ordlistan, snodd från Anna Troberg (kopiera till en textfil med namnet words):

terrordåd
bomb
övervakning
Fredrik Reinfeldt
flint
Kalashnikov
semtex
Molotov
Bodström
uzi
Beatrice Ask
Ifpi
självmordsbombare
Rosetta
Not-So-Jolly Roger
nervgas
kärnkraftverk
flygplats
mjältbrand
surströmming
AK-47
dynamit
allah
al-quaida
bin ladin
flygplanskapning
bombhot
förstörelse
ödeläggelse
revolution
väpnad
insha' Allah
Allah-o-Akbar
Mujaheddin
jihad
uppror
k-pist
kulspruta

Såhär kan det se ut när scriptet körs (versionen ovan laddar inte sidor lika ofta, jag skruvade upp tempot vid testkörningen). Stjärnorna visar vilken länknivå man befinner sig på (en stjärna är en länk hämtad direkt från listan, två stjärnor är en länk som tagits från sidan på raden ovan osv). Om det står Something went wrong ibland så är det inget att bry sig om, det betyder oftast bara att scriptet har försökt ladda en sida som det inte kan läsa (t.ex. en PDF-fil eller något liknande).

[onsdag@secretcomputer autoterrorism]$ ./autoterrorism.py urls words
Wed Jun 11 16:57:01 2008: * http://www.geocities.com/balochiteens/...
Wed Jun 11 16:57:02 2008: ** http://www.geocities.com/balochiteens/iran7.htm...
Wed Jun 11 16:57:02 2008: * http://www.google.com/search?q=Bodstr%F6m...
Wed Jun 11 16:57:03 2008: ** http://books.google.com/books?q=Bodstr%C3%B6m&um=1&ie=UTF-8&sa=N&tab=wp...
Wed Jun 11 16:57:03 2008: *** http://www.google.com/aclk?sa=l&ai=BKBMpvudPSIy8BYOWiAH3hfywD8-HxkCP9eyUBZGdrYwesK4VEAEYASC4VDgBUJjO-K78_____wFg8a38haQfoAHngYT-A8gBAYACAakCJR376gQyhj7IAof5wAHZA6QgbGYNlBTe&num=1&sig=AGiWqtxKhIUJ1XeiJkZKJeC5I9fLv9jrAA&q=http://www.adlibris.com/...
Wed Jun 11 16:57:04 2008: **** http://www.adlibris.com/fi/default.aspx?logout=1...
Wed Jun 11 16:57:06 2008: * http://www.jdl.org/...
Wed Jun 11 16:57:17 2008: ** http://www.jdl.org/geeklog//article.php?story=20080525220822959...
Wed Jun 11 16:57:19 2008: *** http://www.jdl.org/geeklog//comment.php?sid=20080525220822959&pid=410&title=Help%21&type=article...
Wed Jun 11 16:57:20 2008: * http://www.mojahedin.org/pages/index.htm...
Wed Jun 11 16:57:21 2008: ** http://www.mojahedin.org/pages/newsdetails.aspx?newsid=29916...
Wed Jun 11 16:57:21 2008: *** http://www.mojahedin.org/favico.ico...
Something went wrong.
Wed Jun 11 16:57:22 2008: * http://www.google.com/search?q=allah...
Wed Jun 11 16:57:22 2008: ** http://www.godallah.com/...
Wed Jun 11 16:57:27 2008: * http://www.philippinerevolution.net/...
Wed Jun 11 16:57:30 2008: ** http://www.philippinerevolution.net/cgi-bin/ab/titles.pl...
Wed Jun 11 16:57:33 2008: *** http://www.philippinerevolution.net/cgi-bin/ab/cgi-bin/ab/text.pl?issue=20080107;lang=eng;article=12...
Something went wrong.
Something went wrong.
Something went wrong.
Something went wrong.
Wed Jun 11 16:57:34 2008: * http://www.ikhwanweb.com/...

Både ordlistan och länklistan är förstås löjligt små, så fyll gärna på med andra adresser som FRA kan tänkas vara intresserade av. Om någon har ändringar eller förbättringar till scriptet så tas de också tacksamt emot (tester och patchar för Windows och MacOSX är extra välkomna).

Om Ingvar Åkesson på FRA läste det här så skulle han säkert säga att deras filter är alldeles för smarta för att bli lurade av såna här simpla trick, och det kanske är sant – i så fall ser jag det här som en symbolisk handling.

Andra: Opassande, Falkvinge, ProjO, IDG, Swartz, Bloggen Bent, Aftonbladet, Blogge, Motpol, Hultin, Laakso, Svensson, Expressen

Intressant?

28 kommentarer

28 kommentarer so far
Lämna en kommentar

RSS feed for comments on this post. TrackBack URI