Spambots filteren dmv. reguliere expressie

In de blogpost van vorige maand Uitsluiten van Spambots in Google analytics werd er al uitgebreid gerefereerd naar de problemen die spambots de laatste tijd veroorzaken.

Helaas houden steeds meer bedrijven zich bezig met deze vervelende manier van “online” marketing. De lijst onderaan deze pagina bevat reeds meer dan 100 spambots en deze lijst groeit met de week. Het is wachten tot Google hier écht iets aan gaat doen, het is tenslotte Google Analytics als product dat niet mee bruikbaar is. Tot die tijd is er maar één mogelijkheid, en dat is deze spambots uitsluiten.

In de vorige blog gebeurde dit nog per stuk. Maar met meer dan 100 spambots wordt filteren een lastigere zaak. Terecht dat Jochem Koole vroeg of het mogelijk was om meerdere spambots uit te sluiten met één filter.

Regular Expressions biedt hierbij dé uitkomst.

Regular Expressions, of een reguliere expressie is een manier om patronen te beschrijven waarmee een computer tekst kan herkennen. Je kan hiermee gemakkelijk meerdere spambots tegelijk detecteren én uitsluiten.

Dit werkt als volgt: stel je hebt last van twee (bekende) spambots: semalt.semalt.com en site6.free-share-buttons.com. De expressie die beide spambots voorgoed uitsluit ziet er als volgt uit:

semalt\.com|free-share-buttons\.com

Komt daar een derde spambot bij (www3.free-social-buttons.com) dan ziet de expressie er als volgt uit:

semalt\.com|free-share-buttons\.com|free-social-buttons\.com

Een korte uitleg:

Binnen de functies van reguliere expressies heeft de punt ( . ) een functie: een willekeurig karakter; door er een backslash ( \ ) voor te zetten wordt de punt weer een punt in plaats van een functie.

De verticale balk ( | ) scheidt de alternatieven en kan gezien worden als een OR functie of een OF functie. In het hierboven genoemde voorbeeld zegt de expressie zoveel als: OF semalt.com OF free-share-buttons.com OF free-social-buttons.com.

Kortom, door op deze manier meerdere URL’s aan elkaar te knopen kan je meerdere spambots tegelijkertijd uitschakelen. Let er daarbij op dat alleen de rootdomain wordt meegenomen in de expressie. Daarmee worden ook eventuele subdomeinen uitgesloten.

Spambots filteren in bulk

Bij het filteren van spambots in bulk dien je met een aantal zaken rekening te houden:

• Testomgeving – zorg er voor dat de filters eerst test in een test view. Heb je deze nog niet? Maak dan onder View > Create New een nieuwe View aan. Deze kan je voor toekomstige tests ook gebruiken.
• Spaties – Regular expressions hebben een hekel aan spaties. Zorg er voor dat deze niet voorkomen in de expressie.
• De Verticale Bar ( | ) – Hoewel bijzonder handig om dit soort zaken mee uit te voeren is het ook een killer van je statistieken. Zorg er voor dat deze karakter nooit aan het einde staat van je reguliere expressie. Eigen ervaring leert dat dit de Google Analytics View totaal blokkeert. Vandaar ook dat het eerste advies is om alles eerst in een testomgeving te ontdekken.
• 255 – een expressie in Google Analytics mag niet langer zijn dan 255 karakters.

Vervolgens kan je aan de slag:

Stap 1:

In Google Analytics open je de Beheerder (Admin) pagina van je account

Stap 2:

Onder Account (links) Open All Filters

Stap 3:

Klik op Nieuwe Filter

Stap 4:

Vul de Filter in:

• 1. Filternaam: Spambots Set 1
• 2. Filtertype: Aangepast (Custom)
• 3. Filterveld: Campagnebron (Campaign Source)
• 4. Filter Patern: semalt\.com|free-share-buttons\.com|free-social-buttons\.com
• 5. Filter toepassen op weergaven: altijd! eerst de test view
• 6. >>Toevoegen
• 7. Save

En dan?

Als je, na een paar dagen, zeker genoeg bent dat er in je test view geen rare dingen gebeuren kan je de filter overzetten naar de view die je normaliter gebruikt. Je zal vanaf dat punt geen last meer hebben van de uitgesloten spambots.

Reguliere Expressies

Hieronder vind je 8 reguliere expressies van minder dan 255 tekens die wij de afgelopen tijd hebben toegevoegd.

!Let op: test eerst de reguliere expressies voor je ze daadwerkelijk implementeert, wij zijn niet verantwoordelijk voor eventuele verloren data.

Spambot Set 1

4webmasters\.org|7makemoneyonline\.com|adcash\.com|adviceforum\.info|amanda-porn\.ga|baixar-musicas-gratis\.com|best-seo-offer\.com|best-seo-solution\.com|bestwebsitesawards\.com|blackhatworth\.com|buttons-for-website\.com|buttons-for-your-website\.com

Spambot Set 2

buy-cheap-online\.info|buy-forum\.ru|cenoval\.ru|cityadspix\.com|darodar\.com|depositfiles-porn\.ga|descargar-musica-gratis\.net|domination\.ml|econom\.co|fbdownloader\.com|forum69\.info|free-share-buttons\.com|generalporn\.org

Spambot Set 3

get-free-traffic-now\.com|gobongo\.info|googlsucks\.com|googlsucks\.com|guardlink\.org|hulfingtonpost\.com|humanorightswatch\.org|ilovevitaly\.co|ilovevitaly\.com|ilovevitaly\.ru|inboxdollars\.com|iskalko\.ru|k9safesearch\.com|kambasoft\.com|lomb\.co

Spambot Set 4

lombia\.com|lumb\.co|luxup\.ru|luxup\.ru|meendo-free-traffic\.ga|mpftpupload\.com|o-o-6-o-o\.com|o-o-8-o-o\.com|paparazzistudios\.com\.au|pornhub-forum\.ga|pornhub-forum\.uni\.me|powitania\.pl|priceg\.com|prlog\.ru|ranksonic\.info|rapidgator-porn\.ga

Spambot Set 5

aliexpress\.com|savetubevideo\.com|savetubevideo\.info|see-your-website-here\.com|semalt\.com|sharebutton\.net|simple-share-buttons\.com|smailik\.org|social-buttons\.com|srecorder\.com|superiends\.org|tasteidea\.com|theguardlan\.com

Spambot Set 6

torontoplumbinggroup\.com|torture\.ml|torture\.ml|website-errors-scanner\.com|event-tracking\.com|youporn-forum\.ga|youporn-forum\.uni\.me|anticrawler\.org|cenokos\.ru|edakgfvwql\.ru|gigapeta\.com|iloveitaly\.ro|myftpupload\.com|o-o-6-o-o\.ru

Spambot Set 7

prodvigator\.ua|resellerclub\.com|resellerclub\.com|screentoolkit\.com|seoexperimenty\.ru|slftsdybbg\.ru|socialseet\.ru|vodkoved\.ru|websocial\.me|ykecwqlixx\.ru|76brighton\.co\.uk|acads\.net|cyprusbuyproperties\.com|kabbalah-red-bracelets\.com

Spambot Set 8

masterseek\.com|bycontext\.com|ranksonic\.org|sexyteens\.hol\.es|sharebutton\.org|54\.186\.60\.77|anal-acrobats\.hol\.es|sanjosestartups.com|lombia\.co|o-o-8-o-o\.ru|makemoneyonline\.com|websites-reviews\.com|непереводимая\.рф|trafficmonetize\.org

Spambot Set 9

100dollars-seo\.com|howtostopreferralspam\.eu|semaltmedia\.com|erot\.co|videos-for-your-business\.com|webmonetizer\.net|floating-share-buttons\.com|success-seo\.com|e-buyeasy\.com|traffic2money\.com|chinese-amezon\.com

Spambot Set 10

get-free-social-traffic\.com|free-floating-buttons\.com|sexyali\.com|hongfanji\.com|how-to-earn-quick-money\.com|video--production\.com|justprofit\.xyz|best-seo-software\.xyz|seo-platform\.com|alibestsale\.com|copyrightclaims\.org

Spambot Set 11

snip\.to|qualitymarketzone\.com|rankings-analytics\.com|ranksonic\.net|get-your-social-buttons\.info|traffic2cash\.org|adf\.ly|santasgift\.ml|black-friday\.ga|hosting-tracker\.com|lsex\.xyz|black-friday\.ga|rusexy\.xyz

Spambot Set 12

traffic2cash\.xyz|top1-seo-service\.com|website-stealer.nufaq\.com|topseoservices\.co|trafficgenius\.xyz|uptimechecker.com|build-audience\.for-your\.website|new-look\.for-your\.website|smarter-content\.for-your\.website|w3javascript\.com

Spambot Set 13

build-a-better-business\.2your\.site|website-analyzer\.info|boost-my-site\.com|share-buttons\.xyz|snip\.tw|с\.новым\.годом\.рф|web-revenue\.xyz|net-profits\.xyz|rank-checker\.online|social-buttons\.xyz|adtiger\.tk

Spambot Set 14

wordpresscore\.com|uptime\.com|free-video-tool\.com|getrichquick\.ml|makeprogress\.ga|rapidlinkr\.com|fuck-paid-share-buttons\.xyz|getrichquickly\.info|traffic2cash\.xyz|how\.to\.travel\.and\.make\.money\.with\.maps\.ilikevitaly\.com

Volledige Reguliere Expressie:

4webmasters\.org|7makemoneyonline\.com|adcash\.com|adviceforum\.info|amanda-porn\.ga|baixar-musicas-gratis\.com|best-seo-offer\.com|best-seo-solution\.com|bestwebsitesawards\.com|blackhatworth\.com|buttons-for-website\.com|buttons-for-your-website\.com|buy-cheap-online\.info|buy-forum\.ru|cenoval\.ru|cityadspix\.com|darodar\.com|depositfiles-porn\.ga|descargar-musica-gratis\.net|domination\.ml|econom\.co|fbdownloader\.com|forum69\.info|free-share-buttons\.com|generalporn\.org|get-free-traffic-now\.com|gobongo\.info|googlsucks\.com|googlsucks\.com|guardlink\.org|hulfingtonpost\.com|humanorightswatch\.org|ilovevitaly\.co|ilovevitaly\.com|ilovevitaly\.ru|inboxdollars\.com|iskalko\.ru|k9safesearch\.com|kambasoft\.com|lomb\.co|lombia\.com|lumb\.co|luxup\.ru|luxup\.ru|meendo-free-traffic\.ga|mpftpupload\.com|o-o-6-o-o\.com|o-o-8-o-o\.com|paparazzistudios\.com\.au|pornhub-forum\.ga|pornhub-forum\.uni\.me|powitania\.pl|priceg\.com|prlog\.ru|ranksonic\.info|rapidgator-porn\.ga|aliexpress\.com|savetubevideo\.com|savetubevideo\.info|see-your-website-here\.com|semalt\.com|sharebutton\.net|simple-share-buttons\.com|smailik\.org|social-buttons\.com|srecorder\.com|superiends\.org|tasteidea\.com|theguardlan\.com|torontoplumbinggroup\.com|torture\.ml|torture\.ml|website-errors-scanner\.com|event-tracking\.com|youporn-forum\.ga|youporn-forum\.uni\.me|anticrawler\.org|cenokos\.ru|edakgfvwql\.ru|gigapeta\.com|iloveitaly\.ro|myftpupload\.com|o-o-6-o-o\.ru|prodvigator\.ua|resellerclub\.com|resellerclub\.com|screentoolkit\.com|seoexperimenty\.ru|slftsdybbg\.ru|socialseet\.ru|vodkoved\.ru|websocial\.me|ykecwqlixx\.ru|76brighton\.co\.uk|acads\.net|cyprusbuyproperties\.com|kabbalah-red-bracelets\.com|masterseek\.com|bycontext\.com|ranksonic\.org|sexyteens\.hol\.es|sharebutton\.org|54\.186\.60\.77|anal-acrobats\.hol\.es|sanjosestartups.com|lombia\.co|o-o-8-o-o\.ru|makemoneyonline\.com|websites-reviews\.com|непереводимая\.рф|trafficmonetize\.org|100dollars-seo\.com|howtostopreferralspam\.eu|semaltmedia\.com|erot\.co|videos-for-your-business\.com|webmonetizer\.net|floating-share-buttons\.com|success-seo\.com|e-buyeasy\.com|traffic2money\.com|chinese-amezon\.com|get-free-social-traffic\.com|free-floating-buttons\.com|sexyali\.com|hongfanji\.com|how-to-earn-quick-money\.com|video--production\.com|justprofit.xyz|best-seo-software.xyz|seo-platform.com|alibestsale\.com|copyrightclaims\.org|snip\.to|qualitymarketzone\.com|rankings-analytics\.com|ranksonic.net|get-your-social-buttons\.info|traffic2cash\.org|snip\.to|qualitymarketzone\.com|rankings-analytics\.com|ranksonic\.net|get-your-social-buttons\.info|traffic2cash\.org|adf\.ly|santasgift\.ml|black-friday\.ga|hosting-tracker\.com|lsex\.xyz|black-friday\.ga|rusexy\.xyz|traffic2cash\.xyz|top1-seo-service\.com|website-stealer.nufaq\.com|topseoservices\.co|trafficgenius\.xyz|uptimechecker.com|build-audience\.for-your\.website|new-look\.for-your\.website|smarter-content\.for-your\.website|w3javascript\.com|build-a-better-business\.2your\.site|website-analyzer\.info|boost-my-site\.com|share-buttons\.xyz|snip\.tw|с\.новым\.годом\.рф|web-revenue\.xyz|net-profits\.xyz

Lijst met Spambots

1. 4webmasters.org
2. 7makemoneyonline.com
3. adcash.com
4. adviceforum.info
5. amanda-porn.ga
6. baixar-musicas-gratis.com
7. best-seo-offer.com
8. best-seo-solution.com
9. bestwebsitesawards.com
10. blackhatworth.com
11. buttons-for-website.com
12. buttons-for-your-website.com
13. buy-cheap-online.info
14. buy-forum.ru
15. cenoval.ru
16. cityadspix.com
17. darodar.com
18. depositfiles-porn.ga
19. descargar-musica-gratis.net
20. domination.ml
21. econom.co
22. fbdownloader.com
23. forum69.info
24. free-share-buttons.com
25. generalporn.org
26. get-free-traffic-now.com
27. gobongo.info
28. googlsucks.com
29. guardlink.org
30. hulfingtonpost.com
31. humanorightswatch.org
32. ilovevitaly.co
33. ilovevitaly.com
34. ilovevitaly.ru
35. inboxdollars.com
36. iskalko.ru
37. k9safesearch.com
38. kambasoft.com
39. lomb.co
40. lombia.co
41. lombia.com
42. lumb.co
43. luxup.ru
44. meendo-free-traffic.ga
45. mpftpupload.com
46. o-o-6-o-o.com
47. o-o-8-o-o.com
48. paparazzistudios.com.au
49. pornhub-forum.ga
50. pornhub-forum.uni.me
51. powitania.pl
52. priceg.com
53. prlog.ru
54. ranksonic.info
55. rapidgator-porn.ga
56. aliexpress.com
57. savetubevideo.com
58. savetubevideo.info
59. see-your-website-here.com
60. semalt.com
61. sharebutton.net
62. simple-share-buttons.com
63. smailik.org
64. social-buttons.com
65. srecorder.com
66. superiends.org
67. tasteidea.com
68. theguardlan.com
69. torontoplumbinggroup.com
70. torture.ml
71. website-errors-scanner.com
72. event-tracking.com
73. youporn-forum.ga
74. youporn-forum.uni.me
75. anticrawler.org
76. cenokos.ru
77. edakgfvwql.ru
78. gigapeta.com
79. iloveitaly.ro
80. myftpupload.com
81. o-o-6-o-o.ru
82. o-o-8-o-o.ru
83. prodvigator.ua
84. resellerclub.com
85. screentoolkit.com
86. seoexperimenty.ru
87. slftsdybbg.ru
88. socialseet.ru
89. vodkoved.ru
90. websocial.me
91. ykecwqlixx.ru
92. 76brighton.co.uk
93. acads.net
94. cyprusbuyproperties.com
95. kabbalah-red-bracelets.com
96. makemoneyonline.com
97. masterseek.com
98. bycontext.com
99. ranksonic.org
100. sexyteens.hol.es
101. sharebutton.org
102. 54.186.60.77
103. anal-acrobats.hol.es
104. sanjosestartups.com
105. websites-reviews.com
106. непереводимая.рф
107. trafficmonetize.org
108. 100dollars-seo.com
109. howtostopreferralspam.eu
110. semaltmedia.com
111. erot.co
112. videos-for-your-business.com
113. webmonetizer.net
114. floating-share-buttons.com
115. success-seo.com
116. e-buyeasy.com
117. traffic2money.com
118. chinese-amezon.com
119. get-free-social-traffic.com
120. free-floating-buttons.com
121. sexyali.com
122. hongfanji.com
123. how-to-earn-quick-money.com
124. video–production.com
125. justprofit.xyz
126. best-seo-software.xyz
127. seo-platform.com
128. alibestsale.com
129. copyrightclaims.org
130. snip.to
131. qualitymarketzone.com
132. rankings-analytics.com
133. ranksonic.net
134. get-your-social-buttons.info
135. traffic2cash.org
136. adf.ly
137. santasgift.ml
138. black-friday.ga
139. hosting-tracker.com
140. rusexy.xyz
141. lsex.xyz
142. black-friday.ga
143. rusexy.xyz
144. traffic2cash.xyz
145. top1-seo-service.com
146. website-stealer.nufaq.com
147. topseoservices.co
148. trafficgenius.xyz
149. uptimechecker.com
150. build-audience.for-your.website
151. new-look.for-your.website
152. smarter-content.for-your.website
153. w3javascript.com
154. build-a-better-business.2your.site
155. website-analyzer.info
156. boost-my-site.com
157. share-buttons.xyz
158. snip.tw
159. с.новым.годом.рф
160. web-revenue.xyz
161. net-profits.xyz
162. rank-checker.online
163. social-buttons.xyz
164. adtiger.tk
165. wordpresscore.com
166. uptime.com
167. free-video-tool.com
168. getrichquick.ml
169. makeprogress.ga
170. rapidlinkr.com
171. fuck-paid-share-buttons.xyz
172. getrichquickly.info
173. traffic2cash.xyz
174. how.to.travel.and.make.money.with.maps.ilikevitaly.com