phpBB Türkiye - phpBB3 Türkçe destek ve geliştirme

İçeriği atla

profesyonel phpBB3 hizmetleri

Sitemiz sadece phpBB 3.0 sürümüne destek vermektedir. Konu açmadan, ileti yazmadan önce lütfen site kuralları sayfamıza göz atınız.

[3.0.1] - phpbb3 robots.txt [0.2.0]

Re: phpbb3 robots.txt

İleti aftertomorrow 29 Ağu 2007 19:27

ilk verilen textte çok fazla karakter olduğu için kabul etmiyo google sitemap bilginize. hata veriyor.
aftertomorrow
kullanıcı
kullanıcı

İleti: 18
Kayıt: 17 Haz 2007 15:38
İsim: serkan
HTML: Çok iyi
CSS: Başlangıç
PHP: Orta
phpBB3: İyi
Sürüm: phpbb 3.0.RC5

 

Re: phpbb3 robots.txt

İleti ALEXIS 29 Ağu 2007 19:41

sitemap ile ne alakası var robots.txt nin
ALEXIS
kullanıcı
kullanıcı

Kullanıcı avatarı

İleti: 2866
Kayıt: 03 Arl 2006 08:57
Konum: İstanbul
İsim: Sevdin Filiz
HTML: Çok iyi
CSS: Çok iyi
PHP: İyi
phpBB3: Çok iyi
Sürüm: phpBB 3.0.3-RC1

Re: phpbb3 robots.txt

İleti sabri ünal 30 Ağu 2007 18:32

kabul ediyor, fakat verify etmek isetrseniz çok fazla karakter var diye kabul etmiyor... kısaltmak istenirse o da mümkün,
sabri ünal
kullanıcı
kullanıcı

İleti: 577
Kayıt: 06 Nis 2007 11:08
İsim: sabri ünal
HTML: İyi
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Başlangıç
Sürüm: phpbb3 CVS

Re: phpbb3 robots.txt

İleti viper_aykiri 15 Eyl 2007 12:29

arkadaşlar benim bi ana klasörde birde forumun bulunduğu klasörde 1 er tane robots.txt dosyası var ana dizindekini kesin görecek biliyorum ama forumun bulunduğu klasördeki robots.txt dosyasını bulurmu yoksa onun için ayrı bir şey yapmam gereklimi
viper_aykiri
kullanıcı
kullanıcı

İleti: 157
Kayıt: 13 Tem 2007 12:13
HTML: Orta
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Orta
Sürüm: 3.0.3

Re: phpbb3 robots.txt

İleti seito 23 Eyl 2007 03:27

# robots.txt for phpBB3
# @version $Id: robots.txt,v 1.0 2007/01/30 14:05:07 angelside Exp $
# "Any empty [Disallow] value, indicates that all URLs can be retrieved.
# At least one Disallow field needs to be present in a record."

User-agent: *
#Crawl-delay: 100
Disallow: /adm
Disallow: /cache
Disallow: /CVS
Disallow: /develop
Disallow: /docs
Disallow: /files
Disallow: /includes
Disallow: /install
Disallow: /language
Disallow: /store
Disallow: /styles
Disallow: /common.php
Disallow: /config.php
Disallow: /cron.php
Disallow: /download.php
Disallow: /faq.php
Disallow: /mcp.php
Disallow: /posting.php
Disallow: /report.php
Disallow: /style.php
Disallow: /ucp.php
#Disallow: /viewonline.php
#Disallow: /memberlist.php
#Disallow: /search.php

#--- Allowed bots
# for archive.org
User-agent: ia_archiver
Disallow:

# for google adsense bot
User-agent: Mediapartners-Google*
Disallow:

#User-agent: Slurp
Crawl-delay: 30
Disallow:

user-agent: googlebot
crawl-delay: 30

user-agent: msnbot
crawl-delay: 30


# Kötü niyetli bot'ları engelle
User-agent: BotRightHere
Disallow: /

User-agent: WebZip
Disallow: /

User-agent: larbin
Disallow: /

User-agent: b2w/0.1
Disallow: /

User-agent: Copernic
Disallow: /

User-agent: psbot
Disallow: /

User-agent: Python-urllib
Disallow: /

User-agent: NetMechanic
Disallow: /

User-agent: URL_Spider_Pro
Disallow: /

User-agent: CherryPicker
Disallow: /

User-agent: EmailCollector
Disallow: /

User-agent: EmailSiphon
Disallow: /

User-agent: WebBandit
Disallow: /

User-agent: EmailWolf
Disallow: /

User-agent: ExtractorPro
Disallow: /

User-agent: CopyRightCheck
Disallow: /

User-agent: Crescent
Disallow: /

User-agent: SiteSnagger
Disallow: /

User-agent: ProWebWalker
Disallow: /

User-agent: CheeseBot
Disallow: /

User-agent: LNSpiderguy
Disallow: /

User-agent: Alexibot
Disallow: /

User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: MIIxpc
Disallow: /

User-agent: Telesoft
Disallow: /

User-agent: Website Quester
Disallow: /

User-agent: moget/2.1
Disallow: /

User-agent: WebZip/4.0
Disallow: /

User-agent: WebStripper
Disallow: /

User-agent: WebSauger
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: NetAnts
Disallow: /

User-agent: Mister PiX
Disallow: /

User-agent: WebAuto
Disallow: /

User-agent: TheNomad
Disallow: /

User-agent: WWW-Collector-E
Disallow: /

User-agent: RMA
Disallow: /

User-agent: libWeb/clsHTTP
Disallow: /

User-agent: asterias
Disallow: /

User-agent: httplib
Disallow: /

User-agent: turingos
Disallow: /

User-agent: spanner
Disallow: /

User-agent: InfoNaviRobot
Disallow: /

User-agent: Harvest/1.5
Disallow: /

User-agent: Bullseye/1.0
Disallow: /

User-agent: Mozilla/4.0 (compatible; BullsEye; Windows 95)
Disallow: /

User-agent: Crescent Internet ToolPak HTTP OLE Control v.1.0
Disallow: /

User-agent: CherryPickerSE/1.0
Disallow: /

User-agent: CherryPickerElite/1.0
Disallow: /

User-agent: WebBandit/3.50
Disallow: /

User-agent: NICErsPRO
Disallow: /

User-agent: Microsoft URL Control - 5.01.4511
Disallow: /

User-agent: DittoSpyder
Disallow: /

User-agent: Foobot
Disallow: /

User-agent: SpankBot
Disallow: /

User-agent: BotALot
Disallow: /

User-agent: lwp-trivial/1.34
Disallow: /

User-agent: lwp-trivial
Disallow: /

User-agent: BunnySlippers
Disallow: /

User-agent: Microsoft URL Control - 6.00.8169
Disallow: /

User-agent: URLy Warning
Disallow: /

User-agent: Wget/1.6
Disallow: /

User-agent: Wget/1.5.3
Disallow: /

User-agent: Wget
Disallow: /

User-agent: LinkWalker
Disallow: /

User-agent: cosmos
Disallow: /

User-agent: moget
Disallow: /

User-agent: hloader
Disallow: /

User-agent: humanlinks
Disallow: /

User-agent: LinkextractorPro
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: Mata Hari
Disallow: /

User-agent: LexiBot
Disallow: /

User-agent: Web Image Collector
Disallow: /

User-agent: The Intraformant
Disallow: /

User-agent: True_Robot/1.0
Disallow: /

User-agent: True_Robot
Disallow: /

User-agent: BlowFish/1.0
Disallow: /

User-agent: JennyBot
Disallow: /

User-agent: MIIxpc/4.2
Disallow: /

User-agent: BuiltBotTough
Disallow: /

User-agent: ProPowerBot/2.14
Disallow: /

User-agent: BackDoorBot/1.0
Disallow: /

User-agent: toCrawl/UrlDispatcher
Disallow: /

User-agent: suzuran
Disallow: /

User-agent: TightTwatBot
Disallow: /

User-agent: VCI WebViewer VCI WebViewer Win32
Disallow: /

User-agent: VCI
Disallow: /

User-agent: Szukacz/1.4
Disallow: /

User-agent: Openfind data gatherer
Disallow: /

User-agent: Openfind
Disallow: /

User-agent: Xenu's Link Sleuth 1.1c
Disallow: /

User-agent: Xenu's
Disallow: /

User-agent: Zeus
Disallow: /

User-agent: RepoMonkey Bait & Tackle/v1.01
Disallow: /

User-agent: RepoMonkey
Disallow: /

User-agent: Microsoft URL Control
Disallow: /

User-agent: Openbot
Disallow: /

User-agent: URL Control
Disallow: /

User-agent: Zeus Link Scout
Disallow: /

User-agent: Zeus 32297 Webster Pro V2.9 Win32
Disallow: /

User-agent: Webster Pro
Disallow: /

User-agent: EroCrawler
Disallow: /

User-agent: LinkScan/8.1a Unix
Disallow: /

User-agent: Keyword Density/0.9
Disallow: /

User-agent: Kenjin Spider
Disallow: /

User-agent: Iron33/1.0.2
Disallow: /

User-agent: Bookmark search tool
Disallow: /

User-agent: GetRight/4.2
Disallow: /

User-agent: FairAd Client
Disallow: /

User-agent: Gaisbot
Disallow: /

User-agent: Aqua_Products
Disallow: /

User-agent: Radiation Retriever 1.1
Disallow: /

User-agent: Flaming AttackBot
Disallow: /


bire bir bu dosyayı robots.txt dosyası olarak confıg.phb dosyasının olduğu yere attım
daha oncesinde zaten yahoo ve google robotları geliyordu onlar dışında bir değişiklik olmadı
yanlış bir şey mi yaptım acaba
seito
kullanıcı
kullanıcı

İleti: 77
Kayıt: 20 Eyl 2007 23:25
HTML: Başlangıç
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Başlangıç
Sürüm: Simuzer Premod 3.0.2

Re: phpbb3 robots.txt

İleti ALEXIS 23 Eyl 2007 03:34

Şimdi aklıma gelen şu ufak testi yapabilirsin:

[ BUL ]

Kod: Tümünü seç
# for archive.org
User-agent: ia_archiver
Disallow:


[ DEĞİŞTİR ]

Kod: Tümünü seç
# for archive.org
User-agent: ia_archiver
Disallow: /


Değişiklik yapmadan ve yaptıktan sonra şöyle bir bağlantı ile kontrol et:

http://web.archive.org/web/*/http://www ... urkiye.net

Değişiklik yaptıktan sınra, archive.org un arşivleme robots.txt ile engellendi diye bir hata verecektir, bu da dosyanın düzgün çalıştığını gösterecek.
ALEXIS
kullanıcı
kullanıcı

Kullanıcı avatarı

İleti: 2866
Kayıt: 03 Arl 2006 08:57
Konum: İstanbul
İsim: Sevdin Filiz
HTML: Çok iyi
CSS: Çok iyi
PHP: İyi
phpBB3: Çok iyi
Sürüm: phpBB 3.0.3-RC1

Re: phpbb3 robots.txt

İleti ALEXIS 23 Eyl 2007 03:37

aftertomorrow yazdı:ilk verilen textte çok fazla karakter olduğu için kabul etmiyo google sitemap bilginize. hata veriyor.


Kod: Tümünü seç
# Kötü niyetli bot'ları engelle


Bu olayı .htaccess ile halledebiliriz, robots.txt de olması sorun yarabilir ki, yaratmış ?
ALEXIS
kullanıcı
kullanıcı

Kullanıcı avatarı

İleti: 2866
Kayıt: 03 Arl 2006 08:57
Konum: İstanbul
İsim: Sevdin Filiz
HTML: Çok iyi
CSS: Çok iyi
PHP: İyi
phpBB3: Çok iyi
Sürüm: phpBB 3.0.3-RC1

Re: phpbb3 robots.txt

İleti sabri ünal 23 Eyl 2007 22:11

yaratmış farkettim, o sebeple sadece baştaki kısmı kullanıp denemeye aldım, kötü niyetli botlar kısmını burdan çıkartıyorum... ayrıca kötü niyetli botların yönetimini bot yönetimine ilave edecek bir moda ihtiyaç var :)

bu dosyanın işlevi bu olmamalı. zaten bu dosyayı okuyan kötü niyetli bot olmaz ki, olsa da uymaz ki :)
sabri ünal
kullanıcı
kullanıcı

İleti: 577
Kayıt: 06 Nis 2007 11:08
İsim: sabri ünal
HTML: İyi
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Başlangıç
Sürüm: phpbb3 CVS

Re: phpbb3 robots.txt

İleti seito 23 Eyl 2007 22:18

0 pages found for http://www.risalei-nur.biz


Sorry, no matches.

Keep in mind...

*

There is no text search. Enter a web address in the box above.
değişiklik yapmadan önce
0 pages found for http://www.risalei-nur.biz


Sorry, no matches.

Keep in mind...

*

There is no text search. Enter a web address in the box above.
*

Click here to search for all pages on risalei-nur.biz/
*

See the FAQs for more info and help, or contact us.
yaptık tan sonrada aynısını verdi
seito
kullanıcı
kullanıcı

İleti: 77
Kayıt: 20 Eyl 2007 23:25
HTML: Başlangıç
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Başlangıç
Sürüm: Simuzer Premod 3.0.2

Re: phpbb3 robots.txt

İleti saka 13 Kas 2007 11:04

İlk mesajdaki dosyayı ekledim.
Google.com/webmaster adresinden robots.txt kontrol ettiğimde şu mesajı alıyorum

robots.txt URL http://www.xxx/robots.txt
Son indirilme 12 Kasım 2007 Pazartesi 15:32:58 PST
Durum 200 (Başarılı) [?]
Ana sayfa erişimi Googlebot şu konumlarda engellenmiştir: http://wxxx/

Bu bir problem gibi geldi? Doğrumu?
En son saka tarafından, 29 May 2008 20:56 tarihinde değiştirildi, toplamda 1 değişiklik yapıldı.
saka
kullanıcı
kullanıcı

İleti: 167
Kayıt: 29 Tem 2007 15:36
HTML: Orta
CSS: Başlangıç
PHP: Başlangıç
phpBB3: Başlangıç
Sürüm: phpbb3

ÖncekiSonraki

Eklenti Tanıtımları, Duyurular, Güncellemeler


Kimler çevrimiçi

Bu forumu görüntüleyenler: adsiz ve 0 misafir