Cara Meta Tag dan Robots.txt Untuk Meningkatkan Pagerank dan SEO

Banyak cara untuk mengoptimalkan sebuah blog, salah satunya trik berikut ini yang akan mendapatkan dampak besar pada lalu lintas blog Wordpress Anda dan meningkatkan peringkat di situs mesin pencari.

Disini anda cukup membuat robots.txt yang nanti akan disimpan di web root host anda serta menambahkan meta robots ke file header.php. Trik ini hanya untuk blog Self-Host atau WordPress.org, dan silahkan copy paste script robots.txt dibawah ini atau silakan anda download contoh filenya kemudian upload ke web root.

User-agent: *
 Disallow: /cgi-bin
 Disallow: /wp-admin
 Disallow: /wp-includes
 Disallow: /wp-content
 Disallow: /tag
 Disallow: /author
 Disallow: /wget/
 Disallow: /httpd/
 Disallow: /i/
 Disallow: /f/
 Disallow: /t/
 Disallow: /c/
 Disallow: /j/

User-agent: Mediapartners-Google
 Allow: /

User-agent: Adsbot-Google
 Allow: /

User-agent: Googlebot-Image
 Allow: /

User-agent: Googlebot-Mobile
 Allow: /

User-agent: ia_archiver-web.archive.org
 Disallow: /

Sitemap: http://www.askapache.com/sitemap.xml

Setelah anda mengupload file robots.txt, tambahkan script meta robots dibawah ini ke file header.php

<?php if(is_single() || is_page() || is_category() || is_home()) { ?>
<meta name="robots" content="all,noodp" />
<?php } ?>
<?php if(is_archive()) { ?>
<meta name="robots" content="noarchive,noodp" />
<?php } ?>
<?php if(is_search() || is_404()) { ?>
<meta name="robots" content="noindex,noarchive" />
<?php } ?>

SUMBER