# $Id: robots.txt,v 1.9.2.2 2010/09/06 10:37:16 goba Exp $
#
# robots.txt
#
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
#
# This file will be ignored unless it is at the root of your host:
# Used:    http://example.com/robots.txt
# Ignored: http://example.com/site/robots.txt
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/wc/robots.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
# Crawl-delay: 10
# Special script files for googlebot new demands
Allow: /misc/drupal.js
Allow: /misc/progress.js
Allow: /modules/acquia/google_analytics/googleanalytics.js

# Directories
Disallow: /includes/
#Disallow: /misc/
#Disallow: /modules/
Disallow: /profiles/
Disallow: /scripts/
Disallow: /themes/
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /contact/
Disallow: /logout/
Disallow: /node/add/
Disallow: /search/
Disallow: /user/register/
Disallow: /user/password/
Disallow: /user/login/
# Paths (no clean URLs)
Disallow: /?q=admin/
Disallow: /?q=comment/reply/
Disallow: /?q=contact/
Disallow: /?q=logout/
Disallow: /?q=node/add/
Disallow: /?q=search/
Disallow: /?q=user/password/
Disallow: /?q=user/register/
Disallow: /?q=user/login/

# Languages 25/12/2012
noindex: /en/

# Languages 07/10/2013
Allow: /ar/اللقب-الأول/
Allow: /ar/دورات-تمهيدية-ما-قبل-اكاديمية
Allow: /ar/االكليّة-الأكاديمية-أحفا-في-سطور/كيفية-الوصول-الى-الكلية
Allow: /ar/أعزب/شروط-قبول
Allow: /ar/االكليّة-الأكاديمية-أحفا-في-سطور
noindex: /ar/אודות המכללה האקדמית אחוה/
noindex: /ar/אחוה בקהילה/
noindex: /ar/אירועים/
noindex: /ar/בוגרים ומונחי מחקר/
noindex: /ar/ברוכים הבאים לספרייה/
Disallow: /ar/דיקן הסטודנטים/
Disallow: /ar/דרושים/
Disallow: /ar/כותבים עלינו/
Disallow: /ar/כנסים וימי עיון/
Disallow: /ar/לימודי תעודה והשתלמויות/
Disallow: /ar/לימודי תעודת הוראה/
Disallow: /ar/מחקר ופיתוח/
Disallow: /ar/מכינה קדם אקדמית/
Disallow: /ar/מכרזים/
Disallow: /ar/ממלאי תפקידים/
Disallow: /ar/מרכז מידע והרשמה/
Disallow: /ar/סגל אקדמי/
Disallow: /ar/סטודנטים/
Disallow: /ar/שכר לימוד/
Disallow: /ar/תואר ראשון/
Disallow: /ar/תואר שני בחינוך .M.Ed מוסמך בחינוך והוראה/
# Disallow: /ar/

# System Desk 263 - 27/06/2013 - Eran
Disallow: /node
Disallow: /node?
Disallow: /אחוה-בקהילה?
Disallow: /לימודי-תעודה-והשתלמויות/דרגה-1-במתווה-אופק-חדש-למורים-מתחילים?tid_op=or&tid=156&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגה-1-במתווה-אופק-חדש-למורים-מתחילים?tid_op=or&tid=155&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגה-1-במתווה-אופק-חדש-למורים-מתחילים?tid_op=or&tid=154&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגה-1-במתווה-אופק-חדש-למורים-מתחילים?tid_op=or&tid=152&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-4-6-במתווה-אופק-חדש?tid_op=or&tid=152&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-4-6-במתווה-אופק-חדש?tid_op=or&tid=153&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-4-6-במתווה-אופק-חדש?tid_op=or&tid=155&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-7-9-במתווה-אופק-חדש/node/2332
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-7-9-במתווה-אופק-חדש?tid_op=or&tid=152&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/דרגות-7-9-במתווה-אופק-חדש?tid_op=or&tid=156&tid_1_op=or&tid_1=All
Disallow: /?catid
Disallow: /?page
Disallow: /לימודי-תעודה-והשתלמויות/המרכז-ללימודי-אמנות?tid_op=or&tid=152&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/המרכז-ללימודי-אמנות?tid_op=or&tid=153&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/המרכז-ללימודי-אמנות?tid_op=or&tid=154&tid_1_op=or&tid_1=All
Disallow: /לימודי-תעודה-והשתלמויות/המרכז-ללימודי-אמנות?tid_op=or&tid=155&tid_1_op=or&tid_1=All
#Disallow: /*full$
Disallow: /comm_calendar/
Disallow: /category/כותרת-גרפית/כנסים-וימי-עיון?page=
noindex: /timetable-files-repository?field_first_department_time_value=
noindex: /faqs
Disallow: /faqs/
Disallow: /faqs?

Disallow: /login