Через несколько недель Яндекс внедрит новые правила обработки поисковым роботом директивы allow файла robots.txt. Директивы будут сортироваться по длине префикса URL (от меньшего к большему) и применяться последовательно.