����Ѱ�� URL ���У�����Ҫ���е������ݵ�վ��� URL��
����Ѱ��Χ�����б��У�ָ������Ҫ��Ѱ��Ŀ��ҳ�����������������磬���ѡ�� 1�������� crawler �����Ե���ֱ��������Ŀ��ҳ���ÿ��ҳ�棻���ѡ�� 2�������� crawler �����Ե���ֱ��������Ŀ��ҳ���ÿ��ҳ�棬�Լ�ֱ����������Щ����ҳ���ÿ��ҳ�档
Ĭ������£������� crawler ������ָ���ڲ��� 1 �������� URL �����ӡ�������봴����ҳ������ӣ����������Ŀ��ҳ����ѡ�������磬�����Ѱ��������������ܲ��뵼��Ŀ��ҳ�棨�������ҳ�棩����Ҫ����ÿ������ҳ�棨ÿ���������
ָ��Ҫ�����ݵ��뵽��Щ�ļ��С����� crawler ���Խ����ҵ���ÿ���ĵ������ӵ�����Ŀ�ĵ��ļ������������ݸ����ӵ���ײ����ļ��С������˴��ɻ�ȡ��ʾ���� crawler ���ȷ�������ݵ�����Щ�ļ��е�����ͼ��
Ҫ����Ŀ���ļ��У��뵥��
�����ļ�����Ȼ����“ѡ���ļ���”�Ի����У�ѡ��Ҫ���ӵ��ļ��в�����ȷ����Ҫ��Ѱ�ĵ������䵼�뵽�ļ��У�������Ը��ļ������پ����༭Ȩ����Ҫ�Ƴ�ij���ļ��У���ѡ����ļ��У�Ȼ��
��Ҫѡ�л���������ļ��и�ѡ����ѡ�л�����ļ���·����ߵĸ�ѡ��
Ҫ�л��ļ��е�����˳���뵥���ļ���·�����ļ���·���ұߵ�ͼ���ʾ��ǰʹ�õ���ĸ����˳������ (
) ���� (
)��
ΪҪ���ĵ��ڵ�����Ŀ�ĵ��ļ���ǰͨ����Щ�ļ��еĹ���������ѡ��Ӧ��Ŀ�ĵ��ļ��й�������Ĭ������£��ĵ�����ͨ��Ŀ�ĵ��ļ��й���������������ĵ���������������Ŀ�ĵ��ļ��С�
Ҫ�����е�����ĵ����ܵ��Ż���վ�в��������û�ʹ�ã���ѡ���Զ���������ĵ���Ĭ������£��ĵ���Ҫ�����������ʾ�ڵ����ĵ������ӿɹ��û�ʹ��ǰ�������������ٶ�Ŀ�ĵ��ļ��о��б༭Ȩ���Ż���վ����Ա���к���
��“�ĵ�����Ȩ��”�£�������ִ�����²����������û����û������������ crawler ���������ݵķ���Ȩ��
Ҫ�����û����û��飬�뵥��
�����û�/�û�����Ȼ����“ѡ���û�����û�”�Ի����У�ѡ����Ҫ���ӵ��û����û��鲢����ȷ����Ҫ�����û����û��飬���������ٶԸ��û����û������ѡ��Ȩ��������ÿ���û����û��飬�ڹ�����Ȩ�������б��У�ѡ����Ҫ����ĶԴ� Crawler ���������ݵ�����Ȩ����
Ҫ�Ƴ��û����û��飬��ѡ���û����û��飬Ȼ��
��Ҫѡ�л���������û����û��鸴ѡ����ѡ�л�����û�/�û�����ߵĸ�ѡ��
Ҫ�л��û����û��������˳���뵥���û�/�û��������������ұߵ�
������������ a-z���� ������������ z-a��ͼ�ꡣҪ�鿴�û���ij�Ա���뵥���û������ơ�