Web Url Scraping, (URL link Toplayıcı)
Merhaba, Proje basit googlebot benzeri domain adı yazdıktan sonra giriş sayfasına giderek (default page) linkleri toplayıp, sitenin tüm linklerini (sitemap) çıkarıp. Mysql veri tabanına yazacak.
Kodlar opensource php ve mysql ile kodlanacak. 50000 link maximimum toplayabilecek.