درخواست برنامه نویسی و یا راهنمایی برای ساخت یک روبات یا عنکبوت برای سایت جست و جو

[kingserver72]

سلام دوستان
برای راه اندازی یک سایت جست و جو مستقل همانند گوگل نیاز به راهنمایینتون در مورد روبات های سیستم دارم
اینکه این روبات ها ساختارشون به چه شکله و اینکه آیا کسی هست که بتونه واسم این روبات هارو برنامه نویسی کنه؟

لطفا اگه کسی در مورد این روبات ها اطلاعاتی داره هرچند کوچیک اینجا بیان کنه واسه پیش بردن برنامه خیلی می تونه کمکمون کنه

[kingserver72]

دوستان کماکان به راهنمایی شما نیاز داریم

[mmzznn]

روبات ها ابتدا با ثبت چند سایت در دیتابیس شروع به آنالیز صفحات میکنن.
برای کسترش تعداد لینکها دیتابیس هم ،میان لینک های دیگر رو بررسی و داخل دیتابیس میریزن و ...
ساخت روبات خیلی راحت هست. الان بیشتر موتورهای جستجو سعی در بالا بردن هوش روبات خودشون دارن
مبحث سختی نیست.
نگهداری اطلاعات مشکلتر از ساخت روبات هست

[kingserver72]

دوستان لطفا بیشتر راهنمایی کنید...
روبات به چه شکل لینک های سایت های دیگه رو بدون اینکه ما بخوایم دستی این کارو بکنیم وارد دیتابیس می کنه؟
با اینکه تعدادی لینک به دیتابیس بدیم و ربات مدام اون هارو چک کنه مشکلی ندارم اما چطوری بقیه لینک هارو از نت جم آوری کنیم و این خزنده ها چطوری کار می کنن؟

[mmzznn]

خوب دوستان چی بگن؟!؟!؟!
شما به نظر میرسه هیچ سر رشته ای ندارید از برنامه نویسی تحت وب.
شما 10 تا سایت میدی تو دیتابیس
روبات میرا چک میکنه
کلمات کلیدی و لینکها رو ذخیره میکنه
لینکهایی که ذخیره شدن رو مجدد میره چک میکنه و دوباره کلمات + لینکها رو ذخیره میکنه و .....
نحوه ذخیره سازی لینک هم نیاز به درک مفاهمی از curl و query دیتابیس داره

[mohsened]

با کاربر iFire در همین انجمن تماس بگیرید . تجربیات خوبی در این زمینه دارند .

[kingserver72]

خوب دوستان چی بگن؟!؟!؟!
شما به نظر میرسه هیچ سر رشته ای ندارید از برنامه نویسی تحت وب.
شما 10 تا سایت میدی تو دیتابیس
روبات میرا چک میکنه
کلمات کلیدی و لینکها رو ذخیره میکنه
لینکهایی که ذخیره شدن رو مجدد میره چک میکنه و دوباره کلمات + لینکها رو ذخیره میکنه و .....
نحوه ذخیره سازی لینک هم نیاز به درک مفاهمی از curl و query دیتابیس داره

دوست عزیز شما منظور من رو متوجه نشدید...
منظور من اینه که خود روبات چطوری می تونه سایت هایی رو به طور خودکار به دیتابیس اضافه کنه که فعال هستن
شما اگه سایتی بسازید و اون رو توی گوگل ثبت نکنید و فعال باشه بعد از چند روز توی دیتابیس گوگل ذخیره میشه و توی نتایج جست و جو نمایش داده میشه...

[kingserver72]

دوستان کماکان به راهنمایی های بیشتر شما نیازمندیم...

[kingserver72]

کسی نیست بتونه بیشتر راهنمایی کنه؟!!!

[rezaonline.net]

شما یک کراولر دارید ، که وظیفه اش گشتن و جمع کردن لینک هست .
یک اسپایدر دارید ، که وظیفه اش اینه به لینک هایی که کراولر جمع کرده میره و توی اون لینک هر تعداد لینک مرتبط رو در میاره .
ربات هم وظیفه مدیریت این دو تا رو داره + آنالیز اطلاعاتی که جمع کردن و ذخیره توی دیتابیس .

شما باید رباتتون رو هر روز / هر ساعت / هر ثانیه سر یک تایم مشخص اجرا کنید تا بره بگرده و ...

برای ساخت موتور جستجو نیاز به یک دیتابیس فوق العاده سریع دارید + نامحدود .
همین دو مورد کل دیتابیس های sql رو حذف میکنه ! یعنی نه mysql نه postgresql نه oracle و ... به درد شما نمیخورن .
همونطور که جناب mmzznn گفتن ، ساختن ربات سخت نیست نگهداری اطلاعات سخت هست .

بهرحال شما باید هدفتون ، بازه زمانی ، گستره و حدود فعالیت رو مشخص کنید .

یه چیز هم خدمتتون بگم ، توی نت چندین سایت ایرانی میبینید که ادعا کردن موتور جستجو دارن ، این سایت ها شاید در ظاهر اینطور باشن اما در باطن همان تایجی که شما میخواید رو از گوگل و بینگ میگیرن و نمایش میدن .
همین