وب کاوی (Web Mining) یکی از زمینه های تحقیقاتی است که با به کارگیری تکنیک های داده کاوی به کشف و استخراج خودکار اطلاعات از اسناد و سرویس های وب می پردازد. داده کاوی (Data Mining) یعنی استخراج اطلاعات گرانبها از حجم عظیم معادن داده ها. داده کاوی دو راهکار مشخص ارائه می کند: ارائه گزارشات مستند برای حل مشکلات کسب و کار؛ و ارائه راهکار نرم افزاری با طراحی سیستم پشتیبان تصمیم گیری. فلسفه ی داده کاوی این است که آینده بسیار به گذشته شبیه است. اگر گذشته را خوب بشناسید می توانید آینده را پیش بینی کنید.
آمار به عنوان علم جمع آوری و تجزیه و تحلیل در مورد پدیده های تحت بررسی، جزء لاینفک مدیریت مؤثر و کارآمدی است که بر فعالیتهای هدفدار تمرکز دارد. آمار و اطلاعات، قوی ترین ابزار جهت ارزیابی عملکرد گذشته، برنامه ریزی آینده و تصمیم گیری در سطوح مختلف مدیریت است، چرا که تجزیه و تحلیل وضعیت موجود و پیش بینی وضعیت آینده در بخشهای مختلف علوم، به ویژه مسائل اقتصادی، مستلزم وجود داده های آماری دقیق، جامع و به روز است.
آمار و اطلاعات، یکی از عوامل مؤثر و ضروری برای برنامه ریزی، ارزیابی عملکردها و تصمیم گیری در سطوح مختلف مدیریت بوده و سیاستگزاران، برنامه ریزان و کارشناسان، برای تدوین راهبردها، تعیین خط مشی، برنامه ریزی، نظارت، هماهنگی و هدایت برنامه ها به آن نیاز دارند. علاوه بر آن، فعالان اقتصادی، تجار و بازرگانان نیز در فرآیند ارتقاء جایگاه کشور در بازارهای جهانی به داده های آماری نیازمندند.
در بازار رقابتی امروز، داشتن اطلاعات و آمار از بازاری که در آن مشغول به کاریم و بازارهای موازی، از مهمترین پارامترهای تجارت است که اگر بنگاه اقتصادی آنرا در اختیار داشته باشد می تواند امید به فعالیت و افزایش سهم بازار خود داشته باشد و در غیر اینصورت با مشکلات عدیده ای مواجه خواهد شد.
یکی از به روز ترین روشهای تحقیق بازار همان داده کاوی الکترونیک یا جستجو در هزاران داده درون اینترنت است که می تواند به علمی قابل اتکا مبدل شود. ولی با توجه به حجم زیاد داده غیر مرتبط و غیر واقعی در اینترنت، تهیه این اطلاعات مفید کار دشواری شده است.
