سیستم تشخیص محتویات غیراخلاقی هوشمند و چند لایه ای رپیدباز
تغییرات سامانه ۱۷م شهریور ۱۳۸۷همانطور که می دانید، اینترنت دنیای وسیعی از اطلاعات است و هدف از راه اندازی این سیستم تسهیل و تسریع در دسترسی به این اطلاعات، در محیطی مطمئن و مطابق با قوانین کشورمان ایران و عقاید و اعتقادات هموطنانمان است. رپیدباز علاوه بر اینکه فایلهای درخواستی را ظرف ثانیه ها در اختیار کاربران خود بدون نیاز به نگاه کردن و کلیک کردن بر روی تبلیغات سایتهای خارجی که اکثرا مستهجن و غیراخلاقی هستند قرار می دهد، امکان مرور و جستجو در بانک وسیعی از فایلهای درخواستی سایر کاربران و قابلیت دانلود رایگان آنها را نیز می دهد. از این سو و در جهت رسیدن به این اهداف، تمهیداتی از جمله کشف کاستی های فیلتر مخابرات و اجرای سیستمی پویا جهت تصفیه فایلهای مردود که خواسته یا ناخواسته بر روی سیستم قرار داده می شود نیازی مبرم شناخته شده است. در همین راستا و در جهت فراهم آوردن بستری پایدار و سالم جهت برقراری ارتباط کاربران ایرانی تمام اقدامات در توان خود را در هفته های اخیر در این راه استفاده نموده ایم.
سیستم تشخیص محتویات رپیدباز که بصورت خیلی ساده و فقط با نگاه کردن به اسم فایلها و استفاده از لیست محدودی از واژه های ممنوعه پس از دانلود اجرا و فعال می شد کلا کنار گذاشته شد و سیستم جدیدی جایگزین آن شد. تحقیقات زیادی انجام شد و در همین مسیر به مقالات و تکنیک های مختلفی رسیدیم که جهت اطلاع کاربران گرامی خلاصه ای از روشهای استفاده شده در تشخیص فیلتر را با اولویت در نقش آنها در سیستم در اینجا مرور می شود.
سیستم تشخیص زنجیره ای داده ها:
در بررسی های انجام شده به یک مقاله از یکی از دانشجویان دکتری دانشگاه واترلو کانادا رسیدیم که از الگوریتم خود در حیطه استخراج عبارات و ایندکس کردن آنها به تفصیل یاد کرده بود. شاید خیلی وقتها و در خیلی از سیستمهای فیلترینگ که در دنیا بکار گرفته شده است، از جمله سیستمهای مورد استفاده درسیستم مخابراتی اینترنت، واژه ها تنها ملاک فیلتر شدن و نشدن یک فایل یا یک صفحه باشند یعنی اگر در آدرس آنها این اسم به هر نوعی و در هر کاربردی استفاده شود آن صفحه و آدرس فیلتر می شود. این سیستم کاملا استاتیک می باشد ولی با روش یاد برده شده ما به کاربرد واژه ها نگاه می کنیم.
این کار با کنکاش در اطلاعات از پیش بدست آمده انجام می گیرد (Data Mining) یعنی برنامه با گرفتن چند نوع گزارش بصورت پوششی از بانک اطلاعاتی اقدام به پیدا کردن عبارات در فایلهایی می کند که پیش از این فیلتر شده اند و با پیدا کردن وجه تشابه آنها و ترتیب قرار گیری شان به عباراتی می رسد که در این نوع فایلها مورد استفاده قرار گرفته اند.این سامانه کاملا پویا بوده و با مرور زمان و خودآموزی آن، بانک عبارات آن وسیع تر شده و موثرتر می شود.

اگر جملات سمت چپ را جملات فیلتر شده در نظر بگیریم و روش قرار گیری آنها را بصورت نمایی در سمت راست داشته باشیم به عبارات سفرهای ماهیگیری (Fishing trips) و سفرهای قایقرانی (rafting trips) خواهیم رسید. حال با قرار دادن این عبارات به عنوان عبارات منفی در بانک اطلاعات می توانیم فایلهای مشابه فایلهای فیلتر شده را در بانک اطلاعاتی موجود پیدا کنیم. با قرار دادن عبارات در بانک اطلاعاتی سیستم فایلهای جدید که با این عبارات تطبیق داده می شوند نیز فیلتر می شوند. در حقیقت این الگوریتم می تواند جلوی اشتباهات احتمالی در رد عباراتی که واژه ها با قرار گرفتن کلمات در مکان های مختلف معانی مختلف پیدا می کنند را می گیرد و تعریفی دقیق تر از موارد ممنوعه می کند. مثلا در مثال بالا اگر بخواهیم واژه سفرها (trips) را بتنهایی مردود بشناسیم، خیلی از عبارات که در مورد سفر ها توضیح می دهند یا سایر سفر ها را نیز از دسترس کاربران خارج می کنیم.
رتبه بندی واژه ها و عبارات:
عبارات و واژه های قرار داده شده در بانک اطلاعاتی و در جدول مربوط به سیستم تشخیص محتویات غیر اخلاقی، ارزشی متفاوت دارند و با توجه به تکرار آنها و تشخیص مدیران تعیین و ثبت می شوند. زمانیکه فایل جدیدی وارد این سیستم جهت آزمون می شود، با تمام عبارات و واژه های ثبت شده در بانک تطبیق داده می شود و درصد احتمال مردود بودن آنها مشخص می شود و بر آن اساس سیستم تصمیم بر دانلود و یا مردود دانستن فایل می کند. واژه ها و عبارات ثبت شده در بانک اطلاعاتی می توانند ارزش منفی یا مثبت داشته باشند یعنی همانطور که درصد احتمال بالا می رود می توانند در مواردی که گزارش داده می شوند و مدیریت تشخیص داده می شود می تواند پایین ببرد.
گزارش خطاها توسط کاربران:
جهت رفاه کاربران گرامی و پویا نمایی سیستم تشخیص هویت فایلهای درخواستی، سیستمی جهت معرفی مشکلات موجود در سیستم طراحی و به اجرا گذاشته شده است. کاربران می توانند علاوه بر این که ضعف های سامانه را به اطلاع مدیران برسانند، اطلاعات و عبارات و واژه های پیشنهادی خود را نیز جهت اضافه شدن به بانک اطلاعاتی سامانه ارسال نمایند.
با توجه به شرایط جدید و توسعه فعالیت ها، تمام تلاش ما است که در کمتر از یک ساعت در ساعات اداری بتوانیم پاسخگو به گزارشات کاربران باشیم.
چک کردن دستی فایلها:
با توجه به اینکه هیچ سیستم خودکاری نمی تواند ۱۰۰% تضمین شناسایی موارد و فایلهای مورد دارد را دهد، فایلهای ارسالی بطور دستی در حد امکان با اولویت بر فایلهایی که بیشترین احتمال مردود بودن را دارند (سیستم شناخته است) و یا فایلهایی که نامفهوم هستند و مشکوک چک شده و دستی فیلتر می شوند.
مشترکین سیستم می توانند فایلهایی که سیستم اشتباها مردود شناخته است را با قبول کردن مسولیت آن دانلود کنند. در صورتیکه افرادی بخواهند از این قابلیت سو، استفاده کنند، با چک کردن دستی این افراد شناخته شده و اشتراک آنها در صورت تکرار مسدود می شود.
۱۶ Responses to “ سیستم تشخیص محتویات غیراخلاقی هوشمند و چند لایه ای رپیدباز”
Leave a Reply
You must be logged in to post a comment.
۱۷م شهریور ۱۳۸۷ at ۱۲:۰۶ ب.ظ
اگه مثل فیلترینگ ایران نباشه فکر کنم سیستم خوبی بشه.
رتبه
1
0
۱۷م شهریور ۱۳۸۷ at ۷:۲۳ ب.ظ
من اکانت میخوام… !!
رتبه
0
0
۱۷م شهریور ۱۳۸۷ at ۸:۰۳ ب.ظ
سلام
فقط امیدوارم رو دست مخابرات بلند نشین
رتبه
3
0
۱۷م شهریور ۱۳۸۷ at ۸:۱۹ ب.ظ
تعدادی فیلم برا دانلود دارم که لینکشون رو هم از رپید و هم از مگا و فایل فکتوری و دپوزیت فایل دارم
می خوام ببینم اگه بازم برا دانلود امتیاز میدین از اینا دانلود کنم نه از رپید
اخه تازگیا یه چند تا فایل ۱۰ مگی دانلود کردم از ۴ شرد که مجموعا بالای ۵۰ مگ میشد ولی امتیازی نداد سیستم
رتبه
0
0
۱۷م شهریور ۱۳۸۷ at ۸:۳۲ ب.ظ
سلام.
آقای saleh میخواستم ببینم این لینکدانی راپیدباز , میزبانی حرفه ای , میزبانی تصاویر که بالای سایت هستش چه موقع راه اندازی میشه.؟
رتبه
0
0
۱۷م شهریور ۱۳۸۷ at ۹:۰۸ ب.ظ
خسته نباشید
امیدوارم این سیستم آزادی و استقلال خودش رو حفظ بکنه و برای مشترکین حداقل به محتوای فایلی که می خواهند دانلود بکنند کاری نداشته باشه و فقط صرفا روی اسم حساس باشه چرا که اون فایل جزو حریم خصوصی فرد هست.
با تشکر
رتبه
2
0
۱۸م شهریور ۱۳۸۷ at ۸:۱۲ ق.ظ
کاربران گرامی
از این پس مشکلات شخصی خود را از طریق ایمیل بفرستید و سعی کنید در قسمت کامنت عموما نظر خود نسبت به جدیدترین پست را ارائه فرمایید و همچنین آنچه که تصور می کنید برای همه کاربران مفید باشد.
در روزهای گذشته مشاهده شد که بسیاری از سوال های مطرح شده همان سوال های متداول بود که در گذشته پاسخ داده شده بود، لذا لطفا متن فایل “سوال های متداول” را با دقت مطالعه نمایید:
http://static.rapidbaz.com/inc/rapidbaz-faq.pdf
همچنین بخش “تماس با ما” مخصوص پیام ها،پیشنهادات و سوالات شما عزیزان می باشد
- سیستم امتیازدهی همچون گذشته فعال است.
- امکانات جدید رپیدباز نیز بزودی راه اندازی خواهند شد.
با تشکر
رتبه
0
0
۱۸م شهریور ۱۳۸۷ at ۲:۲۰ ب.ظ
سلام صالح جان
خسته نباشید . ما (کاربران) همه از زحمات شما و آقای حشمتی و دیگر دوستان بسیار ممنون هستیم . رپیدباز بهترین سایتی هست که برای دانلود از اینترنت وجود داره ، سایتهای دیگه ای هم هست چه ایرانی و چه خارجی ولی هیچ کدوم به راحتی و سادگی رپیدباز نیستن . مطمئنا شما هم می دونید که به همین دلیل هست که کاربران این سایت رو انتخاب میکنن و توی سختی ها و مشکلات همراه شما هستند ( حداقل بعضی هاشون ) . من امیدوارم که با این سیستم جدید اصالت رپیدباز زیر سوال نره . من دنبال چیز های غیر احلاقی نیستم ولی به نظر من محدودیت ایجاد کردن تو هر سیستمی اشتباه محض هست چون باعث بروز مشکلات هم برای کاربران و هم برای سرپرستان میشه .
با توضیحاتی که شما دادید به نظر این سیستم کارآمد هست و انشاا… که مشکلی پیش نمی آد ولی اگر من خودم بودم بجای این کار سیستم رو طوری تغییر میدادم که کاربران نتونن فایلهای یکدیگر رو ببینن و دانلود رو هم طوری میکردم که فقط از طریق referrer بشه دانلود کرد اونجوری کسی نمیتونست فایلهای دانلودی خودش رو به دهها نفر بده که هم بار سرورها بیشتر بشه و هم مخابرات یا هر ارگان دیگه ای به خودش اجازه بده که مشکل ساز بشه … به نظر من هر کس هر فایلی که میگیره خودش باید مسئولیتشو بعهده بگیره . درسته که ما تو ایران قانون کپی رایت نداریم ولی همه میدونن که ۹۹٫۹۹% فایلهایی که تو رپیدشر هستند این قانون رو نقض میکنن . بنابر این شاید با این سیستم مخابرات و … دست از سر سایت و کاربران و شما برداره ولی امکان وجود داره ۴ روز دیگه کل سرورهاتون بسته بشه بخاطر وجود فایلهایی غیر مجاز بنابر این به نظر من فکر یه روش بهتر باشین که اینگونه مسائل رو به حداقل برسونه .
مثلا در مورد تورنت ، من خودم خیلی سعی کردم که یک هاست خوب و ارزون پیدا کنم که بتونم روش این سرویس رو راه اندازی کنم ولی بعد از چند روز که گشتم همه هاستینگها گفتن این عمل غیر ممکنه و تنها راهش سرور اختصاصی یا مجازی هست که اونم باید تعهد بدی اگر از هر سازمانی شکایت شد خودت عواقبش رو به عهده میگیری (ایرانی و خارجی) منم دیدم هم مبلغ سرور اختصاصی به جیب من نمی خوره و هم اینکه واقعا وقت درگیری سر قانون کپی رایت با هاستینگ و … ندارم بی خیال شدم تا ببینم میشه یه جوری سرعت اینترنتم رو بالا ببرم یا نه …
تمام این صحبتهای من مبنی بر نارضایتی از رپیدباز نبود و امیدوارم کسی این برداشت رو نکرده باشه من فقط می خوام که این سیستم همیشه پابرجا باشه و من هم ازش استفاده کنم و شما رو دعا کنم که منو از شر رپیدشر و مگا آپلود و … راحت کردین .
موفق باشین .
رتبه
1
0
۱۸م شهریور ۱۳۸۷ at ۴:۱۶ ب.ظ
با سلام و تشکر
همانطور که میدانید هر سیستم برای ادامه فعالیت آن هم به طور گسترده و قانونی بایستی قوانینی را رعایت کند که رپیدباز نیز از این قائده مستثنی نیست.مطمئن باشید برای ما هیچ چیز مهم تر از رضایت کاربران نیست و نمی تواند باشد و تمام تلاش ما جلب رضایت کاربران محترم است.
از همراهی و همکاری شما کمال سپاس را داریم و ان شاالله بتوانیم با ارائه خدمات مطلوب تر و جدیدتر با نظرات شما هرروز شاهد رشد بیشتر رپیدباز باشیم…
رتبه
0
0
۱۸م شهریور ۱۳۸۷ at ۶:۳۶ ب.ظ
پاسخ به سوال در رابطه با دانلود منجرها :
در مورد Internet Download Manager ، مشکل لود بالایی است که این برنامه بر روی سرور وارد می کند که به نوبه خود مانع از سرویس دهی معمول سرور می شود. این برنامه قطعه های فایلها را بسیار کوچک در نظر گرفته و اتصال خود را مداوما قطع و دوباره درخواست جدیدی می فرستد. سرورهای رپیدباز هم جهت جلوگیری از Flood پیام ۵۰۳ ارسال می کنند که مانع دانلود برنامه می شود. گرچه ما در حال بررسی برای حل کردن این مشکل نیز هستیم ولی باید جدا توصیه کنم که از این دانلود منیجر هم در زمان فعلی تا حد امکان استفاده نکنی.د
در مورد Download Accelerator plus ، باید گفت که این منیجر با توجه به گزارشات زمانیکه تعداد درخواست بالا می رود و دانلود را شما موقتا متوقف می کنید یا خود برنامه کانکشن را می بندد و دوبازه باز می کند پیام ۵۰۳ سرور که خواستار فاصله بین دانلود ها می باشد را برنامه درست تفسیر نکرده و سایز فایل را صفر می کند. ما در حال بررسی این مشکل و انجام آزمایشات متعدد جهت حل آن هستیم ولی در حال حاضر باید از تمام کاربران خواهش کنم از این دانلود منیجر نیز استفاده نکنند.
توصیه ما Flash Get یا Orbit است.
رتبه
0
0
۱۸م شهریور ۱۳۸۷ at ۹:۳۶ ب.ظ
flash get دانلود منجیر توصیه شده از طرف اکثر سایتهای میزبان فایل است
رتبه
1
0
۲۲م شهریور ۱۳۸۷ at ۱:۵۱ ق.ظ
سلام
آیا میشه امکانی رو اضافه کنید که فایل رو از سایتهایی که لینک مستقیم میدن ولی سرعتشون برای ما (تو ایران، مثل برخی FTP ها) پایین هست یا اجازه دانلود با امکان توقف رو نمیدن به سرور شما منتقل کنیم و از رو سرور شما دانلود کنیم؟
رتبه
1
0
۲۲م شهریور ۱۳۸۷ at ۲:۰۴ ب.ظ
سلام و خسته نباشید
مدت زیادی هست که با اکثر سیستم های فایل شرینگ کار کرده ام.بدون شک سیستم رپیدباز یکی از بی نظیر ترین این سیستم هاست.انصافا بسیار ساده،فوق العاده سریع و ارزان این کار رو انجام میده.واقعا ممنون
چنتا پیشنهاد
اگر سایت رو به زبان لاتین هم ترجمه کنید و امکان استفاده از کردیت کارت یا سیتمهای پرداخت معمول جهانی رو برقرار کنید حتما مشتری خارجی هم خواهید داشت
اگر امکانش هست سیستم رو طوری طراحی کنید که کاربران بتونن فایلهای دانلودی خودشون را بعد از دانلود حذف کنن اینطوری هم فضای سرور شما بدون دلیل اشغال نمیشه و هم کابر ها می تونن فایلهای خودشون رو منیج کنن.
تنها مشکل فعلی سایت شما داون شدن هر چند وقت یکبار هست که اوون هم در برابر سرویس بی نشظیرتون قابل چشم پوشی هست
با تشکر
رتبه
1
0
۲۳م شهریور ۱۳۸۷ at ۱۰:۱۹ ق.ظ
سلام
از توجه و استفاده شما از سامانه رپیدباز متشکریم
سایت ها وسامانه های بسیاری در دنیای اینترنت بوجود آمدند که در ابتدا تصور استقبال فراوان را نمی کردند و پس از مدتی به دلیل استقبال زیاد کاربران توانایی پشتیبانی را از دست دادند و سامانه را به کل بستند یا آن را محدود کردند لذا هدف ما از روز اول ارائه خدمات به کاربران محترم ایرانی بود و امیدواریم بتوانیم با ارائه خدمات بهتر و پشتیبانی کامل، در وهله اول رضایت کاربران ایرانی را جلب نماییم ولی شاید .در آینده سیستم را جهانی کردیم
همانطور که میدانید در بخش “فایل های دانلودی” فایل های سایر کاربران برای دانلود گذاشته شده اند و این یکی از امکانات پرطرفدار رپیدباز است.حال تصور کنید شما قصد دانلود فایلی از بین فایل های دانلودی را داشته باشید و در همان لحظه شخص آپلود کننده فایل بر روی سیستم بخواهد آن را حذف کند،در این صورت شما نمی توانید آن را دانلود کنید و عملا آپشن دانلود از میان فایل های دیگران غیرممکن خواهدشد
آخرین قطعی که فقط چند ساعت طول کشید به دلیل ارتقای سیستم بود و آخرین خبر اینکه بزودی لینکدانی رپیدباز راه اندازی خواهد شد و خدمات جدید دیگری نیز در راه است لذا از پیشنهادات شما برای لینکدانی استقبال می کنیم
بار دیگر از کاربران عزیز خواهش می کنیم که در قسمت کامنت نظرات و پیشنهادات خود را بفرمایید و مسائل شخصی تان را ایمیل کنید
چند نکته
اگر فیش پرداختی قبل از بازگشایی مجدد سایت دارید لطفا مجدا علاوه بر پرکردن فرم،فیش را نیز ایمیل کنید
در مورد حجم لطفا لینک رپیدباز فایل هایتان را از طریق تماس با ما اعلام نمایید
با تشکر
رتبه
0
0
۲۳م شهریور ۱۳۸۷ at ۴:۳۹ ب.ظ
سلام
من به شخصه با اینکه شخصی فایل آپلود کنه و من بخوام ازاون فایل استفاده کنم مخالفم
بنظر من باید هر کسی که فایلی رو آپلود میکنه حداقل اختیار پاک کردن اونو از سرور داشته باشه
این نظر منه. کاش بقیه دوستان هم نظر بدن
ولی من فکر کنم بیشتر دوستان با اینکه گزینه دلیت دست خود آپلو کننده باشه موافق هستند
راستی میگم اگر موافق هستید یه نظر سنجی بزارین ببینید که گزینه دلیت گذاشته بشه یا نه به همین منوال باشه؟
ممنونم
رتبه
1
0
۲۳م شهریور ۱۳۸۷ at ۴:۴۸ ب.ظ
در ضمن با توجه به نظر بالای من در مورد نظر سنجی در مورد گزینه دلیت
اگر من و بقیه کاربران بتونیم فایلهای دانلودی خودمون رو بعد از دانلود پاک کنیم فضا باز میشه و دیگه بعد از ۷ روز شما فایلها رو پاک نمکنید
یعنی مثلا من ۵۰۰ مگ رو دان کردم و با توجه به اینکه خودم آپلود کننده هستم هر ۵۰۰ مگرو پاک کنم ومثلا یه فایل دارم که بخاطر مثلا نبودندر خونه نتونستم دانلودش کنم ، اونوقت دیگه بعد از ۷ روز شما بخاطر کمبودجاپاکش نمیکنید
بهر حال بازم میگم یه نظر سنجی در مورد اضافه کردن گزینه دلیت بزارین
رتبه
1
0