شرح موقعیت
درباره موقعیت شغلی: ما در حال توسعه یک سامانه هوشمند و پایگاه دانش تخصصی هستیم و برای فاز جمع‌آوری، سازمان‌دهی و ساختاردهی داده‌های متنی، به یک برنامه‌نویس مسلط به پایتون و اتوماسیون داده نیازمندیم. شرح وظایف و مهارت‌های فنی: مهارت‌های فردی و شخصیتی: شرایط و ساعات کاری:
مسئولیت‌ها
- طراحی و توسعه اسکریپت‌ها و پایپ‌لاین‌های جمع‌آوری خودکار داده از منابع وب مجاز
- پاک‌سازی، پیش‌پردازش و ساختاردهی به متون و اسناد خام (تبدیل به JSON یا دیتابیس)
- ذخیره‌سازی، ایندکس‌گذاری و مدیریت بهینه داده‌های حجیم متنی
- مانیتورینگ عملکرد اسکریپت‌ها و بهینه‌سازی سرعت و پایداری فرآیند دریافت داده
- تسلط کامل به زبان برنامه‌نویسی پایتون (Python)
- تسلط بر کتابخانه‌ها و ابزارهای وب‌کراولینگ و اتوماسیون (مانند Scrapy، Playwright، Selenium یا BeautifulSoup)
- آشنایی با کار با دیتابیس‌های رابطه‌ای یا NoSQL (مانند PostgreSQL یا MongoDB)
- درک مناسب از وب‌سرویس‌ها، پروتکل‌های وب (HTTP/HTTPS) و معماری وب
- توانایی حل مسئله و دیباگ چالش‌های پیچیده
- نظم و پایبندی به ددلاین‌های تحویل پروژه
- دقت و حساسیت بالا در حفظ کیفیت و ساختار صحیح داده‌ها
- روحیه یادگیری و مسئولیت‌پذیری بالا
- نوع همکاری: پروژه‌ای
- نحوه همکاری: دورکاری
نیازمندی‌ها
- Big Data
- Python
- NoSQL