Збирач даних LinkedIn

Мета проекту: Дослідницька мета полягає в розумінні Інтернет-присутності з метою розробки інструменту для збору інформації про особу з публічно доступних джерел. Це дослідницьке зусилля буде розбито на кілька фаз, кожна з яких спрямована на отримання конкретних результатів, які можна буде представити раді для демонстрації прогресу та практичності. Вхідні параметри можуть включати ім'я особи, фотографію або номер телефону, тоді як очікуваним результатом буде один або кілька профілів разом з оцінкою ймовірності, що вказує на їх автентичність.

Фази проекту та результати

Фаза 1: Пілотний проект - Збір даних з LinkedIn

Мета: Провести пілотний проект, спрямований на збір даних з LinkedIn для ідентифікації осіб за наданими іменами. Ця фаза також включає масштабовану базу даних для зберігання зібраних даних. На першій фазі база даних буде зберігати результати пошуку та також включати базову інформацію, таку як ідентифікатор, джерело даних і т. д.

Вимоги до введення: Базове ім'я (наприклад, Джон До).

Очікуваний результат: Профілі, що відповідають особам, які діляться наданим ім'ям, включаючи:

• Ім'я
• Прізвище
• Місце проживання
• Заняття
• Фотографія профілю
  
  

Результати для Фази 1:

• Звіт про збір даних:
  • Детальний звіт про процес збору даних, включаючи використані методи та інструменти.
  • Пояснення джерел даних та законність збору даних з LinkedIn.
• Компіляція профілів:
  • База даних структурованих профілів, що відповідають наданим іменам
  • Кожен профіль має включати вказані деталі відповідно до очікуваного результату
• Алгоритм оцінки ймовірності:
  • Розробка алгоритму для призначення оцінки ймовірності, що вказує на автентичність профілів.
  • Документація, що пояснює критерії та логіку за алгоритмом оцінки ймовірності.
• Презентація для ради:
  • Комплексна презентація, що узагальнює результати та демонструє практичність Інструменту для збору інформації.
  • Візуальні матеріали та діаграми, що демонструють ефективність та точність інструменту в ідентифікації профілів.

Якщо Фаза 1 буде успішною та схваленою, розробникам будуть замовлені додаткові фази на основі успіху, показаного на Фазі 1.

Додаткові Фази:

Фаза 2: API, збір даних з пошукових систем, розширення на інші платформи соціальних мереж (наприклад, Facebook, Twitter, Instagram) та публічні бази даних з включенням додаткових вхідних параметрів (наприклад, поточний роботодавець, номер телефону і т. д.).

Фаза 3: Впровадження Графічного інтерфейсу користувача та включення таблиць пошуку, Оптимізація пошуку, Розширені аналітичні та звітні функції

Фаза 4: Покращення алгоритму оцінки ймовірності на основі зворотнього зв'язку та результатів.

Вимоги до Фрілансерів:

Доведений досвід у зборі даних з веб-сайтів та аналізі даних.

Володіння мовами програмування, такими як Python, Java або відповідні альтернативи.

Володіння RPA та інструментами автоматизації, такими як UiPath, BluePrism, Pega, AA або відповідні альтернативи.

Ознайомленість з соціальними платформами та API.

Здатність до надання детальних звітів та презентацій.

Як подати заявку:

– Надати коротке введення про себе та ваш досвід у схожих проектах.

– Включити приклади минулих проектів, що стосуються збору даних з веб-сайтів та аналізу даних.

– Опишіть ваш запропонований підхід до Фази 1 проекту.

– Відповісти з вашою доступністю та очікуваним графіком та бюджетом.