Неструктуровані дані

Визначення

Неструктуровані дані – це інформація, яка не відповідає заздалегідь визначеній схемі, наприклад, вільний текст, зображення, відео чи аудіо.

Мета

Мета полягає в тому, щоб зібрати складну інформацію з реального світу, яку неможливо представити у структурованих таблицях.

Значення

• Представляє більшість даних, що генеруються сьогодні.
• Забезпечує передові застосування штучного інтелекту в зорі, мовленні та NLP.
• Важко обробляти та аналізувати без штучного інтелекту.
• Викликає проблеми зі зберіганням та управлінням.

Як це працює

1. Збирайте неструктуровані дані з різних джерел (соціальні мережі, камери, датчики).
2. Зберігайте у форматах, таких як JSON, мультимедіа або необроблені журнали.
3. Застосовуйте моделі штучного інтелекту для вилучення сенсу.
4. Перетворіть на структуровані представлення, коли це можливо.
5. Використання в аналітиці подальших дій та прийнятті рішень.

Приклади (реальний світ)

• Дописи в соціальних мережах, що використовуються для аналізу трендів.
• Медична візуалізація для діагностики.
• Журнали чату служби підтримки клієнтів.

Література / Додаткова література

• Структура сумісності великих даних NIST.
• Стандарти ISO/IEC TR 20547 щодо великих даних.
• Звіт EMC/IDC про цифровий всесвіт.
• Структуровані та неструктуровані дані