Ano ang data firehose?
Ano ang data firehose?

Video: Ano ang data firehose?

Video: Ano ang data firehose?
Video: La Amenaza del Nivel 100: Amazon Kinesis Data Firehose y Amazon Kinesis Data Analytics 2024, Abril
Anonim

A firehose kung gagawin mo. Ang firehose Ang API ay isang tuluy-tuloy na stream ng lahat ng magagamit datos mula sa isang pinagmulan sa realtime - isang higanteng spigot na naghahatid datos sa anumang bilang ng mga subscriber sa isang pagkakataon. Ang stream ay pare-pareho, naghahatid ng bago, na-update datos gaya ng nangyayari.

Dito, ano ang Kinesis data firehose?

Amazon Kinesis Data Firehose ay ang pinakamadaling paraan upang mapagkakatiwalaan ang pag-load ng streaming datos sa datos mga lawa, datos mga tindahan at mga tool sa analytics. Ito ay isang ganap na pinamamahalaang serbisyo na awtomatikong sumusukat upang tumugma sa throughput ng iyong datos at hindi nangangailangan ng patuloy na pangangasiwa.

Maaaring magtanong din, ano ang ibig sabihin ng streaming data? Pag-stream ng data ay datos na patuloy na nabuo ng iba't ibang mga mapagkukunan. ganyan datos dapat na iproseso nang paunti-unti gamit Stream Mga diskarte sa pagproseso nang walang access sa lahat ng datos . Ito ay kadalasang ginagamit sa konteksto ng malaki datos kung saan ito ay nabuo ng maraming iba't ibang mga mapagkukunan sa mataas na bilis.

Katulad nito, paano gumagana ang firehose?

Firehose buffer ng papasok na data bago ito ihatid sa Amazon Elasticsearch Service. Maaari mong i-configure ang mga halaga para sa laki ng buffer ng Elasticsearch (1 MB hanggang 100 MB) o pagitan ng buffer (60 hanggang 900 segundo), at ang kundisyong nasiyahan ay unang nagti-trigger ng paghahatid ng data sa Amazon Elasticsearch Service.

Ano ang pangunahing kaso ng paggamit ng Amazon Kinesis firehose?

Kinesis Firehose ay sa Amazon pag-aalok ng produkto ng data-ingestion para sa Kinesis . Ito ay ginamit upang makuha at i-load ang streaming data sa iba Amazon mga serbisyo tulad ng S3 at Redshift. Mula doon, maaari mong i-load ang mga stream sa pagpoproseso ng data at mga tool sa pagsusuri tulad ng Elastic Map Reduce, at Amazon Serbisyo ng Elasticsearch.

Inirerekumendang: