[Tool] Apache Kafka

Apache Kafka is an open-source stream processing platform developed by the Apache Software Foundation written in Scala and Java. The project aims to provide a unified, high-throughput, low-latency platform for handling real-time data feeds. Its storage layer is essentially a "massively scalable pub/sub message queue architected as a distributed transaction log,"^[3] making it highly valuable for enterprise infrastructures to process streaming data. Additionally, Kafka connects to external systems (for data import/export) via Kafka Connect and provides Kafka Streams, a Java stream processing library.

Nhận xét

Bài đăng phổ biến từ blog này

[Xu hướng] Mobile Backend as a Services - Xu thế phát triển ứng dụng

Xuất bản: 2016-04-19 20:21:53 Bằng cách sử dụng Mobile Backend as a Services (MBaaS), các nhà sản xuất và phát triển ứng dụng có thể tiết kiệm được nhiều thời gian xây dựng hệ thống và các chi phí vận hành. Push notification, tích hợp mạng xã hội, quản lý chứng thực người dùng là một trong số những chức năng thường xuất hiện trên các ứng dụng cho thiết bị di động và web hiện nay. Với Push notification cho phép các hệ thống thực hiện chuyển thông báo tới người dùng cuối một cách đồng loạt. Với chức năng tích hợp mạng xã hội, ứng dụng cho phép người dùng có thể dễ dàng chia sẽ những thông tin của bản thân từ ứng dụng cũng như nhận những thông tin, kiến thức được chia sẽ từ những người dùng khác… Các chức năng đó đối với các ứng dụng ngày nay được xem như một thành phần không thể thiếu. Tuy nhiên, có một thực tế mà các nhà sản xuất và phát triển ứng dụng trên nền tảng di động và web đã và đang trải qua đó là họ thường phải xây dựng lại những tính năng này cho các ...

[Tool] Apache Nifi

Introduction Apache NiFi is a dataflow system based on the concepts of flow-based programming. It supports powerful and scalable directed graphs of data routing, transformation, and system mediation logic. NiFi has a web-based user interface for design, control, feedback, and monitoring of dataflows. It is highly configurable along several dimensions of quality of service, such as loss-tolerant versus guaranteed delivery, low latency versus high throughput, and priority-based queuing. NiFi provides fine-grained data provenance for all data received, forked, joined cloned, modified, sent, and ultimately dropped upon reaching its configured end-state. See the System Administrator’s Guide for information about system requirements, installation, and configuration. Once NiFi is installed, use a supported web browser to view the UI. Browser Support Browser Version Chrome Current and Current - 1 FireFox Current and Current - 1 Edge Current an...

[AI] BÀI 4: Tác nhân và môi trường (Agent and Environment)

1. Agent (tác nhân): l à tất cả những gì có thể nhận thức về môi trường của nó thông qua cảm nhận "Sensor" và đưa ra hành động tác động đến môi trường (effective). Có 03 loại agent: human, software, robotic. + Cấu trúc của Agent: Gồm 2 phần: Architecture + Agent Program + Phân loại Agent: - Simple Reflex Agents: Agent phản ứng đơn giản. - Model Based Reflex Agents: Agent phản xạ dựa trên model - Goal Based Agents: Agent dựa trên mục tiêu. - Utility Based Agents: Agent dựa trên tính tiện ích. 2. Turing test : Ứng dụng trong việc kiểm tra và đáng giá máy móc có thật sự thông minh? https://vi.wikipedia.org/wiki/Ph%C3%A9p_th%E1%BB%AD_Turing 3. Các thuộc tính của môi trường Discrete / Continuous − If there are a limited number of distinct, clearly defined, states of the environment, the environment is discrete (For example, chess); otherwise it is continuous (For example, driving). Observable / Partially Observable ...

[LB-HA] Understand about High Available (HA) and Load Balancing

High Available (HA) : Hỗ trợ dự phòng tiến trình. Hoạt đông với cơ chế Active - Passive . Hệ thống tồn tại 02 loại Component với role 'Active' và 'Passive'. Active Component sẽ đảm nhận việc xử lý tiến trình. Passive Component đóng vai trò backup. Trường hợp Active Component gặp lỗi (fail, downtime) hệ thống sẽ chuyển sang hoạt động trên B ackup Component . Quá trình chuyển từ Active Component sang Passive Component gọi là 'Fail over'. Một số khái niệm liên quan đến HA: - FailOver: Chuyển đổi tiến trình chạy trên Passive Component khi Active Component gặp sự cố. - Fail Back: Khôi phục lại tiến trình hoạt động trên Active Component sau khi tiến trình dịch chuyển đến Passive Component trong quá trình FailOver. - Fault - Tolerant: Công nghệ giúp đảm bảo tính liên tục của dịch vụ. Trường hợp một thành phần trong hệ thống bị hoạt động gián đoạn vẫn cho phép toàn bộ hệ thống hoạt động ổn định. Load Balancing : Hoạt động với cơ chế Active - Active ....

[AI] I’ve obtained a new certification: Certified Artificial Intelligence Engineer (CAIE™)

I’m happy to share that I’ve obtained a new certification: Certified Artificial Intelligence Engineer (CAIE™) from United States Artificial Intelligence Institute one of leading AI organization over the world! 📚 📖

Sách: "Đêk biết gì cũng tiến" - Chương 4: Bước đi đầu tiên ở đây

Chương 4 là chương mở đầu của phần II cuốn sách “Đek-biết gì cũng tiến”. Phần này miêu tả những thử nghiệm, những sai lầm và các bài học mà Fsoft học được, khi va chạm với thực tế khắc nghiệt của thị trường công nghệ thế giới, đặc biệt là ở Nhật, Mỹ, châu Âu và có 4 chương: 4,5,6,7! Chặng đường ngàn dặm bắt đầu bằng bước đi đầu tiên Quyết tâm đã có. Mô hình đã có. Tiền đã có. Giờ là phải có người. 10 cán bộ được lựa chọn từ FSS + 3 sinh viên, chưa ai cho thấy có đủ tiêu chuẩn để đi mở cõi. Trương Đình Anh từ chối. Nguyễn Thành Nam ban đầu còn cử Phan Văn Hưng là một sinh viên mới ra trường. TGB nhằm người Việt Nam đang làm các công ty MNC để rủ rê, nhưng cũng thất bại. Trong bối cảnh đó Henry Trần Văn Hùng đã xuất hiện. Anh là Việt kiều, nhưng đỏ (học cùng Nam, Hưng). Anh rất khoái Stico, và đặc biệt là vừa lập đại công “giật” về hợp đồng đầu tiên từ Canada từ công ty Winsoft. Anh được phong là Chinh Tây Đại tướng quân ra mắt trong lễ xuất quân XKPM 1999. Tháng 1/2000, Hùng mở chi...

Learn how to develop Relationships in B2B Sale

3 Step to build network for sale B2B Step 1 : Must have personal branding Step 2 : Expand Funnel network Join event, connect by social network. Step 3 : Select networking Focus and Priority with quanlity relationships. 03 Step to use network in business Step 1 : Find referals instead of 'Cold Calling' Step 2 : Pitching (Brief presentation) Talk about what difference about your product in 1 min-2 min. Step 3 : Must sale solution while present about product If have 1hour to present, let only using 10min-15min for introduce about company, product. Rest time ask the smart question to client to find oppotunity provide solution for their paint point.

[AI] Artificial Intelligence Overview

Artificial Intelligence Overview - Supervised Learning - UnSupervised Learning - Reinforced Learning - Overfit Problem - Natural Language Processing (NLP) - Computer Vision

[Network] ARQ - Automatic repeat request

Automatic Repeat reQuest (ARQ) hay Automatic Repeat Query là một phương thức điều khiển lỗi cho quá trình truyền dữ liệu bằng cách sử dụng ACK (acknowledgements) và Time Out, cho phép truyền dữ liệu tin cậy trên nền một dịch vụ không tin cậy (unreliable service). 1. ARQ protocol Gồm 03 loại Stop-and-wait ARQ Go-Back-N ARQ Selective Repeat ARQ / Selective Reject 2. Lĩnh vực liên quan Linked Data Transport Layer OSI Model. Ngoài ra có một số bằng sáng chế trong lĩnh vực live video contribution environments sử dụng tới ARQ.

Sách: "Đêk biết gì cũng tiến" - Chương 11: Thế nào là công nghệ cao?

Chương 11 sách "Đek biết gì" lý giải tại sao Fsoft lại không có CTO? Trong vision của FPT ghi rõ: “FPT là một tổ chức kiểu mới – Giàu mạnh bằng nỗ lực lao động, sáng tạo trong khoa học kỹ thuật và công nghệ” Đối với Fsoft, đơn vị tiên phong trong việc XKPM, vai trò của công nghệ càng cực kỳ quan trọng. Thế nhưng trên thực tế, ở Fsoft và cả ở mức tập đoàn, không hề có chức danh CTO – Chief Technology Officer cho đến thời gian gần đây. Và ngay cả khi có thì vai trò cũng khá mờ nhạt. Câu chuyện 1: Siêu máy tính và Thế nào là công nghệ? Tháng 10/1984, Viện nghiên cứu công nghệ quốc gia được thành lập với một loạt các lĩnh vực công nghệ cao, cùng với định hướng ứng dụng. GS Vũ Đình Cự cho rằng “chỉ có doanh nghiệp mới đi đến cùng với công nghệ cao, với ứng dụng công nghệ”. Rồi ông lý giải, các nhà khoa học, nhà chuyên môn chỉ đi được đoạn đầu của bài toán phát triển công nghệ kể cả hàn lâm hay ứng dụng, không có doanh nghiệp đón nhận, ứng dụng và sử dụng thì việc làm công nghệ c...

Vu's Blog

Tìm kiếm Blog này