source/posts/Wrapping_Confluent_Kafka_REST_Proxy_API_in_R.org

   1 #+date: <2018-09-14 21:53:53 +0800>
   2 #+filetags: :Apache:Kafka:R:bigdata:API:
   3 #+title: Wrapping Confluent Kafka in REST API using R.
   4
   5 It started of as an attempt to analyse some data stored in [[https://kafka.apache.org/][Apache Kafka]] using [[https://www.r-project.org/][R]], and ended up becoming the start of an R package to interact with [[https://docs.confluent.io/current/kafka-rest/docs/index.html][Confluent's REST Proxy API]].
   6
   7 While [[https://cran.r-project.org/package=rkafka][rkafka]] already allows the creation of a producer and a consumer from R, writing some R functions interfacing with its REST API was an interesting way to learn a bit more about Kafka's inner workings, and demonstrate how easy it is to interact with any REST API from R thanks to [[https://cran.r-project.org/package=httr][httr]].
   8
   9 The result is [[http://git.vanrenterghem.biz/R/project-using-kafka-in-R.git][available to clone on my git server]].