Text

Sijesi: Large Language Model Chatbot dengan Pendekatan Retrieval Augmented Generation dan Prompt Engineering untuk Layanan JakartaProv-CSIRT

---

Abstrak: Penelitian ini bertujuan untuk merancang chatbot berbasis Large Language Models (LLM) sebagai layanan konsultasi insiden siber pada JakartaProv-CSIRT dengan pendekatan Retrieval Augmented Generation (RAG), integrasi dengan GPT dan menggunakan teknik prompt engineering. Penelitian ini dilatarbelakangi oleh kebutuhan akan inovasi dalam mengedukasi masyarakat DKI Jakarta mengenai keamanan siber, terutama karena rendahnya kesadaran akan keamanan siber di wilayah tersebut. Fokus utama penelitian ini adalah peningkatan layanan konsultasi pada masyarakat menggunakan teknologi otomasi berupa chatbot RAG.

Dalam konteks pengamanan chatbot, penelitian ini juga akan mengulas metode pengamanan dari serangan prompt injection. Penelitian ini menggunakan metode pengembangan perangkat lunak System Development Life Cycle Waterfall. Dengan demikian, diharapkan hasil yang didapatkan mampu memberikan kontribusi dalam meningkatkan kesadaran akan keamanan siber di DKI Jakarta melalui penerapan teknologi chatbot yang inovatif dan aman.

Chatbot LLM dengan pendekatan RAG menggunakan teknik prompt engineering mampu menghasilkan jawaban yang lebih baik dibandingkan dengan jawaban human based dan GPT 3.5 dengan mendapatkan nilai tertinggi sebesar 35,26% dalam pengujian A/B. Selain itu, chatbot RAG mendapatkan tingkat kepuasan sangat baik dengan perolehan nilai 86.47 % pada pengujian User Acceptance Testing.

---

Availability

No copy data

Detail Information

Series Title

--

Call Number

2024 HAP s

Publisher

Bogor : Politeknik Siber dan Sandi Negara., 2024

Collation

xv + 93 hlm

Language

Indonesia

ISBN/ISSN

--

Classification

Rekayasa Perangkat Lunak Kriptografi

Content Type

-

Media Type

-

Carrier Type

-

Edition

--

Subject(s)

-

Specific Detail Info

-

Statement of Responsibility

Happy Sandhiyadini Rosari

Other version/related

File Attachment

Comments

---

You must be logged in to post a comment