logo
languageJPdown
menu

Octoparse ブログ

Webスクレイピング、データ抽出、データ分析、Webスクレイピングツール、ビッグデータなどに関する記事を掲載しています。

ベクトルデータベースとは?ビッグデータ時代に欠かせない技術

avatarTakahashi
近年、大規模言語モデル(LLM=Large Language Model)が急成長しており、あらゆる産業や仕事に大きなインパクトを与えています。大規模言語モデルを活用するには、膨大なデータ処理が必要ですが、そのデータの保管先としてベクトルデータベースは重要な役割を担います。 本稿ではベクトルデータベースとは何かについて、その基本やメリット、実際の活用例まで解説します。
2023.05.29 · 5 min read

大規模言語モデル(LLM)のデータ取り込みのプロセス、注意点とは?

avatarTakahashi
LLMとは、大規模なテキストデータを学習し、わずかなタスクを与えただけであらゆる言語処理を実行する言語モデルです。本稿では、LLMにおけるデータ取り込みの役割とプロセス、注意点について具体的な例とデータを用いて解説します。
2023.05.29 · 5 min read

AutoGPTとは?自動AIの特徴やChatGPTとの違いを解説!

avatarTakahashi
「AutoGPT」とは、最先端の自然言語処理技術を使用して、文章の生成、自動応答、質問応答、要約、翻訳、解析などのタスクの自動化を可能にするツールです。しかし、それだけなら「ChatGPT」も同じです。この記事は、AutoGPTの特徴や使い方、またはChatGPTとの違いを解説します。
2023.05.22 · 6 min read

第四次産業革命の影響とは?新しい時代に向けてスキルアップが必要な理由とは

avatarTakahashi
現在の私たちは時代の転換点に位置しています。そして、世の中での私たちは個人としてどのようにこの時代の波を乗り越えていくことがもはや直面しなければならない課題になりました。この記事では、現在の時代は何が変わったのかをまとめた上で、その時代の変革に合わせ、個人の生き方や必要なスキルに関する考えを論じさせていただきます。
2023.05.18 · 7 min read

スクレイピングツールを使ってSUUMOの物件データを自動収集する方法を解説!

avatarTakahashi
SUUMOの物件掲載件数は約2万件(2023年3月時点)と国内屈指の情報量を誇るため、スクレイピング技術を使って掲載データを自動収集すれば、不動産データベースとしても活用できます。今回は、プログラミング経験を持たない方でもかんたんにSUUMOの物件情報をスクレイピングする方法を解説します。
2023.05.16 · 6 min read

スクレイピングツールを使ってeBayの商品データを自動収集する方法を解説!

avatarTakahashi
eBayは数多くの商品を扱うため、商品データを収集することで、商品データベースとして活用できます。今回は、プログラミング経験を持たない方でもWebスクレイピングを活用して、eBayの商品情報を収集する方法を解説します。
2023.05.15 · 5 min read

注目を浴びる旅行業のDX化は何か?これからデータ活用へ

avatarTakahashi
コロナウイルスの拡大により、旅行業が大きくダメージを受けました。旅行業界も自らの変革を求めています。ビックデータとデジタル化が急速に発展している今日に、多くの人が旅行業のDX化に関心を払いました。本記事では、DXの概念とメリットを明らかにした上で、現在日本国内の旅行業DX化のあり方と行き方をめぐって展開します。最後のところに、旅行業DX化の推進に役に立つoctoparseのサービスを紹介させていただきます。
2023.05.04 · 7 min read

2023年、AIツール最前線!おすすめの20選を紹介

avatarTakahashi
一言でAIツールといっても、種類が多岐にわたり、ツールによって出来ることに違いがあるため、どのツールを導入すればよいか悩む方も多いはずです。 そこで本記事では、AIツールおすすめ20選をカテゴリ別に紹介します。あわせてAIツール選びに失敗しないための選び方まで解説しますので、AIツールの導入を検討している企業のご担当者様はぜひ参考になさってください。
2023.04.25 · 8 min read

【無料で使える!】簡単で便利な求人サイトの作成方法は?|情報の集め方を解説!

avatarOctoparse
お金を掛けずに無料で求人情報を掲載する方法があるのはご存知でしょうか。今回は無料で誰でも簡単に求人情報を掲載する方法を解説します。求人広告費を削減した分、従業員の待遇を良くすれば、さらに人が集まりやすくなりますので、ぜひ参考にしてください。
2023.03.06 · 6 min read

2023年オススメの価格調査ツール9選

avatarTakahashi
購買の判断基準の中で、最も大きなファクターなのが「価格」です。そのため、出品者側にとって価格設定は重要であり、名経営者の稲盛和夫氏も「値決めは経営である」という言葉を残しています。そして、適切な価格設定のために重要なのが「価格調査」です。しかし、オンラインサイトで競合製品の値段を1つずつ確認するのは非効率でしょう。そこでおすすめなのが、価格調査ツールです。本記事では、価格調査の基本から価格調査ツール10選を紹介します。
2023.03.01 · 6 min read

Webスクレイピングに不可欠!Xpathのまとめ

avatarTakahashi
Webスクレイピングを行う上で、重要な役割を担うのが「XPath」です。しかし、XPathについて正しく理解できていない方も多いでしょう。そこで今回はXPathについて、基本から書き方までわかりやすく解説します。
2023.03.01 · 7 min read

OpenAIのコミュニティサイトからデータを抽出する方法

avatarMurata
人工知能に興味があるエンジニアやAIエンジニアなどが、最近多く利用しているのがOpenAIのコミュニティサイトです。OpenAIのコミュニティサイトには、さまざまなトピックがあり、利用者からのコメントが多く投稿されています。このOpenAIのコミュニティサイトから、自分が目的とするデータを抽出するには、どうしたらいいでしょうか。この記事では、OpenAIのコミュニティサイトからデータを抽出する方法について解説します。
2023.02.27 · 7 min read