windowsでgo その72

概要

windows10に、go入れてみた。
colly、やってみた。

インストール

go get github.com/gocolly/colly/v2

サンプルコード

package main
import (
	"fmt"
	"github.com/gocolly/colly/v2"
)
func main() {
	c := colly.NewCollector()
	detailCollector := c.Clone()
	detailCollector.OnRequest(func(r *colly.Request) {
		fmt.Println("visiting", r.URL.String())
	})
	detailCollector.OnHTML("div.article", func(e *colly.HTMLElement) {
		fmt.Println("title:", e.ChildText("h2"))
		//fmt.Println("html:", e.ChildText("div.text"))
		innerHtml, err := e.DOM.Find("div.text").Html()
		if err != nil {
			fmt.Println("Error:", err)
			return
		}
		fmt.Println("HTML:", innerHtml)
	})
	c.OnHTML("span.top_ki a", func(e *colly.HTMLElement) {
		//fmt.Println("link:", e.Attr("href"))
		detailCollector.Visit(e.Attr("href"))
	})
	c.Visit("https://samidare.jp/?p=list&kw=ohi&search=+search+")
}

実行結果

>go run colly0.go
visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557646
title: ohisama ためになる
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/BIM41cuELm8" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557645
title: ohisama ためになる
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/7ct5C3jU_fY" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557644
title: ohisama ためになる
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/_gqEQHgcIpY" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557643
title: ohisama ためになる
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/v2SlpjCz7uE" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557640
title: ohisama ためになる
HTML:
                                                <p><iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/YIl0jOxgD_E" width="240"></iframe></p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557639
title: ohisama ためになる
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/inYuQTeLO6M" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557526
title: ohisama セクシー
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/6V_fTnlj_Dg" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557501
title: ohisama うちのカイエンのダメなところ
HTML:
                                                <p>燃費：　推定4ｋｍ/Ｌ<br/>液晶：　暖かくなると消える。まず消えてる。<br/>バックドア：　止まらない。アシストしないと下がる。<br/>リア背もたれ：　固定されてる<br/>エンジン、掛からない：　燃料 ポンプがあやしい。<br/>スペアタイヤ：　無い。期限切れのパンク修理剤、買った。<br/>サンルーフ：　時々、勝手にチルトする。<br/>天井：　剥がれ<br/>シート破れ：　運転席、革をあてがってる。<br/>助手席シート:　パワーアシストが引っかかる<br/>ボン ネット塗装：　クリア剥げ<br/>マフラー：　曲がってる</p><p>エンジン：　樹脂カバーなし</p><p>バックカメラ：　動かなくなっ た</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557473
title: ohisama カイエンの良いところ
HTML:
                                                <p>1番　エラの張った、ボンネット(V8が隠れてる)</p><p>2番　シルバーの塗装（クリア剥げもカッコイイ）</p><p>3番　2.5トンが余裕で止まるブレーキ（ブレンボに頼らない）</p><p>4番　ポルシェのV8エンジ ン、4.5L、340馬力</p><p>　　　（経験上、1気筒当たり500cc以上無いと、ドッカンが来ない）</p><p>5番　サンルーフ（知らないうちに、チルトアップする。）</p><p>6番　リアガラスが開く（知らなかった）</p><p>追伸</p><p>忘れてた。1番は、ハンドルヒータ ーとシートヒーターです。</p><p>（こたつです。）</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557142
title: ohisama カイエン　動かなくなった
HTML:
                                                <p>セルは、回るが、始動しない。初爆が無いので、燃料が、来きてない。２つ ある燃料ポンプが原因だと思う。</p><p>メカニックに、お願いしたら、忙しいので、持って来いだって。</p><p>（動かないのに）</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557114
title: ohisama カイエン
HTML:
                                                <p>テクニカル・データ</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557113
title: ohisama カイエン
HTML:
                                                <p>ギヤ・チェンジ、トラクション・システム</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557112
title: ohisama カイエン
HTML:
                                                <p>安全にお使いいただくために</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557111
title: ohisama カイエン
HTML:
                                                <p>車のお手入れ</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557110
title: ohisama カイエン
HTML:
                                                <p>万一のときのために</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557067
title: ohisama 切ないです。
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/GcpsTmDO9k0" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557066
title: ohisama カイエン
HTML:
                                                <p>さく引裏表紙.pdf</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557053
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/-iUtwLbBvls" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557052
title: ohisama 宴会
HTML:
                                                <iframe src="https://maps.google.co.jp/maps?output=embed&amp;q=割烹 十文字"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557038
title: ohisama スーパーシェイプ
HTML:
                                                <p><iframe allowtransparency="true" frameborder="no" height="350" loading="lazy" scrolling="no" src="https://codepen.io/ohisama/embed/yLePKeK?default-tab=html%2Cresult" style="width: 100%;" title="Super Shapes">See the Pen Super Shapes by ohisama (@ohisama) on CodePen.</iframe></p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=557035
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/ROnoZ87K9Z8" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556986
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/OhW0AqwzMsU" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556969
title: ohisama フォルクスワーゲン up!
HTML:
                                                <p>昔、乗ってた。</p><p> </p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556956
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/tlNGxJVOkR8" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556955
title: ohisama ルノー　クリオ　スポール
HTML:
                                                昔、乗ってた。

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556929
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/jvLxj-wOK9c" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556928
title: ohisama 録音
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="Audio Recording" src="https://codepen.io/ohisama/embed/emddMvw?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/emddMvw">  Audio Recording</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556927
title: ohisama adiva ad125
HTML:
                                                <p>昔、乗ってた。</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556902
title: ohisama audi a1
HTML:
                                                <p>昔、家族が乗ってた。</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556901
title: ohisama 発振器
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="Tone Generator" src="https://codepen.io/ohisama/embed/RNGGQzG?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/RNGGQzG">  Tone Generator</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556897
title: ohisama SAAB 900
HTML:
                                                <p>昔、家族が乗ってた。</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556876
title: ohisama スマート　フォーフォー
HTML:
                                                <p>昔、家族が乗ってた。</p>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556875
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/8TL__mexkF4" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556858
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/NH65Txsu_4w" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556842
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/ldCti56RP5w" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556812
title: ohisama adiva ad250
HTML:


visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556811
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/NCPH9JUFESA" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556793
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/BFvdvIFsvPg" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556792
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/Bc-nNk9Vy_g" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556789
title: ohisama メトロノーム
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="AudioContext Metronome with Animation" src="https://codepen.io/ohisama/embed/azmNode?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/azmNode">  AudioContext Metronome with Animation</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556788
title: ohisama ピアノ
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="JS Oscillator Piano" src="https://codepen.io/ohisama/embed/ByLKBNd?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/ByLKBNd">  JS Oscillator Piano</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556771
title: ohisama ドラム
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="Drum Machine" src="https://codepen.io/ohisama/embed/WbGrjEa?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/WbGrjEa">  Drum Machine</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556768
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/dAW8QaZV_LY" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556766
title: ohisama 音が出ます
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="Pattern Bath" src="https://codepen.io/ohisama/embed/QwKyvNV?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/QwKyvNV">  Pattern Bath</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556737
title: ohisama 切ないです。
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/xchBMhOe-lc" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556729
title: ohisama 切ないです。
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/9gfamY4ABxc" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556706
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/iER-NZ7GoM8" width="240"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556702
title: ohisama 温泉
HTML:
                                                <iframe src="https://maps.google.co.jp/maps?output=embed&amp;q=小野川温 泉 滝の湯"></iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556701
title: ohisama ストリートファイター
HTML:
                                                <iframe height="300" style="width: 100%;" scrolling="no" title="Ken&#39;s Street Fighter II with animated sprites" src="https://codepen.io/ohisama/embed/wBWVPap?default-tab=html%2Cresult" frameborder="no" loading="lazy" allowtransparency="true">  See the Pen <a href="https://codepen.io/ohisama/pen/wBWVPap">  Ken's Street Fighter II with animated sprites</a> by ohisama (<a href="https://codepen.io/ohisama">@ohisama</a>)  on <a href="https://codepen.io">CodePen</a>.</iframe>

visiting https://samidare.jp/ohisama_llc/note?p=log&lid=556700
title: ohisama 切ないです
HTML:
                                                <iframe frameborder="0" height="200" id="iframe" src="https://www.youtube.com/embed/fRQtDjiRtI8" width="240"></iframe>

以上。